大數據運維工程師崗位的工作職責概述 篇1
職責:
1,負責軟體系統的部署運行;
2、負責業務數據系統接入的規劃和實施;
3,理解行業業務,梳理業務數據模型;
4,完成項目實施過程中各類文檔的編寫、收集、整理、歸檔;
5,與客戶保持密切溝通,建立良好的客戶關係,保障良好的客戶滿意度;
有效的分析和控制客戶需求,解決項目實施過程中遇到的質量問題和管理問題。
崗位要求:
1、全日制本科以上學歷,軟體工程、計算機科學相關專業;
2、3年以上的軟體/項目管理實施經驗;
3、熟悉Linux操作,熟練編寫shell/python腳本;
4、了解常用開源分散式系統Hadoop/Spark/Hive/Hbase;
5、熟練使用SQL語句,熟悉ETL工作;
6、熟悉Oracle,mysql等關係型資料庫;
7、具有強烈的責任感與團隊合作精神,出色的溝通及學習能力;
8、有較強的分析問題能力,獨立解決問題能力,能接受在客戶公司辦公。
大數據運維工程師崗位的工作職責概述 篇2
職責:
I、負責Hadoop集群的安裝部署、維護及調優:
2、負責spark的安裝郵署、維護及調優:
3、負責基於大數據平台開發的套用系統的部署、日常維護、調優和問題處理
4、負責ELK 平台的部署及維護。
技能要求:
1 、2年以上大數據運維工仵經驗;
2、熟悉Hadoop生態圈技術棧及各個組件原理:
⒊、熟練掌握HDFS、Hive、HBase、sρark、sqooρ 等組件,具備部署、維護、調優的能力:
4、熱悉kylin技術原理,有一定的維護經驗優先:
5、掌掇ELK的日常維護技能·有一定的維護.經驗優先:
6、有一定的HQL/sql 性能調優經驗;
7、具備基本的 java、python等語言開發能力優先:
8、有較強的溝通、團隊協作及學習能力。
大數據運維工程師崗位的工作職責概述 篇3
職責:
1. 負責大數據平台的規劃、部署、監控、系統最佳化及運維等工作,保障系統7*24小時運營;
2. 為線上服務高效穩定運行負責,支撐業務和數據量的快速擴張,發現並能解決重大故障及性能瓶頸;
3. 深入理解系統平台及大數據相關運維技術,持續最佳化集群服務架構;
4. 對大數據體系下新技術的調研、套用、對內培訓。
職位要求:
1. 至少3年以上大數據運維經驗, 深入理解Linux系統,運維體系結構;
2. 深度最佳化HADOOP平台MR作業/計算框架/存儲技術,提升集群吞吐並降低成本;
3. 具有CDH(或者HDP)/HDFS/YARN/HIVE/ES/Kylin/Hbase/Kafka/Spark/Storm/Flume/Impala/Hue/Kettle/Flink等大數據系統的運維經驗,有開發經驗;
4. 熟悉HADOOP生態,有數據安全相關工作經驗, 並能對平台CPU/MEM/IO/網路/調度中一個或多個方面的性能調優;
5. 熟練掌握shell/python中的任意一門腳本語言;
6. 強烈責任感、縝密的邏輯思維能力,良好的團隊協作能力,具備良好的項目管理及執行能力;
大數據運維工程師崗位的工作職責概述 篇4
職責:
1. 管理公司資料庫,提供高可用、高性能資料庫系統,並保障系統穩定運行。
2. 負責資料庫性能監控與最佳化,故障處理,數據備份及災難恢復。
3. 負責資料庫自助平台的高可用架構設計和負載均衡的設計和實現。
4. 負責業務系統資料庫管理,包括資料庫日常維護,系統數據安全以及許可權管理、故障處理、日常錯誤情況處理等。
5. 負責依據業務需求最佳化數據存儲結構,負責資料庫系統部署方案的計畫、設計和實施。
6. 負責系統資料庫定期檢查,進行性能分析與調優,充分保證信息系統數據的安全及系統高效運行。
任職資格:
1. 全日制本科及以上學歷,計算機或相關專業
2. 熟悉MySQL實現原理,InnoDB,MyISAM,Memory引擎,熟悉存儲過程和事務。
3. 熟悉資料庫原理、精通資料庫核心參數的設定和調整,有規劃、設計、部署以及資料庫性能最佳化經驗。
4. 具備資料庫設計、SQL最佳化能力,能根據業務需求,提供高可用、高性能、可擴展、穩定可靠的資料庫解決方案。
5. 了解MongoDB等非關係型資料庫的特點。了解Redis,Memcache等記憶體資料庫及快取系統的原理及實現。
6. 熟悉Linux作業系統,對主機、存儲、網路有一定的了解, 會使用Shell/Perl/Python中的一門腳本語言。
7. 有Hadoop/Kafka/Spark/ElasticSearch相關經驗的優先考慮。
大數據運維工程師崗位的工作職責概述 篇5
職責:
1、負責公司大數據/Hadoop/hive/hbase/flink等離線實時數據平台運維保障;
2、負責內部大數據自動化運維以及數據化運營平台開發工作;
3、負責Hadoop/Hbase等系統的業務監控、持續交付、應急回響、容量規劃等;
4、深入理解數據平台架構,發現並解決故障及性能瓶頸,打造一流的數據平台;
5、持續的創新和最佳化能力,提升產品整體質量,改善用戶體驗,控制系統成本。
6、善於表達、理解客戶數據服務需求,具備數據需求轉化落地能力。
任職要求:
1、大學本科及以上學歷,計算機或者相關專業;
2、深入理解linux系統,運維體系結構,精於容量規劃、性能最佳化;
3、具備一定的開發能力,精通一門以上腳本語言;(shell/perl/python等),熟悉java等開發語言一種及以上優先;
4、具備很強的故障排查能力,有很好的技術敏感度和風險識別能力;
5、能夠承受較大的工作壓力,以結果和行動為準則,努力追求成功;
6、熟悉hadoop、hbase、hive、spark、tez等原理並具備管理,配置,運維經驗;
7、熟悉分散式系統設計范型,有大規模系統設計和工程實現的了解者優先。
8、具有運營商流量數據加工處理經驗者優先。
大數據運維工程師崗位的工作職責概述 篇6
職責:
1、熟悉基礎網路知識,熟悉TCP/IP協定工作原理;
2、熟悉WEB相關技術,包括Apache/Nginx/tomcat、Memcached/redis/mysql等套用服務的安裝、配置和維護;
3、熟悉伺服器硬體,具備系統、套用軟體的報錯及故障定位、處理的能力;
4、檢測、跟蹤和分析流行安全漏洞、設計和實施防禦方案。
任職要求:
1、專科及以上學歷,專業不限;
2、有linux理論基礎,熱愛技術崗位,能夠及時補充自己技術缺陷;
3、有團隊意識,責任心強,對自己有一定的規劃;
4、至少掌握Shell/Python其中一種腳本編程;
5、批量、自動化管理伺服器集群的能力,有較強的技術文檔總結性工作的經驗。
大數據運維工程師崗位的工作職責概述 篇7
職責:
1.負責本部門系統運維管理工作,常見的維護,搭建,監控回響、負責系統的變更與發布工作,線上服務漏洞的排查,版本升級工作處理等等
2.參於解決系統技術方面的瓶頸,尋找可行的改進方案等突破性工作
3. 負責海外業務系統的方案設計、溝通協調等
4.負責領導交辦的其他工作;
任職要求:
1. 計算機套用、網路管理、信息管理、計算機科學與技術等計算機相關專業;
2. 至少具備4年以上企業IT運維經驗;
3 對Linux系統下的各類典型套用軟體的性能、使用場景有深刻的認識;
4 精通Python/Shell等任意一種腳本語言,能高效進行日常維護工具開發;
5 對主流資料庫(Mysql/Mongodb/Redis等)有深入了解,有實際部署與常見管理經驗;
6 做事情嚴謹踏實,有責任心,團隊協作能力強,能承受較強的工作壓力,有服務意識式;
7 熟悉Java、Tomcat、Nginx、Mysql等軟體的安裝、配置、故障排查、性能調優等;
8 具備良好的思維邏輯,以及文檔編制能力。
9 要求英文流利,能和外方用英文進行技術溝通、探討,並能查看或編寫英文技術文檔。有外資公司技術工作經驗者優先。
大數據運維工程師崗位的工作職責概述 篇8
職責:
1、 總部、分公司計算機、伺服器、筆記本電腦、硬軟體、計算機網路運營管理;
2、 公司整體硬體及網路信息化管理規劃及相關制度、流程建設並組織實施;
3、 公司郵件、網站伺服器管理、日常維護;
4、 與硬體及網路供應商保持良好的合作關係,以確保系統問題得到快速的支援;
5、 新員工入職信箱、系統等許可權開通;
6、 領導交代的其他相關事宜。
任職資格:
1、大專以上學歷,計算機等相關專業畢業,接受優秀應屆畢業生;
2、了解或者熟悉HELPDESK;熟悉基本網路維護作業,知悉基本布線規則;
3、紮實的計算機軟硬體基礎知識;
4、服務意識強、辦事效率高、有責任心;
5、做事積極主動、有一定溝通能力、較強的工作熱情、組織管理能力。
大數據運維工程師崗位的工作職責概述 篇9
1、負責5G超高清視頻運維支撐工作;
2、負責5G超高清視頻CDN對接,維護,監控和配置管理;
3、負責5G超高清視頻資源管理、配置、監控、維護;
4、負責5G超高清視頻便轉碼設備配置、維護;
5、負責5G超高清視頻雲資源對接,管理、配置和維護;
6、負責4K、VR直播支撐工作。
大數據運維工程師崗位的工作職責概述 篇10
職責:
1、企微雲平台的日常運行管理,處理各種運維事故及事件;
2、負責企微雲套用的部署;
3、負責伺服器的規劃、調試最佳化、日常監控、故障處理、數據備份、日誌分析等工作;
4、參與運維流程制定,確保任何突發情況都能高效回響;
5、整理各類運維文檔,沉澱經驗。
工作要求:
1、本科及其以上學歷,3年以上網際網路公司Linux運維相關經驗;
2、精通zabbix監控系統的搭建和維護,能夠開發自定義腳本;
3、熟悉Nginx/Apache/Tomcat等Web套用伺服器部署、最佳化;
4、熟悉數據MySQL資料庫集群的部署,監控,最佳化;
5、有Elastic Search、Mongodb、Hbase等部署、監控、最佳化經驗的優先考慮。
大數據運維工程師崗位的工作職責概述 篇11
職責:
1、負責最佳化公司IT系統以及各套用系統的體系架構;
2、負責系統升級、擴容需求與資源落實,配合開發需求,測試、調整運維平台;
3、負責網路以及伺服器的網路設定、維護和最佳化、網路的安全監控、系統性能管理和最佳化、網路性能管理和最佳化;
4、負責設計並部署相關套用平台,並提出平台的實施、運行報告。
5、負責配合開發搭建測試平台,協助開發設計、推行、實施和持續改進。
6、負責相關故障、疑難問題排查處理,編制匯總故障、問題,定期提交匯總報告。
崗位要求:
1. 2年以上大中型線上系統運維工作經驗、精通Linux系統及常見服務的安裝配置,熟悉常見的負載均衡實現方案並有實際實施經驗;
2. 精通Linux系統如Redhat、Gentoo、精通Apache、NginX、MySQL、FTP、DNS、Squid等常用服務的安裝、配置和維護;
3. 精通和靈活運用1種以上的腳本語言,包括:Shell、PERL、PHP、Python等;
4. 能夠熟練排查運維過程中出現的服務故障、系統故障、網路故障;
5. 高度的責任感,較強的故障分析及排除能力,善於在工作中學習,能夠承受工作壓力。
大數據運維工程師崗位的工作職責概述 篇12
職責:
1、負責伺服器硬體解決方案的需求管理、規劃及制定;
2、負責協調內外部資源、確保硬體解決方案按客戶要求落地交付,跟蹤推動後續的最佳化工作;
3、負責撰寫硬體解決方案與相關文檔;
4、負責收集行業趨勢及業界主流技術,對負責的硬體解決方案進行市場調研及競品分析;
任職要求:
1、計算機或相近專業本科及以上學歷;5年以上相關工作經驗;
2、精通PC伺服器硬體技術和主流產品,熟悉與PC伺服器關聯密切的網路、存儲及IDC等技術,熟悉VMWare、docker、CloudStack、hadoop等主流套用的技術方案;
3、具體較強的文檔撰寫及溝通表達能力,熟練使用PPT、EXCEL等工具;
4、具備行業視野,對行業發展趨勢有敏銳的洞察力及創新意識,有較強的需求分析及解決方案規劃能力,能提煉用戶需求並轉化為解決方案能力,具備商業敏感性;
5、熟悉雲平台產品及解決方案,具備相關工作經驗優先考慮;