大數據運維工程師的主要職責說明

大數據運維工程師的主要職責說明 篇1

職責:

1. 管理公司大數據集群,提供高可用、高性能大數據集群系統,並保障系統穩定運行

2. 負責大數據集群性能監控與最佳化,故障處理,數據備份及災難恢復

3. 負責大數據集群自助平台的高可用架構設計和負載均衡的設計和實現

4. 負責業務系統大數據集群管理,包括資料庫日常維護,系統數據安全以及許可權管理、故障處理、日常錯誤情況處理等

5. 負責依據業務需求最佳化數據存儲結構,負責資料庫系統部署方案的計畫、設計和實施

6. 負責系統大數據集群定期檢查,進行性能分析與調優,充分保證信息系統數據的安全及系統高效運行

任職資格:

1. 全日制本科及以上學歷,計算機或相關專業,1年以上hadoop運維經驗

2. 熟悉Hadoop生態圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安裝配置和最佳化

3. 熟悉MySQL等關係型資料庫的部署與最佳化,了解MongoDB或Cassandra等NoSQL資料庫

4. 熟悉Linux類作業系統的基礎命令操作,能夠編寫腳本開展日常運維工作

5. 熟悉Linux開發環境,會使用Shell/Java/Python中的一門腳本語言

6. 熟悉常見開源工具如Nginx、Zabbix、Grafana等的安裝配置和使用

大數據運維工程師的主要職責說明 篇2

職責:

1、負責公司大數據集群的構建,任務調度、監控預警,持續完善大數據平台,保證穩定性、安全性;

2、負責集群容量規劃、擴容、集群性能最佳化及日常巡檢和應急值守,參與大數據基礎環境的架構設計與改進;

3、深入研究大數據業務相關運維技術,持續最佳化集群服務架構,探索新的Hadoop、Spark運維技術及發展方向;

4、具備ownership,故障排查能力,有很好的技術敏感度和風險識別能力;

5、良好的服務意識,主動思考,自我驅動力。

任職資格:

1、熟悉RedHat、CentOS、Ubuntu系列Linux系統的配置、管理、核心最佳化。能夠獨立編寫(Shell/Python)腳本語言,腳本開展日常伺服器的運維;

2、熟悉hadoop生態圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、調試和運維經驗; 熟悉分散式日誌分析系統ELK及相關技術;

3、熟悉軟硬體設備,網路原理,有豐富的大數據平台部署,性能最佳化和運維經驗; 了解運維高容量、大流量、大並發Web系統的業務知識以及解決方案;

4、工作認真負責,有較強的學習能力,動手能力和分析解決問題的能力;

5、能夠利用各種開源監控工具、運維工具,HA、負載均衡軟體完成工作任務;

6、mongodb、mysql等配置、調優和備份。

大數據運維工程師的主要職責說明 篇3

職責:

1.負責參與公司大數據基礎架構平台規劃,運維,監控和最佳化工作,保障數據平台服務的穩定性和可用性;

2.研究大數據前沿技術,改進現有系統的服務和運維架構,提升系統可靠性和可運維性;

3.負責公司Hadoop核心技術組件HDFS、Yarn、MapReduce、HBase、Storm大數據存儲計算核心的監控和日常運維工作。

4.獨立完成大數據運維過程中問題定位、問題解決、並進行總結及部門的大數據基礎技能培訓;

任職要求:

1. 計算機、信息系統、數學或相近專業本科以上學歷;

2. 擁有至少3年以上Hadoop運維經驗、具備基於CDH與HDP的維護經驗;

3. 熟悉Hadoop大數據生態圈服務的工作原理,具備相關實戰維護經驗,包括但不限於HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;

4. 至少獨立維護過中大型Hadoop集群系統服務;

5. 至少精通Python,shell中的一種,了解JAVA;有良好的系統性能最佳化及故障排除能力;

6. 有大數據架構師工作經驗更佳;

大數據運維工程師的主要職責說明 篇4

職責:

1、負責大數據運維體系中的監控工作;

2、負責處理用戶服務請求事件;

3、負責監控報警事件的處理;

4、負責協助完善監控體系;

5、負責監控平台運維工作,持續最佳化監控體系;

6、按時完成領導交辦的其他相關工作。

任職要求:

1、大專及以上學歷,計算機相關專業,1年以上大數據系統運維經驗;

2、熟悉linux作業系統,熟悉hadoop、hive、hbase、yarn、spark、storm等組件的原理及運維方式;

3、熟悉中間件工作原理,對TOMCAT/jetty/nginx/微服務有一定了解,具備一定的操作能力;

4、至少熟悉python/bash/shell一種或多種語言,可獨立編寫維護及監控腳本;

5、有強烈的求知慾和鑽研技巧,具有良好的獨立分析問題與迅速解決問題的能力;

6、有良好的職業責任心和團隊協作意識;

7、能適應7*24小時三班倒工作時間。

大數據運維工程師的主要職責說明 篇5

職責:

1、回響及解決客戶的技術要求、疑問以及系統使用過程中的各種問題;

2、負責服務過程中問題現象和處理方案的收集撰寫,形成知識庫,並對知識庫進行維護更新;

3、及時反饋技術處理過程中的異常情況,及時向上級反饋告警,同時主動協調資源推動問題解決;

4、定期對所有服務問題進行分析,並對服務效率有影響的問題提供反饋意見,提升服務支撐團隊專業度。

5、能夠獨當一面,具備獨立思考和處理問題的能力,並能夠與客戶建立良好的關係。

6、明確工作範圍,定期與客戶溝通工作量,並獲取客戶回執,及時歸檔。

7、能夠快速熟悉參與項目中的業務,總結後與研發定期溝通。

崗位要求:

1、3年及以上工作經驗,計算機相關專業本科及以上學歷;

2、熟悉weblogic中間件的安裝部署;

3、熟悉Oracle資料庫的增刪改查操作;

4、了解ETL相關內容,如Informatica、kettle等,具備基礎操作技能;

5、了解BI報表相關內容,如cognos、tableau、自助式分析工具等,具備基礎操作技能;

6、掌握基本的windows/linux操作命令;

7、熟練操作Office辦公軟體;具有較強的文檔理解與編寫能力,具有較強的語言表達及溝通協調能力;

8、熟悉電網業務優先。

大數據運維工程師的主要職責說明 篇6

職責:

1. 生產及測試伺服器環境塔建,部署,維護;

2. 監控及分析生產環境服務性能,保障服務穩定安全可用;

3. 內部開發環境部署及維護;

4. 生產及開發環境資料庫維護,數據備份,安全管理,日誌分析,性能調優等;

5. 配合開發人員對系統及服務進行調優;

6. 診斷系統故障,異常事件的協調處理。

任職要求:

1、熟悉網路相關理論及技術,了解TCP/IP、HTTP等協定;

2、熟練操作Linux,能夠配置Linux下各種服務,能夠編寫bash腳本;

3、熟悉shell或其他腳本語言;

4、熟悉java環境配置,熟悉zookeeper、redis和activemq等的安裝與配置;

5、了解 sql語句,了解MySQL資料庫的管理和維護;

6、了解負載均衡伺服器、快取伺服器的配置;

7、了解網路安全相關知識。

大數據運維工程師的主要職責說明 篇7

職責

1、負責辦公室交換機、防火牆、上網行為管理的運維工作、故障處理、網路最佳化;

2、負責各類網路及安全設備的基本信息登記、運行信息更新及維護與管理;

3、負責桌面計算機軟硬體(計算機、顯示器、電話、網路設施和其他附屬硬體設施,如印表機、掃瞄器)安裝、配置、升級、運行維護與管理,保障桌面系統正常運行,滿足日常工作的需要;

4、負責對公司綜合布線系統的維護與管理;

5、負責電話、視頻會議系統的運行維護與管理;

6、撰寫運維技術文檔,統計整理運維數據。

任職要求:

1.、熟悉常用路由協定、網路技術的原理並熟練套用,有獨立網路故障排查和定位問題的能力;

2、具有團隊精神,善於溝通;

3、具備優秀的計算機軟、硬體知識,能夠快速判斷軟、硬體故障,並且能夠指導用戶使用主流軟、硬體;

4、具備網路基礎知識,對相關網路設備及綜合布線有一定了解;

5、具備良好的服務意識與職業素養,溝通能力和良好的語言表達能力,具備團隊協作精神;

6、熟悉常用的作業系統(Windows、linux)的安裝、操作、配置、故障處理,具備微軟商業桌面部署的相關知識及實施能力;

7、具有信息安全防範意識,對網路、系統安全的整體防範和應對措施有一定實踐經驗。

大數據運維工程師的主要職責說明 篇8

職責:

1、負責公司雲平台伺服器、機房伺服器的管理、維護;

2、負責對公司相關業務平台(APP、web 網站、資料庫等)的網路規劃、伺服器規劃;

3、負責對公司相關業務平台運行的安全性和穩定性,對伺服器系統漏洞能及時發現和修補;使用腳本對伺服器和項目的性能和資源進行監控;

4、負責網路伺服器數據備份、安全策略、穩定運行。

5、負責相關係統運維文檔的撰寫、整理和更新。

崗位要求:

1、計算機等相關專業畢業,一年以上網路系統維護工作;

2、熟練掌握騰訊雲、阿里雲相關產品套用,包含但不限於雲伺服器、雲資料庫、負載均衡、CDN、檔案存儲、數據傳輸、伺服器安全等套用的配置搭建和操作;

3、熟悉常用伺服器系統軟體的部署和調優,常用網路監控軟體的部署和使用,具有良好的網路安全意識;

4、具備良好的溝通協調能力和團隊協作能力,具備良好的職業道德和職業操守。

大數據運維工程師的主要職責說明 篇9

職責:

1、能貫徹和落實公司的各項管理制度、公司業務規範,按時完成相關流程要求的交付物提交;

2、從事網路安全、通信設備的駐場安裝調試和維護工作(包括定期巡檢、技術支持)等;

3、接收和協助解決客戶遇到的各種現場技術問題,能夠對用戶的需求給出相應的解決方案;

4、快捷準確並按要求提供所有報告、數據,如故障處理報告、周報總結等;

5、學習領悟力強,善於主動鑽研,向客戶提供全面優質的服務。

任職要求:

1、專科以上學歷,通信或計算機相關專業,一年以上相關工作經驗;

2、熟悉掌握CISCO、華為等主流廠商的路由器/交換機設備配置和維護;

3、熟練掌握相關網路技術、TCP/IP協定、路由與交換技術等,具有CCNP或HCNP認證或同等經驗證者優先;

4、具有良好的文檔撰寫能力,語言溝表達能力強,能同客戶建立良好的溝通關係,適應團隊合作,能適應中短期出差;

5、思維清敏捷,具有較強網路故障排查和解決經驗的能力;較強的邏輯分析能力和對問題的診斷能力。

6、了解X86伺服器,熟悉LINUX命令等。

大數據運維工程師的主要職責說明 篇10

職責:

1、負責公司海外遊戲運營平台基礎套用架構設計、部署、性能調優以及維護。

2、負責公司大數據平台套用環境的架構設計、部署、性能調優以及維護。

3、協助開發部進行平台代碼配置管理的規劃、流程和策略的制定,嚴格執行代碼的版本管理、發布管理、變更管理和配置審計。

4、負責公司企業信箱系統的日常運維管理

任職要求:

1、本科以上學歷,三年以上網際網路平台從業經驗,有遊戲行業從業經驗優先考慮。

2、精通Centos/Ubuntu等Linux作業系統,對系統性能安全最佳化有深入理解。

3、精通Lvs/Haproxy+Keepalived+Nginx/openresty+Resin/Tomcat+Redis/Mongodb/Memcache+Mysql的配置、使用以及調優,有豐富的DBA工作經驗。

4、熟悉git版本控制工具的使用。

5、熟悉Jenkins持續集成工具的使用,對maven的構建過程與原理有所了解。

6、熟悉Elk+Zookeeper+Kafka分散式日誌集群系統有比較深入的實際工作經驗。

7、熟悉Hadoop+Spark大數據開發框架,能給予大數據團隊提供基礎的大數據套用服務。

8、熟悉postfix+extmail+SpamAssassin郵件系統的部署;熟悉常用的反垃圾郵件組件。

9、具有shell或python語言開發能力,對自動化運維體系有比較深刻的理解,認同devops工作理念。

大數據運維工程師的主要職責說明 篇11

1.對伺服器進行日常維護,確保各項服務連續正常運行,無重大事故;

2.研究運維相關技術,配合公司技術架構師根據系統需求制定運維技術方案。

3.負責套用伺服器及套用中間件的安裝.升級.調試.監控.日常維護.性能最佳化.故障處理等工作

4.負責公司產品的部署及雲伺服器日常監控與日常安全檢查和風險報告;

5.負責伺服器異常或故障的受理.跟蹤.解決以及統計分析;

6.負責伺服器資源的管理,備份策略的制定及執行監控;

7.處理線上伺服器及中間件的故障,挖掘問題根源,規避問題浮現,保障業務連續性。

大數據運維工程師的主要職責說明 篇12

職責:

1. 負責網站維護、管理與推廣,保證網站的安全運營。

2. 負責網站資料的上傳與更新,與其他網站運營事務。

3. 獨立制定網站的內容結構,設計並負責實施和後期維護。

4. 處理公司內部其他的行政事務。

任職要求:

1. 有網站運營經驗者優先。

2. 良好的團隊協作能力,踏實肯乾。

3. 熟練使用辦公軟體及其他相關軟體技能。

4. 熟練掌握和使用國語。

大數據運維工程師的主要職責說明 篇13

1、日常桌面系統維護、桌面基礎網路支持、桌面終端的硬體維護

2、設備巡檢、桌面初始化、桌面預裝升級服務,掌握主流的桌面作業系統,能獨立進行Windows XP 、Win7、Win10、MAC等安裝、配置、基本功能,及常見問題故障診斷

3、客戶端病毒查殺、升級與恢復

4、office等常用辦公軟體的維護

5、協助進行設備資產普查服務

6、郵件系統常見問題解決

7、基於Windows環境的域管理

8、視頻會議、電話會議運維及維護等會議支持服務

9、可協助Server team/Network team的工作

10、其他接口人交予的相關工作

大數據運維工程師的主要職責說明 篇14

職責:

1.負責公司內部區域網路網路/套用的日常維護、技術評估和項目實施,包括網路交換機/路由器/防火牆管理、網路監控系統等;

2.負責對公司機房內部信息系統及設施的日常檢查、監控、運維分析;

3.負責PC機器、印表機等日常辦公設備維護;技術檔案維護;

4.負責套用伺服器的實施部署與搭建;

5.負責套用伺服器的資源調配和系統安全、數據備份;

6.負責套用伺服器各項數據的監控,如流量、負載等;

7.負責測試環境的搭建工作。

任職資格:

1、大專及以上學歷、計算機及相關專業;

2、具有2年以上網路管理、伺服器管理、相關網路設備設施的維護等工作經驗;

3、精通Linux 、Windows系統及網路知識,可以安裝架構一些基礎環境等;

4、具備對日常辦公電腦、網路設備等常見故障的處理能力;

5、表達能力強、邏輯思維能力清晰、工作積極主動,具有良好的溝通能力、執行能力和團隊合作精神,責任心強,能夠吃苦耐勞,服務意識佳。

大數據運維工程師的主要職責說明 篇15

職責:

1、 駐客戶現場負責套用系統日常運維,回響並處理事件和問題;

2、 套用系統的使用指導和系統數據維護管理工作;

3、 維護客戶關係,對客戶的要求及時回響和反饋,協助客戶進行套用系統管理

4、 負責完成上級交辦的其他工作。

職位要求:

1、 大專及以上學歷,計算機相關專業,1年以上的運維工作經驗;

2、 性格開朗,有較強的溝通、表達及邏輯分析能力,具備較強的學習能力,較強的適應能力,善於主動思考問題,創新性強;

3、 工作踏實認真、有責任心、具備良好的服務意識;

4、 了解oracle,mysql資料庫,熟練使用常用的sql語言;

5、 了解各類中間件的使用,如tomcat,weblogic等;

6、 熟悉運維服務管理相關流程者優先;

大數據運維工程師的主要職責說明 篇16

職責:

1、協助計算機相關軟、硬體的故障診斷,排錯和升級工作;

2、協助外設設備維護:印表機、傳真機、複印機設備維護工作;

3、現場緊急事件支持與協助;

4、完成上級交辦的臨時事務。

任職要求:

1、大專及以上學歷,計算機相關專業;

2、具備基本的計算機硬體、網路配置等相關知識;

3、能對常見的電腦終端故障進行快速定位與排障;

4、具備良好溝通表達能力及團隊合作能力。

大數據運維工程師的主要職責說明 篇17

職責:

1、負責網站的日常運維、部署、監控、系統最佳化等工作,保證線上環境穩定運行;

2、負責公司內部開發環境和測試環境的建立、維護和日常管理工作,確保開發和測試正常進行;

3、處理各類異常和故障,確保系統平台的穩定運行;

4、熟練使用監控平台和工具,對線上各種業務及系統做到時時監控,並且能夠根據需求調整監控模板等;

5、能夠與研發密切配合,最佳化部署架構,提昇平台穩定性,能夠快速定位技術問題,保證線上環境的高效運行。

任職要求:

1、計算機本科及以上學歷;

2、一年以上大中型線上系統運維工作經驗。

3、深入理解linux系統,精通各種伺服器部署、維護及性能最佳化工作;

4、熟悉項目開發環境(版本控制、持續集成等)管理,精通Bash shell進行腳本編寫;

5、熟練掌握Nginx,Apache,memcached,mysql,mongodb,redis,zabbix等常用軟體的安裝配置和管理;

6、.精通目前主流的監控方式,並且能夠完成監控模板的調整及編寫工作;

7、認真嚴謹、平實穩重、責任心強,良好的溝通能力及團隊合作精神,能承受一定工作壓力

大數據運維工程師的主要職責說明 篇18

1.根據公司信息系統要求,負責公司網路的運營和維護,網路內部安全機制的建設、管理,網際網路的監控管理,公司內部網路Ip地址的劃分、協調及IP許可權。負責防火牆、路由器、數據交換機、光端機、UPS的維護及狀態監控,性能最佳化,配置修改;負責公司專線、光鏈路的維護及監控、測試、報障;確保公司網路正常。

2.根據公司信息系統要求,負責公司網路病毒防禦系統的服務端管理、模組更新、代碼升級,伺服器病毒預防工作及客戶端防毒工作;確保公司不受病毒影響。

3.維護員工電腦和作業系統正常使用。

4.其他部門領導交辦的事務。

大數據運維工程師的主要職責說明 篇19

1、負責公司的軟體系統的日常維護和培訓;

2、負責與軟體服務廠商的日常溝通協作;

3、負責公司BI系統數據報表的開發和培訓;

4、完成上級交辦的其它事項;

5、完成與IT相關的綜合性支持工作。

大數據運維工程師的主要職責說明 篇20

職責:

1、負責系統故障的應急回響和問題處理;維護linux、windows伺服器,監控伺服器性能;

2、負責Linux作業系統的安裝、配置,系統監控和維護,問題處理,以及軟體升級,安全最佳化,保證其穩定、高效運行;

3、負責公司平台及套用系統維護工作;

4、負責Linux 平台下的系統維護,提高系統的可用率及可維護性;

5、負責Linux系統及應用程式進行性能分析,最佳化,問題跟蹤;

任職資格:

1、三年以上系統配置、管理、維護經驗。

2、精通Linux系統、精通MySQL、FTP、DNS等常用服務的安裝、配置和維護;

3、熟悉linux負載均衡技術;能熟練利用各種工具進行系統狀態監控(cacti、Nagios,bigsister等);

4、熟悉Linux下不同資料庫的安裝和調試及簡單最佳化;

5、掌握redis、Docker、自動化運維DevOps、高可用架構、大數據處理工具(Hive、Spark等)相關技術者或有團隊管理經驗者優先考慮;

6、有阿里雲、騰訊雲等雲伺服器運維經驗優先;

大數據運維工程師的主要職責說明 篇21

職責:

1、負責部門相關套用系統運維,保障系統7*24小時穩定運行;

2、負責推進現網相關問題改進,提高運維效率和質量;

3、根據業務需要能夠合理的運用阿里雲運維產品;

4、主動性強,具有良好的溝通、協調和組織能力,富有團隊精神。

崗位要求:

1、具有3年網際網路運維相關工作經驗;

2、獨立排錯能力,熟練使用linux、windows、python,熟悉TCP/IP;

3、能夠獨立維護大中型區域網路,熟悉交換機路由器,能夠獨立上架、調試區域網路;

4、熟悉機房管理要求,熟悉機房基礎設施的基本管理和技術;

5、對系統常見套用軟體有運維能力,如nginx、mysql、lvs,memcached、redis、tomcat、dns等,能夠快速實施部署、配置及排錯。

大數據運維工程師的主要職責說明 篇22

職責:

1、負責綜合經營管理系統的事件處理、問題解決、知識積累,配合執行變更發布、配置管理、數據維護;參與系統安裝、交接測試等工作;

2、負責根據業務部門提出的最佳化(bug修訂)、變更、改進、完善等新需求,在現有套用系統的基礎上從事分析設計、編程開發、測試交付等工作。

任職要求:

1、大學本科以上學歷,三年以上工作經驗,至少一年.NET開發經驗;

2、精通Asp.net(C#)、JQuery,XML、CSS、AJAX等語言或Web技術,能獨立完成系統bug修訂,系統最佳化,包含需求變更修改;

3、熟悉Windows Service、Web Service/WCF以及多執行緒編程技術;

4、理解.net多層機制, 熟練掌握B/S模式開發;

5、熟悉SQL20xx資料庫系統,能使用SQL進行編程,能對資料庫性能進行最佳化;

6、有較強的自學能力,有良好的職業素養;

7、熟悉Microsoft Dynamics CRM、Sharepoint20xx開發經驗者優先考慮;

8、善於並樂於各式溝通,具備極強的團隊精神和工作熱情。

大數據運維工程師的主要職責說明 篇23

1、整體設計,參與項目架構設計,運維方案撰寫,推動落地實施。

2、實施部署,合理計畫,把控項目實施部署節奏,保障工作質量。

3、系統最佳化,主導必要系統最佳化工作,解決系統性能瓶頸。

4、日常運維,分析運維指標,最佳化執行過程,提供工作效率。

5、問題處理,剖析問題根源,深刻理解原理,給出明確的解決思路。

6、運維管理,主導新技術調研並分享,考慮系統穩定性、執行高效性,管理一個項目運維交付。

大數據運維工程師的主要職責說明 篇24

職責:

1、進行工作人員計算機、印表機、網路、套用系統維護工作;

2、解決日常網路及計算機故障,配合進行系統性故障的查修;

3、負責病毒的查殺,維護網路系統安全,負責軟體的安裝和維護;

4、域伺服器、資料庫伺服器、WEB伺服器、郵件伺服器的維護。

任職資格:

1)年齡:不限 學歷:大專及以上;

2)具有一定溝通能力,有團隊合作精神,工作心態良好;

3)學習能力強,能很快吸收新的技術理念知識;

4)優先錄取具備MCSE的工程師;

5)優先錄取熟悉常規IT產品的硬體、作業系統的操作及安裝,掌握常用的Linux命令、Windows的各項服務、套用配置。