大數據運維工程師崗位的基本職責描述

大數據運維工程師崗位的基本職責描述 篇1

職責：

1、負責大數據基礎架構平台(Hadoop/Spark/MPP DB)的自動部署;

2、負責線上數據平台的運維，保障服務的穩定性和可用性;

3、參與超大規模數據快速查詢系統的架構設計和開發;

4、研究大數據前沿技術，改進現有系統的服務和運維架構，提升系統的運維效率。

任職要求：

1. 熟悉linux shell及SQL語言

2. 了解Hadoop等分散式技術，數據倉庫技術;

3. 熟悉數據倉庫數據流監控、故障自動化定位及運維;

4. 強烈的責任心與求知慾，願意學習新技術並能快速套用;

5. 有較強的書面與口頭溝通表達能力，獨立分析、解決問題的能力;

6、做事認真負責，自學能力較強。

大數據運維工程師崗位的基本職責描述 篇2

職責：

1.負責大數據業務集群的運維工作(Hadoop/Hbase/Hive/ Yarn/ Spark/ Storm/ ES等大數據生態圈組件)確保高可用性。

2.負責集群容量規劃、擴容及性能最佳化;

3.參入建設大規模分散式集群的運維、監控和管理平台;

4.參與業務架構設計，在設計階段給出可運維性改進建議;

5.深入研究大數據業務相關運維技術，持續最佳化集群服務架構，探索新的大數據運維技及發展方向。

任職要求：

1.三年及以上大數據運維工作經驗，熟悉hadoop、hbase、hive、Solr、ES等分散式相關技術，熟悉源碼尤佳，至少掌握java/python/shell中的一種語言。

2.了解大數據平台套用架構，具備常見問題的基本分析和解決能力。

3.熟悉Linux作業系統的配置、管理及最佳化，能夠獨立排查及解決作業系統層面的問題;

4.熟悉nginx、tomcat等web套用及中間件的使用和配置

5.強烈的責任心和使命感，執行力強，富有團隊合作精神;

6.對大數據方向運維有很高的熱情和興趣，能主動學習了解相關知識;

大數據運維工程師崗位的基本職責描述 篇3

職責：

1、負責維護伺服器的運行，包括巡檢、故障排除、數據備份等業務，保證伺服器高質量、高效率運行狀態;

2、負責伺服器漏洞整改及補丁升級;

3、負責hadoop運維相關工作;

4、負責大數據平台的日常部署、升級、擴容、遷移;

5、負責高並發，大存儲和實時流的Hadoop/spark大數據平台規劃，運維，監控和最佳化工作。

任職資格

1、2年左右伺服器運維經驗;

2、對linux基礎運維命令熟悉，shell,python至少精通一種，如會scala語言可優先考慮;

3、熟悉Linux的維護和管理，熟悉bat及Shell腳本開發，能看懂Python/Scala優先;

4、做過大規模hadoop集群優先;

5、大數據項目：包括不限於hadoop、hive、kafka、hbase、spark、Kudu、Impala等大數據生態的平台搭建，監控，運維，調優、生產環境hadoop集群trouble shooting 、hadoop版本升級管理及最佳化支持。

大數據運維工程師崗位的基本職責描述 篇4

職責

1、維護基於Linux的系統和相應的組件;

2、維護Hadoop集群，包括hdfs、hive、sqoop、kafka等核心生態系統，確保集群運行平穩;

3、基於實踐，根據業務需求設計和最佳化Hadoop生態系統;

4、設計和維護Hadoop相關基礎設施的監控;

5、維護技術檔案;

6、根據業務需求設計和安裝新的生態系統或技術組件，並制定最終解決方案。

任職資格

1、本科及以上，信息技術或相關專業;

2、2年以上企業Linux系統和Hadoop經驗;

3、Hadoop生態系統的經驗和知識(必須具備：HDFS, Yarn, Hive, HUE;傾向具備：MapReduce、Spark、Kafka、Logstash、Flume);

3、較強的事故分析和故障排除能力，較強的shell腳本編寫能力;

4、了解HA機制者優先;有ITIL知識者優先;

5、有跨國工作經驗者優先;

6、願意學習新事物，解決問題。

大數據運維工程師崗位的基本職責描述 篇5

職責：

1、負責雲平台等基礎環境規劃及建設，虛擬化等技術實施;

2、負責機房物理設備的日常巡檢，對雲平台及大數據運行環境的日常維護，保證運行環境的安全和穩定，對突發事件進行快速處理和恢復;

3、負責Hadoop集群的部署及日常維護，熟悉Hadoop生態圈組件的配置與調優;

4、負責硬體設備和系統軟體購買採購數的擬定，以及運維相關技術文檔的整理和維護。

任職要求：

1、優先，30歲以下，計算機相關專業，統招本科及以上學歷，3年以上中、大型雲平台伺服器運維經驗。

2、具備基本的機房建設及管理能力，能對機房內伺服器、交換機、路由器等物理設備巡檢維護數據備份及恢復。

3、熟悉TCP/IP協定，熟練掌握CISCO路由器、防火牆、交換機配置，具備一定的網路規劃和組網技術能力，負責VLan及子網劃分，提供內外網及VPN連線等網路接入方式;

4、熟悉KVM/Docker等虛擬化技術，及基於VMWare/OpenStack雲平台的搭建及運維;

5、有豐富的Hadoop生態系統運維經驗，了解Hadoop、STorm、Spark、Kafka、zookeeper這些組件的原理，具備部署、實施、維護hadoop集群及相關組件的能力。

6、熟悉Zabbix、Nagios等開源運維監控系統，熟悉通過LVS/Keepalived/Hearbeat技術實現負載均衡，了解CDN技術。

7、有中大型雲平台數據中心容災建設方案(一城兩中心、兩地三中心)實施經驗者優先;有思科認證(CCNA/CCNP/CCIE)證書者優先。

8、為人正直，有責任感，工作認真細心。

大數據運維工程師崗位的基本職責描述 篇6

職責：

1、負責公司關務、貨代、倉庫等日常系統運維;

2、負責系統異常處理以及與軟體工程師反饋;

3、負責相關操作文檔的編制，輔助、培訓用戶正確安裝、使用計算機及套用軟體;

4、負責公司日常辦公相關軟體以及系統安裝等相關運維。

崗位要求：

1、本科及以上學歷，計算機/數學相關專業;

2、有倉儲物流行業信息化運維工作經驗者優先;

3、具有較強邏輯思維能力，解決能力和較強的問題總結能力;

4、具有吃苦耐勞精神，工作積極熱情，責任感強，良好的團隊合作精神及溝通表達能力。

大數據運維工程師崗位的基本職責描述 篇7

職責：

1、負責公司現有阿里雲平台的管理，包括：ECS\RDS\Redis等 ;

2、負責公司機房伺服器的管理，維護;

3、制定和改進系統的監控、備份方案，應急回響，故障排查，確保系統運行穩定;

4、完成上級安排的其他工作。

任職要求：

1、本科以上學歷，一年以上工作經驗;

2、熟悉CentOS和Ubuntu安裝配置最佳化，熟悉shell腳本 ;

3、熟悉Linux系統常用伺服器的部署，如tomcat、redis、nginx、LVS，haproxy ，mysql的安裝、配置、調優，熟悉常用監控軟體;

4、熟悉SVN ,Git;

5、熟悉計算機軟體、硬體及周邊設備的維護，能解決工作中出現的網路問題及突發情況，懂得相關網路設備配置規劃;

6、熟悉使用阿里雲相關雲產品;;

7、工作認真負責，積極主動，善於思考，善於發現並解決問題;

大數據運維工程師崗位的基本職責描述 篇8

職責：

1. 負責系統運維，含Tableau伺服器、軟硬體維護、配置維護。

2. 協助公司軟體系統運維，含虛擬機遠程系統運維、共享等運維管理;

3. 負責資料庫日常運維，備份、恢復、擴容、數據遷移及安全管理;

4. 各類故障及事務的應急回響、處理，協調，保證系統7*24H業務連續性。

5. 工具的配置與管理。

6. 處理上級安排的其他任務。

期望：

1.良好的客戶服務意識，較強的邏輯分析能力、排查問題和解決問題的能力和團隊協作精神;

2.了解資料庫運維工作;

3.熟悉 MySQL相關監控、管理工具;

4.熟悉Apache、NginX、Tomcat、MySQL 等常用服務的安裝、配置和維護;

5.有電商行業基礎者優先考慮。

大數據運維工程師崗位的基本職責描述 篇9

職責：

1. 負責客戶寧波慈谿駐廠IT支持;

2. 協助客戶IT團隊，對桌面級日常IT運維服務進行管理;

3. 負責客戶現場網路及其設備的維護、管理、故障排除等日常工作，確保公司和客戶網路日常的正常運作

4. 對日常問題進行跟進，並做好記錄，定期提交系統運行報告和工作記錄報告

5. 要有團隊意識，責任心強，獨立解決突發問題的能力。

任職要求：

1.工作認真負責，擁有良好的溝通能力，有較強的客戶服務意識;

2.有上進心，性格開朗;

3.接受應屆生、實習生，歡迎大家投遞我司簡歷

大數據運維工程師崗位的基本職責描述 篇10

職責：

1、 運維平台開發/搭建/維護,包括CMDB、發布平台、監控平台、工具平台等;

2、 研發自動化運維工具;

3、 研發基礎服務組件，減少重複開發與運維;

4、 伺服器的規劃、監控，數據備份，日誌分析，故障排除，性能調優等工作;

任職要求：

1、3年以上網際網路運維開發經驗

2、熟悉python語言，Django/Flask等常用的web框架原理，Javascript，並至少熟悉Angularjs、Reactjs、Vue.js、boostrap等框架中的一種。

3、熟悉Nginx、Ansible、git、jenkins、openfalcon、GitLab等工具使用。

4、熟悉docker和常用編排框架 swarm和k8s並有生產系統實踐經驗優先。

5、熟練掌握常用關係型資料庫使用和最佳化，如MySQL

大數據運維工程師崗位的基本職責描述 篇11

1.負責伺服器日常維護管理，保障伺服器系統7*24小時持續運作，發生問題能第一時間處理。

2.通過對關鍵指標的監控，提前發現伺服器可能存在的問題並進行預防。

2.對線上伺服器進行安全管控，包括連線埠開放管理、漏洞與補丁管理、防火牆管理。

3.負責伺服器架構規劃，保證伺服器在高負載的情況下，能夠穩定和可靠運行。

4.對網路攻擊的防禦有較豐富經驗，能夠通過對攻擊行為的分析來制定有針對性的防禦策略與機房溝通配合進行防禦

5.有較好的溝通協調能力，責任心強。

大數據運維工程師崗位的基本職責描述 篇12

職責：

1.負責公司Windows、Linux伺服器及套用環境快速部署、調試、遷移、維護、監控;

2.負責分析、最佳化伺服器作業系統，提升系統安全性和套用環境的速度、性能;

3.負責日常伺服器的巡檢，負責軟硬體、系統與套用平台管理，包括狀態監控、升級、故障處理及最佳化等操作;

4.負責收集和分析系統性能指標，對提高系統可用性提出建議，維護系統穩定運行;

5.負責公司運營過程中客戶故障受理、客戶售後項目修改以及客戶的相關技術支持工作;

6.負責部分公司內部設備、PC的維護工作。

任職要求：

1、三年以上linux系統運維經驗;

2、熟悉linux下常用開源軟體 如nignx、php、mysql、 lvs 、redis等;

3、熟悉伺服器和機房運維的監控技術，熟悉各種監控軟體如cacti, zabbix的使用與配置。

4、熟悉Windows作業系統的相關配置以及SQL Server資料庫、SQL語句常用操作。

5、有一定故障判斷分析處理經驗;具備較好的學習能力、問題分析能力，可以獨立調試解決問題。

6、有良好的團隊協作精神，對工作充滿熱情，富有責任心，能承受一定強度的工作壓力。

大數據運維工程師崗位的基本職責描述 篇13

職責：

1、負責公司各生產伺服器、測試系統伺服器系統部署及日常運維;

2、負責公司虛擬化平台及雲平台專用網路，資料庫，雲存儲等日常運維工作;

3、使用主流監控軟體，監控生產/測試系統的硬體、系統、網路、資料庫運行情況，分析並排除相關故障;

4、制定生產、測試系統的運維規範及流程並進行最佳化，提升工作效率和服務質量;

5、建立和完善大規模分散式集群的運維工具，提升運維效率和質量，協助公司的日常IT事務。

任職要求：

1、 精通TCP/IP、HTTP/https，DNS,VPN等協定，具備較好的網路知識及運維能力;

2、熟悉LinuxServer的運維，熟悉shell/Python中的至少一種主流腳本語言;

3、精通WindowsServer的運維，擅長分析系統日誌，及時發現系統問題並處理;

4、熟練操作VMwarevsphere虛擬化平台部署，熟悉雲平台，專用網路及資料庫、存儲部署及日常運維;接觸過常見雲計算服務(華為雲、阿里雲等)，有大規模伺服器管理經驗者優先

5、熟悉nagios開源監控軟體的安裝部署;、

大數據運維工程師崗位的基本職責描述 篇14

職責：

1、保證業務運營系統的穩定運行與日常維護任務;

2、負責業務運營系統的安裝、調試、備份、存儲、容災系統的規劃設計工作;

3、負責業務運營系統性能調優與安全防護規劃和管理工作。

任職要求：

1、計算機及相關專業大學專科或以上學歷，3年以上大型系統管理、運維經驗;

2、熟悉Linux和Win20xx作業系統的維護、最佳化及安全加固;

3、精通shell.python或perl至少一種語言;

4、精通基於linux應用程式的管理和配置，如apache、tomcat、resion、jboos、jdk、mysql、sqlserver、orcale、IIS等;

5、熟悉數據備份和恢復相關技術，可以制定方案;

6、具有很強的故障排查和解決問題的能力，能快速分析系統相關的技術瓶頸和解決方法;

7、能夠研究服務架構，發現潛在問題，制定系統調整和最佳化方案，提高系統的健壯性和效率;

8、良好的溝通能力及商務談判能力，有運維組長經驗者優先;

大數據運維工程師崗位的基本職責描述 篇15

1. 負責MES系統調研、分析、整理、提煉用戶的產品需求，完成需求分析和設計

2. 負責整體MES系統的開發工作，交付客戶高質量的開發成果;

3. 負責MES系統的日常運維管理、用戶技術支持、功能變更需求、系統調優等，保障所負責系統的平穩、高效運行

4. 負責為客戶提供相關的技術培訓。

5. 根據現有業務流程推動MES系統的功能套用和驗證，提出解決方案並協助業務部門予以解決業務問題。