大數據開發工程師崗位的主要職責概述

大數據開發工程師崗位的主要職責概述 篇1

職責：

1、 規劃及建設大數據平台;

2、 負責大數據存儲系統、分散式計算系統、挖掘算法等設計、研發以及維護、最佳化工作;

3、負責分析、挖掘、對抗各種產品安全層面的惡意行為;

4、 參與項目的系統設計和核心代碼開發，指導和培訓其他工程師;

5、 整理和提交技術文檔，負責核心功能模組的代碼編寫和測試工作。

崗位要求：

1、 計算機、統計學等相關專業本科及以上學歷，具有深厚的數學、統計學和計算機相關知識，精通數據倉庫和數據挖掘的相關技術，3年以上大數據開發相關經驗;

2、具有非常紮實的Java基礎，熟悉Shell、Python、R、Scala等一種以上語言;

3、算法基礎紮實，熟悉常見的數據結構，了解分散式算法和分散式系統的技術原理;

4、精通MapReduce設計方法或Spark計算框架、對NoSQL，Hadoop、Hbase、Spark、Hive等主流雲計算，大數據相關軟體有充分的了解，並且有實踐經驗，能解決套用中的複雜問題;

5、熟悉大數據處理相關技術，包括但不限於Hadoop、Hive、Hbase、Impala、Spark，Kafaka、Flume、Sqoop、Storm、Redis等;

6、研讀過Hadoop、Hbase、Hive原始碼者，能夠在特定業務中進行定製改造者優先;

7、具有海量數據處理、數據挖掘、數據分析相關項目的工作經驗者優先。

大數據開發工程師崗位的主要職責概述 篇2

職責：

1. 對數據進行結構化、標準化處理，對處理流程進行自動化搭建

2. 通過ETL/Cube數據建模，構建基於數據倉庫的分析工具;

3. 參與數據與公司軟體產品及第三軟體的API對接;

4. 搭建與最佳化，數據採集、處理、可視化流程中所需的框架與模組開發;

5. 協同內外部力量完成需求的表達與技術攻關。

任職要求：

1. 熟悉資料庫的設計和開發如：Oracle/Mysql/MSSQL/Redis等，有處理大量數據經驗的優先;

3. 熟練使用ETL工具進行數據抽取，清洗，轉換，關聯等操作;

4. 熟練使用Linux作業系統,具備編寫shell的能力;

5. 熟練使用主流的開發框架，掌握以下語言：Java、Python;了解過源碼的優先;

6. 具有2年以上數據倉庫(DW)、商務智慧型(BI)、大數據等方面的軟體或項目開發經驗;

7. 了解可視化及BI工具者優先;

大數據開發工程師崗位的主要職責概述 篇3

職責：

1、 負責大數據平台架構的整體設計，承擔數據抽取、清洗、轉化等數據處理程式開發;

2、 為業務運營提供技術支持，完成套用系統的搭建、最佳化、升級工作，保證平台穩定運行;

3、 編寫系統的需求分析、設計、開發和部署文檔等。

崗位要求：

1、碩士及以上學歷，計算機、自動化、通信等相關專業;

2、熟練掌握Java語言，並熟悉Python語言，熟悉分散式系統架構，有hadoop，spark系統架構經驗;

3、熟悉實時計算框架storm，flink，spark streaming其中之一;

4、熟練使用SQL，熟悉資料庫原理，熟練使用至少一種主流關係型資料庫;

5、熟悉軟體開發流程，能夠根據需求編寫需求、設計、開發手冊等項目過程文檔;

6、具有良好的溝通能力和主動性，抗壓能力強。

大數據開發工程師崗位的主要職責概述 篇4

職責：

1、參與大規模數據快速查詢系統的架構設計和開發;

2、大規模數據挖掘和機器學習算法的實現;

3、線上和離線海量數據分析平台的開發;

4、研究大數據前沿技術，提升系統的運維效率;

5、實現大數據基礎架構平台的自動化運維。

【任職要求】：

1、計算機相關專業,具有3年以上大數據開發經驗，熟悉Java,Linux;

2、熟悉Hadoop大數據處理系統的開發,搭建及部署者優先

3、熟練地處理數據模型、數據ETL以及存儲管理;

4、熟悉HDFS/Hive/MapReduce/Kylin/HBase，能獨自進行Mapreduce程式開發者優先;

5、熟悉分散式系統概念、架構，有大規模分散式系統設計、實現、部署等經驗;

6、有較強的書面與口頭溝通表達能力，獨立分析、解決問題的能力。

大數據開發工程師崗位的主要職責概述 篇5

職責：

1、參與大數據架構的規劃設計，參與業務建模及數據化運營平台的搭建、運維，對業務流程與大數據的結合提出建議和解決方案;

2、完成基於大數據平台的業務項目的開發、實施和維護工作;

3、負責解決大數據平台建設過程中的技術難點和性能調優工作;

4、參與數據倉庫設計，根據業務需求實現高效率高靈活性的查詢，數據分析，數據挖掘;

5、負責高吞吐高可用數據實時和離線採集，高並發的大數據業務架構設計

6、負責研發技術發展方向，新技術領域的探索，引入並驗證數據平台領域新技術，提供系統效能

7、對大數據技術及開源框架充滿熱情，具有鑽研精神，能自我學習。

任職資格：

1、具有5年Java開發經驗，熟悉Spring生態，掌握Hibernate、Mybatis任意一種ORM框架，掌握Oracle、Mysql資料庫。

2、具有2年以上的大數據開發經驗，熟悉大數據、數據倉庫，分散式架構技術理論，具有大數據整體系統架構設計和實戰經驗，熟悉CDH、HDP、TDH至少一款大數據產品，有從無到有建設大數據平台經驗者優先;

3、熟悉大數據組件的開發、搭建、維護以及性能最佳化;

4、較強的開發能力，必須熟練使用相關開發語言(Java/Python/Scala/Shell等)，熟悉大數據生態、關係資料庫和NOSQL資料庫、Linux等相關知識，能夠獨立完成並指導初級開發人員完成大數據相關的技術實現和調優;

5、熟悉Hadoop、Hbase、Hdfs、MapReduce、Yarn、Zookeeper、Hive、Impala、Spark、Flink、Kafka、Flume、Kylin、Phoenix等組件或技術，能閱讀源碼跟蹤問題。

6、熟練掌握Spark、flink任意一種計算框架，掌握MapReduce計算框架原理，並有實際項目開發經驗。

7、熟練掌握HDFS、HBase、Kafka、Redis、Hive、Sqoop、Shell等技術和組件，熟練套用開發，必須熟悉複雜數據查詢性能調優，包括實時查詢和離線批處理查詢，伺服器和生態組件的參數最佳化。

8、精通高級算法並有與業務結合落地優先;

9、紮實的獨立分析問題、解決問題的能力，具備良好的需求理解能力、溝通協調能力和團隊合作精神;有很強的數據設計抽象能力，善於從複雜的數據問題中找到關鍵路徑，並且擅於跟業務團隊就業務問題進行良好的溝通，能推動業務的指標化、量化;

10、有較好的學習能力、團隊協作精神，認真細心，有強烈的責任心，愛崗敬業，有較高抗壓能力，有較好的工作穩定性。

大數據開發工程師崗位的主要職責概述 篇6

1、按照項目計畫，在保證質量的前提下，按時完成開發任務;

2、參與軟體系統需求分析和設計，編寫有關技術文檔;

3、對初級開發人員進行技術指導和技能培訓。

大數據開發工程師崗位的主要職責概述 篇7

職責：

1、公司產品無線線端web端的製作、開發和最佳化

2、根據設計稿,編寫靜態頁面和互動、特效等功能的腳本程式

3、最佳化前端組件的靈活性和可擴展性

4、跟蹤研究前沿的前端技術,並套用到公司的產品開發當中

任職要求:

1、3-5年工作經驗,了解react框架前端技術,熟悉流行的前端ui庫，能夠設計開發工具型網站，如:碼工助手;

2、熟練掌握DIV+CSS網頁布局,並且對模板化、模組化有一定理解,精通HTML/HTML5、CSS/CSS3等前端開發技術;

3、熟練掌握JavaScript語言核心技術DOM、Ajax、JSON等,對javascript框架(如react/jQuery/jq ui 等)有一定的經驗;

4、對css/JavaScript性能最佳化、解決多瀏覽器兼容性問題有一定的經驗;

5、對無線端開發有一定經驗，能夠較好解決ios,Android端兼容問題;

6、具備良好的責任心、邏輯思維強、善於交流和表達、較強的學習能力、優秀的團隊溝通與協作能力。

7、愛思考,溝通能力強。

大數據開發工程師崗位的主要職責概述 篇8

職責：

1、負責進行用戶需求收集和分析;

2、運用SQL資料庫語法，進行系統的二次開發和運維;

3、軟體安裝，調試，數據導入，用戶許可權設定;

4、培訓甲方公司系統操作人員，使其掌握系統操作方法。

【任職要求】

1、具有良好的SQL Server或Oracle資料庫編程基礎;

2、具有較強的學習能力和良好的溝通能力;

3、工作積極主動、具有團隊合作精神;

4、具有資料庫開發相關經驗，或軟體實施、運維經驗優先。

大數據開發工程師崗位的主要職責概述 篇9

職責：

1.負責網宿雲各個產品線日常運維運營工作和自動化運維工具開發;

2.負責網宿雲各個產品線自動化運維方案，疑難問題分析，告警最佳化;

3.具備良好的溝通能力，能全鏈路推動產品質量，為產品線質量負責;

4.其他和以上工作相關的專項事務。

任職要求：

1.熟悉Linux作業系統，熟練套用常用命令(awk，sed，grep等)，能分析並定位出系統常見的性能問題;

2.精通shell/python編程，或熟悉java編程，有項目開發經驗者優先;

3.熟悉TCP/IP協定，能抓包做基本協定分析;

4.具備良好的分析和研究能力，熱愛技術，有研發經驗優先;

5.本科及以上學歷，計算機相關專業，1年以上工作經驗。

大數據開發工程師崗位的主要職責概述 篇10

職責：

1、維護現有學歷平台的穩定;

2、針對需求進行定製開發;

3、針對現有資料庫和平台進行相關最佳化;

4、按時完成自己的開發工作，並做好單元測試;

5、及時修改測試人員反饋的bug;

6、撰寫相關的開發文檔。

任職資格：

1、3年以上c# ，Asp.net,webform，mvc編程經驗。熟悉.net運行機制;

2、熟悉面向對象編程，精通c# 對象 、接口、委託等基礎概念及套用;

3、3年以上sqlserver資料庫使用經驗，熟悉編寫存儲過程，能對sql語句進行性能最佳化;

4、掌握html、js、css客戶端技術，熟練使用ajax、jquery;

5、熟練掌握Sql Server 20xx/20xx資料庫開發，能夠使用索引、視圖、查詢最佳化、存儲過程、資料庫作業等技術;

6、具有SQL語句調優和資料庫調優工作經驗。

大數據開發工程師崗位的主要職責概述 篇11

1.負責顯示圖像處理相關的FPGA RTL架構及子模組設計，工程綜合及時序分析，解決開發過程中出現的技術問題;

2.負責晶片化IP開發工作，對應晶片化代碼綜合及驗證;

職位要求：

熟悉FPGA原理，熟悉HDMI、DP和網口等接口調試，熟練掌握FPGA開發軟體、硬體描述語言，熟悉DDR控制設計

有豐富的圖像處理或圖像識別相關FPGA項目開發經驗、有較多的複雜工程整合和時序分析經驗，有RTL代碼測試經驗

大數據開發工程師崗位的主要職責概述 篇12

職責：

1、編寫代碼，單元測試，保質保量完成分配任務;

2、參與功能詳細設計，接口聯調;

3、參與評估項目技術難點、技術分析和指導、攻關技術瓶頸、系統重構和最佳化;

4、負責解決開發過程中的技術問題。

任職資格：

1、本科及以上學歷，計算機相關專業，3年及以上開發經驗;

2、Html5、CSS、JavaScript基礎紮實，精通vue或者Angularjs,React.js,node.js等;

3，精通基於Web的應用程式開發，精通javascript、HTML、XML、JSON、CSS、AJAX等技術;

4， 對數據敏感、有創新精神、主動思考和獲取新知識。

大數據開發工程師崗位的主要職責概述 篇13

1、協助項目經理開展空調產品結構設計工作;

2、協助跟進項目進度，參與產品開發過程中試模、試產及量產的組織、協調等工作

3、協助空調新產品開發過程中各種相關檔案的編制，確保過程控制檔案符合研發控制流程和相關質量管理標準;

4、協助生產製造部門技術支持等相關工作。

大數據開發工程師崗位的主要職責概述 篇14

職責：

1、獨立負責工作小組，指導和監督下級人員日常工作;

2、參與軟體系統的設計和分析，制定小組實施方案;

3、根據開發進度和任務分配，完成相應模組軟體的設計、開發、編程任務。

任職要求：

1.計算機相關專業，有2年以上JAVA開發經驗;

2.精通JAVA，熟練掌握SPRING、SPRING MVC、MyBatis，熟練SPRING CLOUD、NETFLIX優先;

3.精通jQuery、JavaScript;熟悉Bootstrap等UI組件;

4.熟悉Oracle、MySQL等常規資料庫，熟悉Redis;

5.掌握redis、MongoDB、Mysql等資料庫開發及最佳化;

6.熱衷於軟體開發工作、致力於微服務架構技術;

7.具有強烈的責任意識和開放的心態，事業心強，勤奮好學，有團隊精神。

大數據開發工程師崗位的主要職責概述 篇15

職責：

1、利用HTML5、CSS3等相關技術開發手機、平板、PC等多平台上的WEB前端套用;

2、解決不同設備/瀏覽器的兼容性問題。

3、配合(C#.NET)後台工程師一起研討技術實現方案和後端數據的對接，進行套用及系統整合;

4、負責產品的持續疊代和維護工作。

職位要求：

1.計算機相關專業專科及以上學歷，一年以上WEB前端開發經驗;

2. 精通HTML5、CSS、JavaScript、Jquery、bootstrap等技術。

3.有微信公眾號/微信小程式的開發經驗 作為加分項;

4.有C#.NET MVC開發經驗 作為加分項;

5.熟悉MySql資料庫 作為加分項;

6.具有良好的編碼習慣，良好的溝通與表達能力，思路清晰，業務邏輯理解與分析能力強;

大數據開發工程師崗位的主要職責概述 篇16

職責：

1、根據產品設計文檔和UI原型，利用HTML5相關技術開發移動端的web前端頁面;

2、基於HTML5.0標準進行頁面製作，編寫可復用的用戶界面組件;

3、持續的最佳化前端體驗和頁面回響速度，並保證兼容性和執行效率。

崗位要求：

1、計算機或相關專業專科及以上學歷，1年以上的HTML5開發經驗;

2、具有獨立完成前端開發工作的能力;

3、熟悉移動端的前端開發、多瀏覽器兼容及移動端機型適配方式;

4、熟練掌握web系統開發技術，熟悉javascript、jquery、CSS3、HTML5、Ajax，能快速定位解決瀏覽器兼容性問題;

5、熟悉常見頁面布局方式，移動端回響式頁面布局方式，熟悉css性能最佳化方式。