大數據開發工程師的崗位職責

大數據開發工程師的崗位職責 篇1

職責：

1、依據客戶需求完成大數據項目的數據分析及建模;

2、進行大數據核心算法的編寫;

3、參與項目的需求分析、系統設計、編碼工作;

4、參與開發過程中相關新技術的研究和驗證。

5.協助承擔架構性的體系設計和改造工作，配合制定技術實施方案，按照總體設計組織子系統的設計和開發。

任職要求：

1、精通數據建模、數據體系建設，具備數據倉庫架構設計、模型設計和處理性能調優等相關經驗;

2、具有豐富的基於hadoop體系的數據平台、數據倉庫建設經驗，精通基於hadoop源碼的開發、最佳化改造及成功套用案例;

3、精通hadoop生態體系各項技術，如kafka、flume、hive、impala、hbase、spark等，具有100+節點hadoop集群的開發、運維經驗;

4、具有對大型hadoop集群的硬體規劃能力;

大數據開發工程師的崗位職責 篇2

職責：

1、負責數據分析、加工、清理，相關處理腳本和程式的開發;

2、負責開發大數據工具，如報表平台、多維度分析工具、ETL平台、調度平台的研發;

3、負責分散式大數據平台套用開發(Hadoop/Spark/Hive/HBase等);

4、負責大數據相關平台的維護、最佳化。

任職要求：

1、本科及以上學歷，計算機相關專業，具有5年及以上的大數據ETL或數據開發經驗，熟悉大數據組件的維護以及調優;

2、熟練掌握Java或Python程式語言，熟悉大數據架構體系，熟悉Hadoop、HDFS、Hive、HBase、Spark、Kafka等技術中的一個或者多個，熟悉Sqoop、DataX等數據導入工具;

3、能熟練使用Hive、HBase、Spark等加工和處理數據，有海量數據處理經驗;

4、有數據倉庫開發經驗/BI系統開發經驗優先;

5、有電商行業數據處理與分析平台開發經驗者優先。

大數據開發工程師的崗位職責 篇3

職責

1、負責基於hadoop/spark生態系統、億級別數據的全文檢索，搜尋引擎的產品研發;

2、基於海量用戶行為數據和其他數據，分析和研究數據與實際業務的關聯關係，並與實際業務套用相結合開發;

3、負責大數據分析需求設計和開發，承擔數據抽取、清洗、轉化等數據處理程式開發。

任職要求：

1、熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技術及其生態圈，具備相關項目開發經驗，有數據實時計算項目經驗優先;

2、有搜尋引擎全文檢索開發經驗 ，如：elasticsearch、solr;

3、熟悉python、R任意一門開發語言;

4、有SAAS，PAAS企業級套用平台或者網際網路，金融等大型套用平台開發經驗優先考慮;

5、 本科及以上學歷，計算機/軟體工程/統計學/數學等相關專業，網際網路/金融等行業3年以上工作經驗;

6、擁有良好的代碼習慣，要求結構清晰、命名規範、邏輯性強、代碼冗餘率低，代碼注釋清晰;

7、熟悉使用svn，禪道等項目管理工具，有良好的團隊協作開發經驗.

大數據開發工程師的崗位職責 篇4

職責:

1、負責所分管團隊的團隊建設和日常管理工作;

2、負責核心技術問題攻關和性能最佳化，持續維護和引進最新的大數據技術到城市大數據平台中，支撐城市級大數據平台業務;

3、承擔城市數據標準編制和數據模型的設計;

4、承擔項目中數據相關方案設計及數據團隊管理;

5、參與城市大數據項目中數據採集、加工過程、分析挖掘模型算法的實施工作。

任職資格:

1、1年以上數據開發工作經驗，熟練使用SQL查詢引擎;

2、熟悉Hadoop、Mpp、Oracle等至少一種數據倉庫工具

3、具備良好的程式語言基礎如：java/python/scala/c++/shell等

4、二本以上學歷，計算機相關專業或者有相關培訓經歷者優先

5、 個人素質要求：目光長遠、態度誠懇、崗位有穩定性，能夠長期培養、具備很強的自學能力、承壓能力強、接受出差支援項目等工作。對數據工作具備濃厚的興趣並有明確職業規劃，優秀的學習能力和團隊溝通協作能力，對新技術有濃厚興趣並有鑽研精神。

大數據開發工程師的崗位職責 篇5

職責：

1、從事Hadoop、Spark、Hbase、hive等分散式大數據產品的設計和開發;

2、針對部門大數據業務進行大數據分析、挖掘等產品套用的開發;

3、大數據平台各類數據業務抽象及模型化;

4、參與大數據管理平台的開發及維護;

5、負責大數據平台數據及相關的套用開發，調優及維護;

6、為項目相關開發人員提供大數據技術指導及解決大數據平台套用中遇到的技術難題;

7、良好的團隊合作與溝通能力。

任職要求：

1、本科及以上學歷，2年以上大數據套用開發經驗;

2、具備Java、Python、Scala其中兩種語言的開發經驗;

3、了解泛Hadoop大數據生態圈，熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中兩種以上技術，並有實際的項目開發經驗，有相關源碼研究者優先;

4、具備ETL開發與運維能力，有Flume、kettle經驗優先;

5、熟悉大數據平台的搭建過程，熟悉數據處理流程，有TB級以上數據處理經驗優先，有實時數據處理經驗者優先;

6、熟悉離線和實時數據處理流程，熟練使用Spark，Flink處理TB級數據優先;

7、熟悉Linux系統環境，有shell等腳本編寫經驗，熟悉Mysql、PostgreSql、Oracle等常用關係資料庫，熟練編寫SQL語句;

8、熟悉Yarn,Kubernetes,Azkaban等資源調度框架者優先;

9、熟悉Datax的二次開發，並有實際開發經驗優先。

大數據開發工程師的崗位職責 篇6

職責：

1.負責 Linux 系統的日常運營，包括安裝，維護和補丁/升級 Linux 作業系統和各種套用軟體;

2.高級故障排除和複雜的問題解決;

3.基於 Linux 的監控系統 Zabbix 的日常操作以及新的功能二次開發和實施;

4.監控系統事件以確保健康，最大化系統可用性和服務質量;

5.構建相關腳本以自動和大規模地完成日常工作;

6.維護有關平台的配置，操作和故障排除過程的文檔;按照指示參與標準，指南，做法和指標的定義。

崗位要求：

1、計算機專業，網路運維 3 年以上;

2、熟悉網路基礎管理，熟悉網路設備，熟悉桌面運維，域控，許可權管理;

3、熟悉 Zabbix 系統，Python，Oracle;

4、熟悉網路交換、路由基本原理，熟悉計算機網路管理基礎技術;

5、熟悉機房管理要求，熟悉機房基礎設施的基本管理和技術;

6、熟悉交換機路由器,能夠獨立上架、調試區域網路;

7、熟悉伺服器虛擬化流程與操作，可根據用戶需求搭建虛擬化環境。

大數據開發工程師的崗位職責 篇7

職責：

1、負責公司CMS系統最佳化和新產品開發;

2、按照項目計畫，與項目組其他成員協同工作實現開發目的;

3、協助工程師測試和發布系統，準備相關的技術文檔，協助解決各種技術問題;

4、負責文檔撰寫，在前期期間設計交付URL接口文檔、模板數據描述文檔，在編碼期間能撰寫清晰明了的注釋。

任職資格：

1、熟練基於windows/Linux系統的 PHP+MySQL 開發;

2、相關專業畢業，1年以上PHP編程經驗，熟悉Ajax的前台技術;

3、擁有良好的代碼習慣，要求結構清晰，命名規範，邏輯性強，代碼冗餘率低;

4、熟悉ThinkPHP框架開發或者二次開發的優先;

5、能獨立用php開發一般的項目，對軟體編程有較透徹的了解;

6、良好的溝通能力和團隊合作精神。

大數據開發工程師的崗位職責 篇8

1. 參與自動駕駛系統開發，負責功能集成匹配和測試問題處理，確保自動駕駛功能在整車上實現

2.負責自動駕駛相關的零部件開發，完成零部件的整車集成和功能實現

3.緊扣整車開發流程，協調公司部門及供應商資源，推進智慧型駕駛集成開發，把控項目節點

4.推進各項開發流程所需技術文檔撰寫與審核

大數據開發工程師的崗位職責 篇9

1、負責雲通信系統下核心業務模組維護、最佳化，新增功能開發、性能最佳化和穩定性保障。

2、負責對業務模組疑難問題進行排查和處理。

3、負責對業務模組的架構設計及最佳化工作，確保平台各模組達成高可用、穩定性、性能等各方面的指標。

4、負責業務模組的技術文檔（如詳細設計、接口文檔）的撰寫。

大數據開發工程師的崗位職責 篇10

職責：

1、依據業務需求邏輯和功能模組的設計思路，負責平台項目產品的開發和技術文檔的撰寫，並主導實施。

2、監控系統運行健康狀態，及時最佳化系統性能，支持產品套用服務。

3、參與軟體質量審查，提升開發質量和效率。

4、完成項目的核心編碼，支撐企業SOA服務化設計和實施，配合項目主管做好項目管理 。

5、參與部分產品的架構預研並做技術分享 。

6、全程參與產品的需求分析、設計、開發以及測試幾個階段 。

任職資格：

1、計算機相關專業本科以上學歷。

2、2年以上JAVA項目開發經驗;有過大型項目經驗優先考慮。

3、Java基礎紮實、理解JVM原理、有多執行緒、並發系統開發經驗的優先考慮;熟悉jsp、Jquary、JavaScript/Ajax。

4、熟悉主流開源框架，如Spring、spring mvc、elasticsearch等;

5、掌握分散式系統原理和實踐，出色的工程意識和架構設計能力。有SOA架構開發經驗優先。

6、優秀的分析問題和解決問題的能力。

7、責任心強，做事細心 、有恆心和毅力、具備良好的團隊合作精神和承受壓力的能力。

大數據開發工程師的崗位職責 篇11

職責：

1、移動端WEB/WAP開發;

2、項目的靜態頁面設計更新與維護;

3、基於Html5標準編寫可復用的用戶界面和組件;

4、外掛程式開發，模組化框架設計與開發，參與公司前端框架、UI組件開發及維護;

5、正確理解項目需求，根據需求提供頁面合理化建議，完成產品最終設計;

6、產品的HTML5頁面架構設計和開發，根據產品需求，分析並給出最優的頁面前端結構解決方案。

任職要求：

1、具有3年以上相關工作經驗;

2、熟練掌握HTML5/CSS3/DIV/JS/Ajax/JQ等頁面技術;

3、熟悉w3c標準，熟悉DIV+CSS方式頁面設計，具備修改腳本的能力。對瀏覽器/手機兼容性有豐富經驗;

4、能熟練使用HTML5，熟悉JS相關技術，熟悉/了解常見第三方服務API接口，如分享，地圖等;

5、熟悉H5+、mui、vue、react等主流框架的設計和實現，熟練跨終端的開發;

6、對app產品有一定了解，對新技術抱有極大熱情;

7、熟悉WebSocket網路編程,以及ajax、json等數據通信方式;

7、對瀏覽器兼容性、代碼可維護性、前端性能最佳化等有深入研究;

8、熱愛網際網路，善於溝通，有較強的學習能力、抗壓能力和團隊合作精神。

大數據開發工程師的崗位職責 篇12

職責：

1) 從事基於J2EE的企業套用平台及系統研發工作。

2) 完成核心/重要模組的設計、編碼、測試以及相關文檔;

3) 參與代碼設計、審核和檢查;

4) 能獨立解決開發中遇到的難點問題;

5) 參與系統穩定、性能和擴展性調試;

6) 根據項目要求，配合項目人員完成集成測試、系統測試和系統交付等工作。

任職資格：

1) 計算機或相關專業本科以上學歷;

2) 有3年及以上軟體開發經驗;

3) 具備紮實的JAVA編程基本功，熟悉常用的數據結構, 算法知識;

4) 熟悉J2EE 、Struts、Spring、mybatis、AJAX、XML等架構和技術;熟悉Eclipse、maven、JUnit、UML等開發工具;有主流資料庫使用經驗，如MySql、Oracle、SQL Server等;

5) 具備較強的學習能力和良好的英語閱讀能力，適應力強、能快速進入工作狀態;

6) 具有較強的敬業精神，對工作認真、細緻、負責;積極主動;具備較好的語言表達和溝通能力，較強的邏輯思維能力和團隊合作精神，並能在一定壓力下完成工作。

大數據開發工程師的崗位職責 篇13

職責：

1.負責公司項目開發與維護;

2.負責公司項目核心代碼編寫;

3.負責代碼的單元測試，保證開發質量，提交符合規範的成果;

4.針對業務場景的套用要求，不斷最佳化系統設計和前台表現，提升系統效能和安全性。

任職要求

1.3年以上的PHP開發經驗，有獨立開發經驗者優先;

2.了解HTML5、CSS3、JAVASCRIPT等前端代碼;

3.具有MySQL索引最佳化、查詢最佳化和存儲最佳化經驗，熟練使用redis;

4.具有良好的PHP基礎，熟悉ThinkPHP開源框架;

5.熟悉微擎二開者優先，做過微信公眾號優先，接過各平台支付SDK優先，熟悉對高並發業務的處理;

6.有遊戲開發經驗者優先，計算機專業優先，熟悉linux伺服器操作的優先;

7.有良好的面向對象分析、設計能力、規範的編程風格和良好的文檔習慣;

8.有良好的團隊精神、敬業精神，有高效的執行力，能主動學習鑽研與工作相關的知識和技術;

大數據開發工程師的崗位職責 篇14

職責:

1、負責編寫自動化相關項目;

2、負責自動化流程的規劃、設計、推行、實施和持續改進;

3、負責相關故障、疑難問題排查處理，編制匯總故障、問題，定期提交匯總報告;

4、負責伺服器配置、維護、監控、以及最佳化。

任職資格:

1、3年以上的開發經驗,熟悉Python開發，熟悉flask/django/tornado等至少一種框架,擁有自動化開發相關經驗者優先;

2、1年以上運維經驗,具備linux運維能力,具有mysql/redis/mongodb等資料庫運維、開發經驗者優先;

3、具備一定前端開發能力的優先;

4、工作認真負責，學習力強、能夠克服困難、有責任心、有團隊協作意識。

大數據開發工程師的崗位職責 篇15

1、負責系統功能模組的詳細設計和文檔輸出；

2、負責系統功能模組的代碼開發和單元測試；

3、參與解決項目中的技術難點；

4、能按計畫高質量完成項目經理分配的開發任務；

大數據開發工程師的崗位職責 篇16

1、負責金蝶EAS系統(ERP)業務需求的二次開發與設計，並參與EAS的需求的討論和技術評審;

2、負責基於金蝶BOS技術平台的項目開發，以及EAS與其他業務系統的接口開發;

3、獨立或與團隊合作，按時保質完成上級交給的軟體開發項目;

4、具有良好的協調、溝通能力，並能夠根據規劃需求制定相關的技術解決方案;

5、對研發組初級開發人員進行指導，提供技術支持和幫助。

大數據開發工程師的崗位職責 篇17

職責：

1、負責軟體產品的架構和資料庫設計;

2、負責開發團隊的技術管理，並監督指導開發工作;

3、負責承擔重點模組的開發工作並協助做好產品研發的配置管理工作;

4、負責軟體產品交付與系統集成配置方案制定;

5、能夠在團隊指導下，對關鍵技術進行研究和跟蹤工作。

任職要求：

1、全日制本科及以上學歷，軟體工程、計算機及信息技術相關專業優先;

2、三年以上Java開發項目經驗，一年以上團隊管理經驗;

3、熟悉Oracle/SQL Server /MySQL等資料庫，熟練掌握Web Service/Socket編程技術，掌握Struts/Spring/Hibernate/iBATIS等3種以上框架開發技術;

4、具有獨立學習及創新能力，具備良好的口頭和書面溝通能力，能按要求撰寫相關的設計文檔;

5、具有多套用系統整合經驗者優先。

大數據開發工程師的崗位職責 篇18

職責：

1、高效率高質量地完成WEB頁面和移動APP的製作工作;

2、完成複雜的業務模組的前端開發;

3、對已有功能的日常維護，以及生產問題處理、最佳化工作;

4、Web前端表現層及與前後端互動的架構設計和開發;

5、與後端程式研發人員密切配合，高效率高質量地完成頁面及效果的實現工作;

6、JavaScript程式模組開發，通用類庫、框架編寫;編寫開發及其他相關的工作流程文檔。

任職要求：

1、三年以上前端開發經驗，具備獨立承擔前端開發任務的能力;

2、精通掌握HTML、vuejs、JavaScript、Ajax、CSS、Jquery等Web開發技術及主流的JS框架，有良好的代碼功底和風格;

3、熟練掌握HTML5+CSS3網頁製作技術，熟悉頁面架構和布局以及相關的細節;能夠熟練運用HTML5特性構建移動端的WebApp;

4、熟悉W3C標準，熟悉各種瀏覽器差異及兼容性問題的解決;

5、具備較強的文檔編寫能力和良好的文檔規範性;

6、具有良好的語言表達能力、溝通能力、較強的學習能力，主動意識強，較好的團隊合作意識;

7、工作態度認真細緻，考慮問題全面深入，有強烈的責任心和敬業精神;

大數據開發工程師的崗位職責 篇19

職責：

1、負責區塊鏈產品的研發，獨立或與團隊合作，按時保質完成軟體開發項目;

2、參與產品系統設計、概要設計工作，核心功能的代碼編寫;

3、獨立解決和指導其他同事處理開發中遇到的難點問題;

4、總結和編寫相關的開發文檔;並能夠根據規劃需求制定相關技術與產品的解決方案。

任職資格：

1.本科及以上學歷，5年以上相關工作經驗;

2.精通J2EE，精通SSH及常用開源框架和技術，深刻理解各框架的優缺點，熟悉分散式、多執行緒、快取、訊息等高性能架構相關開發技術;有微服務開發經驗者優先 ;掌握主流的前端技術和框架;

3.熟練套用Oracle、MySql資料庫件，具備豐富的資料庫設計能力;

4、參與過至少一個產品和項目的系統框架設計，有系統設計、調優的經驗;

5.具有較強的學習能力，研究能力和問題解決能力，熱衷於新技術的學習和研究;有區塊鏈研究或經驗的優先 ;

6.性格開朗、樂觀，有很強的團隊協作精神和溝通能力，有帶領團隊者綴優先;

7.能承受工作壓力，對待工作積極熱情、踏實肯乾，能接受短期出差。

大數據開發工程師的崗位職責 篇20

1. 協助完成整體系統分析、設計，並主導完成詳細設計、編碼、文檔任務;

2. 負責前後端核心功能的框架與代碼編寫，開發與維護系統核心模組，包括套用系統前後端、數據可視化，並協助完部署及調試工作;

3. 負責邏輯模型設計、系統框架的搭建，並對架構、功能、性能進行持續最佳化;

4. 項目管理，用戶溝通協調、進度管理，質量控制;

5. 系統上線部署組織與協調，已上線系統套用故障排查、BUG修復、運維支持;

大數據開發工程師的崗位職責 篇21

1、基於Cocos2d-x遊戲引擎下的I0S/Andrioa棋牌遊戲開發，進行遊戲的完善。

2、負責Cocos2d-客戶端套用邏輯及界面的編寫。

3、與測試人員配合，了解並解決產品中存在的問題。

4、負責現有遊戲的維護和性能最佳化。

大數據開發工程師的崗位職責 篇22

職責

1、 進行業務系統資料庫的規劃、設計、實施，設計並最佳化資料庫物理建設方案;

2、 對資料庫進行管理，負責業務系統資料庫的運營及監控;

3、 業務系統資料庫的定期維護和異常處理;

4、 對資料庫性能分析與調優，排錯，保證數據安全;

5、 對資料庫進行定期備份、和按需恢復;

6、 配合其他部門進行的數據處理、查詢，統計和分析工作。

任職資格

1、 計算機相關專業，本科以上學歷，兩年以上相關工作經驗;

2、 精通關係資料庫原理，熟悉資料庫系統的規劃、安裝、配置、性能調試，

3、 精通SQL、pll存儲過程的編寫，有豐富的資料庫管理、運維調優經驗;

4、 熟練使用資料庫管理、分析、設計工具;

5、 對SQLSERVER精通、ORACLE、MYSQL有一定的了解;

6、 快速處理系統突發事件的能力，較強的學習和創新能力;

7、 良好的溝通能力、團隊合作精神。

8、有專職DBA工作經驗優先

大數據開發工程師的崗位職責 篇23

1. 負責天下女人研習社相關後台服務的開發

2. 負責線上伺服器的安全穩定

3. 負責生產環境的部署

4. 參與產品的設計並提供技術可行性建議

大數據開發工程師的崗位職責 篇24

職責：

1、後端JAVA程式的設計和開發;

2、輔助進行系統需求分析和整體設計工作;

3、根據設計文檔或需求說明完成代碼編寫、調試、測試和維護工作;

4、分析並解決軟體開發過程中的問題;

5、協助測試工程師制定測試計畫，定位發現的問題;

6、進行定期的code review，保證代碼的可持續發展。

任職要求：

1、計算機軟體或相關專業，本科及以上學歷,4年以上java開發工作經驗;

2、具備紮實的java基礎，有一定的架構功底 ，熟悉redis、mongodb、mysql 、java高並發 ，有一定的金融技術底層設計能力

3、有spring、微服務、web等分散式開發經驗 ，了解 tcp mvc springCloud

4、熟練使用 java8 tomcat git nginx redis、mongodb、mysql 訊息佇列、spring_cloud

5、積極主動較，強執行力和較好的溝通能力。

大數據開發工程師的崗位職責 篇25

職責：

1、計算機相關基礎紮實，了解常用數據結構和算法;

2、精通PHP程式開發，做事細心謹慎，至少3年以上的PHP項目開發經驗;

3、熟悉Lunix環境，良好的面向對象設計方法和編程思想，有良好的編碼風格和測試習慣;

4、熟悉MySQL等，了解基本的數據結構設計和最佳化。

崗位要求：

1、計算機相關專業，大專及以上學歷;

2、精通ThinkPHP架構、模板引擎的原理與套用，有TP代碼最佳化經驗;

3、熟悉Html/CSS/Div布局,熟悉JQuery,JavaScript,XML,AJAX ;

4、有獨立開發經驗、硬體集成(會務管理系統涉及的相關設備)經驗、前端UI設計優先;

5、熟悉微信接口開發、熟悉APP封裝;

6、具有獨立分析、解決問題的能力，具有良好的編碼習慣;

7、具有良好的溝通能力，團隊合作精神，高度的責任心。

大數據開發工程師的崗位職責 篇26

1、根據產品經理的產品方案，對Android機頂盒產品進行整體架構設計和技術方案的規劃;

2、使用Cocos2d-x引擎開發機頂盒產品;

3、將客戶端產品與服務平台的Web接口或Socket伺服器連線埠進行集成;

4、根據產品需求，實現客戶端核心邏輯、並積累相關組件、特效、UI及動畫框架;

5、針對各不同機頂盒對產品進行兼容性適配;

6、根據業務需求，開發供合作夥伴使用的包含平台業務功能的終端SDK。