大數據開發工程師的工作職責模板

大數據開發工程師的工作職責模板 篇1

職責:

1.負責金融銀行大數據系統相關模組的數據架構及研發實施工作

2.依據業務場景、分析需求提供技術解決方案並加以實現;

3.與客戶業務部門對接,解決數據建模、報表和報告在系統開發遇到的問題;

任職資格:

1.具備3年以上DW系統建設經驗,了解BI系統,有數據管理經驗,有維度建模相關經驗,了解數據倉庫建設過程中的挑戰與問題

2.精通多系統數據融合、清洗、轉換、整合,具備海量數據加工處理相關經驗

3.熟悉業界數據倉庫建模方法、元數據管理、數據質量體系管理

4.掌握大型資料庫開發技術(ORACLE/DB2等),有豐富的資料庫模型設計和最佳化經驗

5.熟練掌握Unix/Linux常規命令、工具及Shell編程

6.掌握一門或多門程式語言優先,如Java、Python、scala等

7.熟悉Hadoop、spark、kafka等大數據生態相關技術,有相關實踐經驗著優先8.良好的語言溝通與表達能力和自我驅動動力9.具備銀行項目設計、開發、最佳化等經驗者加分

大數據開發工程師的工作職責模板 篇2

職責:

1、 參與ODS系統或Hadoop 系統資料庫相關開發,包括數據倉庫的數據模型設計(ODS層設計、基礎數據層設計、匯總層設計等);

2、 參與ETL Mapping設計及開發工作;

3、 參與客戶/用戶畫像、經營管理、產品畫像、行銷活動等主題域建設工作。

資質要求:

1.計算機相關專業本科及以上學歷,優秀者放寬至大專;

2.有大型資料庫(ORALCE/MSSQL SERVER等)開發經驗,有Sybase IQ\HIVE\Spark SQL開發經驗者優先;

3、有較強的SQL編程能力,熟練編寫存儲過程,能設計各種複雜的業務處理、統計分析語句,精通sql性能最佳化;

4、具有數據倉庫、ods、BI商務智慧型項目經驗者優先,具有金融行業項目背景者優先;

5、較好的溝通理解能力,態度踏實,積極上進。

大數據開發工程師的工作職責模板 篇3

1、負責數據倉庫和大數據處理模組的架構設計和開發;

2、負責實現基於Spark框架的分散式計算框架的設計和開發工作;

3、負責Spark技術研究和通用數據平台的性能調優;

4、負責大數據項目中,基於kafka、flume、spark streaming、Spark SQL等相關技術的海量數據的處理、分析、統計、挖掘工作。

5、熟悉Scala/Java語言,對Scala/Java原理、底層技術有深入研究者優先;

6、有過海量數據系統開發經驗者優先;

7、熟悉Hadoop/Spark生態系統組件的使用,至少有2年以上的Spark開發經驗;

8、寫過推薦系統的優先考慮

大數據開發工程師的工作職責模板 篇4

職責

1、負責公司大數據平台建設工作,完成Hdaoop/Spark搭建部署,根據業務需要進行開發;

2、開發實現網路爬蟲並爬取所需數據,有效存儲到大數據平台;

3、對平台數據做預處理,滿足數據展現及後續機器學習等系統使用;

4、根據業務需要,套用大數據實時分析技術、可視化技術等,並對平台發展規划進行設計。

任職資格

1、本科及以上學歷,計算機相關專業;

2、熟悉數據倉庫和數據建模相關技術細節,有編程經驗,熟悉SQL/Hadoop/Hive/Hbase/Spark等大數據工具;

3、具備海量數據處理經驗,或有網際網路行業數據挖掘工作經驗;

4、1年以上崗位經驗優先,本科應屆有意向的,可優先培養。

大數據開發工程師的工作職責模板 篇5

職責:

1、獨立負責工作小組,並對下級成員進行監督;

2、具備資源整合以及對軟體項目全局把控的能力;

3、負責軟體項目的系統設計和需求分析;

4、制定軟體項目開發計畫,並按時完成功能模組的設計、開發以及編程任務;

5、積極配合併完成主管下達的任務,並能夠對軟體部門的發展規劃提出意見;

任職條件

1、大數據相關開發經驗3年以上,至少具備2年以上java開發經驗;

2、有基於hadoop的數據抽取、轉換、載入的開發相關經驗;

3、熟練掌握hadoop生態的相關知識,如hive,hbase,flume.kafka,storm,spark,mapreduce等;

4、熟悉Linux作業系統。熟悉linux各項基本操作,至少掌握一門腳本語言;

5、熟練數據倉庫,對多維數據建模有深入理解;

6、有BI數據平台、數據倉庫、日誌採集、多維數據倉庫設計、開發、架構經驗者優先;

7、思維敏捷,有較強的鑽研學習能力,較好的溝通能力、團隊合作;

大數據開發工程師的工作職責模板 篇6

職責:

1、參與系統需求分析、架構設計和概要設計;

2、獨立進行系統功能模組的分析設計和核心功能的開發;

3、負責解決開發過程中的技術問題;

4、有能力參與需求分析、軟體設計、計畫制定與一些技術文檔的編寫工作;

5、定期向上級主管匯報工作情況。

任職要求:

1、有紮實的Java開發經驗,具有3年及以上Java開發經驗,計算機相關專業;

2、具備良好的面向對象編程經驗,具有較強的分析設計能力;

3、熟練HTML/CSS/Javascript/JQuery等前端開發;

4、精通MySQL,Oracle,熟練掌握SQL,存儲過程編寫等;

5、熟悉SpringMVC等Java框架,精通Springboot,MyBatis,Hibernate,Netty,Mina優先;

6、有開發系統接口經驗;

7、有客戶現場開發經驗;

8、善於學習與溝通,具有團隊精神;

大數據開發工程師的工作職責模板 篇7

1、負責音視頻會議系統功能的開發實現;

2、負責音視頻會議系統程式功能定製和問題處理;

3、負責實時音視頻通信和傳輸SDK的業務功能設計與開發,主要內容包含但不限於音視頻、網路傳輸等。

大數據開發工程師的工作職責模板 篇8

職責:

1、 規劃及建設大數據平台;

2、 負責大數據存儲系統、分散式計算系統、挖掘算法等設計、研發以及維護、最佳化工作;

3、負責分析、挖掘、對抗各種產品安全層面的惡意行為;

4、 參與項目的系統設計和核心代碼開發,指導和培訓其他工程師;

5、 整理和提交技術文檔,負責核心功能模組的代碼編寫和測試工作。

崗位要求:

1、 計算機、統計學等相關專業本科及以上學歷,具有深厚的數學、統計學和計算機相關知識,精通數據倉庫和數據挖掘的相關技術,3年以上大數據開發相關經驗;

2、具有非常紮實的Java基礎,熟悉Shell、Python、R、Scala等一種以上語言;

3、算法基礎紮實,熟悉常見的數據結構,了解分散式算法和分散式系統的技術原理;

4、精通MapReduce設計方法或Spark計算框架、對NoSQL,Hadoop、Hbase、Spark、Hive等主流雲計算,大數據相關軟體有充分的了解,並且有實踐經驗,能解決套用中的複雜問題;

5、熟悉大數據處理相關技術,包括但不限於Hadoop、Hive、Hbase、Impala、Spark,Kafaka、Flume、Sqoop、Storm、Redis等;

6、研讀過Hadoop、Hbase、Hive原始碼者,能夠在特定業務中進行定製改造者優先;

7、具有海量數據處理、數據挖掘、數據分析相關項目的工作經驗者優先。

大數據開發工程師的工作職責模板 篇9

1、配合架構師完成系統設計和工作任務分派;

2、負責平台分散式與高可用的核心模組設計與實現;

3、分析系統所產生的問題,並提出解決方案解決系統問題,以保障系統能夠按照需求正確達成預期效果;

4、跟蹤和分析現網平台,以提高生產系統的健壯性、可復用性;

5、指導和幫助組員,以確保產品質量和進度。

大數據開發工程師的工作職責模板 篇10

1.負責MES、WMS、QMS、TMS、SPC等製造相關係統的開發、維護工作,保證系統快速、穩定地運行;

2.分析各製造相關部門的需求,對合理需求給出解決方案,並在系統中實現;

3.負責相應系統中許可權等設定,保證公司的信息安全;

4.結合系統運行中出現的情況和實際業務狀況,對業務部門提出合理的改善建議。

任職資格:

1.本科及以上學歷,計算機相關專業,英語水平四級及以上,口語流利者更佳;

2.在製造行業MES領域5年以上開發工作經驗。深入研究過一套以上成熟的MES解決方案,能夠根據業務需求,提出改善建議。對製造行業信息化的發展趨勢,有自己的獨到見解;

3.熟練掌握C#、C/C++等開發語言,能夠熟練編寫WCF、WebService,熟悉jquery等前端腳本框架。在Oracle和sqlserver資料庫下,精通SQL編寫和調優,特別是對大批量數據處理需要有相關經驗;

4.溝通和表達能力良好,富有團隊協作精神。有作為項目負責人帶領外包、顧問、組員按時完成目標和做項目管理的能力;

5、在大型電子製造行業信息或開發部門有過多年開發經驗的人員優先考慮。

大數據開發工程師的工作職責模板 篇11

職責:

1、負責核心業務研發;

2、負責重點技術問題的分析與處理;

3、深入理解業務需求,分析和發現系統瓶頸,推動系統性能的提高;

4、進行詳細設計、代碼開發,配合測試,高質量完成項目;

任職要求:

1、全日制統招,本科以上學歷, 計算機相關專業;

2、2年以上Java開發經驗;非本科以上學歷需4年以上開發經驗;有過中大型項目開發經驗者或者分散式項目經驗者優先考慮。

3、熟練掌握Spring、 SpringMvc、Struts2、Hibernate等開發技術;了解JAVA多執行緒及並發。

4、熟悉XML、HTML、Javascript、CSS的使用和套用開發以及 AJAX技術。

5、熟練掌握常用資料庫使用,熟悉mysql、Oracle、postgresql等資料庫中的一種或多種。

6、熟悉了解中間件(redis、nginx等)。

7、精通常見的Java 開發工具idea,熟悉常見的Java Web容器Tomcat等 。

大數據開發工程師的工作職責模板 篇12

職責:

1、 負責公司大數據平台數據處理工具ETL、流處理平台等建設,功能規劃,平台演進,維護調優等;

2、 結合公司業務特徵,負責公司數據倉庫規劃、數據倉庫建設、數倉管理等;

3、 負責大數據處理技術研究及新技術引進,參與超大規模實時/離線數據計算框架,存儲、查詢、可視化解決方案的設計,研發;

4、 負責公司業務數據倉庫模型建設及全業務數據域打通;

5、 負責BI報表和可視化項目,和客戶深度溝通,理解客戶的業務挑戰,提供解決方案,制定開發計畫並執行,支持各單位日常數據需求和任務;

任職資格:

1、 熟練掌握關係型資料庫,例如:Oracle、Mysql、Vertica等;熟悉NoSql資料庫,例如HBase、Redis、MongodDB等;具備豐富的資料庫管理和運維調優經驗;

2、 熟悉數據倉庫領域知識和技能者優先,包括但不局限於:元數據管理、數據開發測試工具與方法、數據質量、主數據管理,數據打通等;

3、 有從事分散式數據存儲與計算平台套用開發經驗,熟悉Hadoop生態相關技術並有相關實踐經驗著優先,如Hdfs、Mapreduce、Hive、Hbase、Spark、Storm;

4、 精通數據預處理、檢驗、清洗、分析方法,精通各種常用統計檢驗方法;熟練掌握一門或多門程式語言,並有大型項目建設經驗者優先,如Java、Python、Shell和scala等;

5、精通Linux,熟悉日常運維、搭建常見伺服器、定位解決日常問題的能力,具備ETL開發經驗優先;

6、 良好的語言溝通與表達能力,有豐富的數據開發經驗,較強的數據、平台、技術理解能力;

7、 具備數學類、計算機類等相關專業統招本科及以上學歷,具有3年及以上大數據開發工作經驗,有網際網路行業背景優先。

大數據開發工程師的工作職責模板 篇13

職責:

1、負責公司產品JAVA端的系統設計與研發;

2、負責公司軟體系統的長期維護和最佳化;

3、研究項目技術細節,參與技術方案討論,進行系統框架和核心模組的詳細設計,編寫相應的技術文檔;

職位需求:

1、計算機及相關專業,大專或以上學歷,兩年以上JAVA開發經驗;

2、熟悉掌握Struts2、Spring、Hibernate/MyBatis框架技術,熟悉TCP/IP通信協定;

3、了解Spring Cloud、Spring Boot、CXF、RESTful微服務框架技術;

4、熟悉MySQL、Oracle等主流資料庫的開發,能進行資料庫設計;

5、熟悉HTML、CSS、JavaScript、JOSN、XML等Web前端開發技術,熟悉jQuery、Ajax技術;

6、熟悉Maven/Gradle等項目構建管理工具,SVN/Git版本管理;

7、了解Linux/Unix系統基本命令操作;

8、責任心強,有良好的溝通能力、學習能力。

大數據開發工程師的工作職責模板 篇14

職責

1、負責公司產品運營相關網站後端快速回響開發;

2、負責公司運營支持相關係統開發;

3、負責設計和開發一些內部工具,提高網站整體性開發效益,保證一定的質量;

4、負責相關APP接口開發;

5、配合移動部門與產品部門實現伺服器端相關接口開發。

任職資格

1、計算機或相關專業,本科以上學歷;

2、熟練使用PHP進行程式開發,至少一年以上的PHP項目開發經驗,有模板開發經驗;

3、熟悉Linux系統,至少一年以上Linux平台開發經驗;

4、掌握WEB編程相關知識JavaScript,CSS,XML,HTTP協定;

5、熟悉大數據量下資料庫(MSSQL、MySQL)的性能管理及最佳化,具有一定的資料庫規劃能力;

6、有大型網站開發經驗者優先;

7、較強的責任心及團隊合作精神,有獨立解決問題的能力。

大數據開發工程師的工作職責模板 篇15

職責:

1、負責產品平台的研發、維護和升級,完成系統框架、核心代碼、主要功能的指導編寫;

2、深入理解業務需求,完成模組設計、編碼,制定技術文檔和開發規範,並對開發過程進行持續改進;

3、主導項目關鍵技術問題的攻關,負責組織技術架構、解決方案的評審,對團隊開發人員進行代碼質量審核、技術指導和監督;

4、對開發團隊進行技術指導和培訓。

任職要求:

1、本科以上學歷(必須有學歷學位證書,學信網可查),5年以上Java開發工作經驗;

2、專業知識及技能:

1)精通Java、熟練使用Spring、Spring MVC、MyBatis、Hibernate、struts2 等主流開源框架;

2)熟悉html、css、javascript、jQuery、bootstrap等前台技術;

3)熟練tomcat/was、maven、svn,熟悉mysql、oracle等關係型資料庫及NOSQL,如redis、hbase等;

4)熟練使用JBPM,ACTIVITY 中任意一種流程技術,熟悉Lucene 等開源技術.

5)熟悉Linux環境,有大型電商平台架構經驗優先;良好的學習能力和團隊合作意識;

6)具有良好的表達和溝通能力,思路清晰,較強的責任心、團隊精神以及動手能力,能承擔較大工作壓力;

7)對元數據、數據治理 有相關開發經驗者優先;

大數據開發工程師的工作職責模板 篇16

職責:

1.參與產品需求分析及評審,設計產品解決方案;

2.負責系統架構、資料庫、接口設計等工作;

3.負責系統核心代碼開發;

4.參與日常開發和測試工作,解決開發中的技術問題;

5.解決日常和線上系統問題,及時處理系統問題;

崗位要求:

1.計算機或相關專業本科及以上學歷,1年以上工作經驗;

2.熟練掌握Java語言,有伺服器端開發經驗者優先;

3.熟悉 SSH 開發框架,具備maven實際項目使用經歷,具備接口編程思想,有大型套用開發經驗者優先;

4.熟練套用HIBERNATE持久層技術以及JPA、Spring、SpringMVC,Mybatis等;

5.熟悉MySql,Oracle,具備一定的資料庫設計最佳化能力;

6.有dubbo框架使用經驗優先,有分散式開發、高並發性能調優經驗者優先

7.具備紮實的數據結構及算法基礎;

8.優秀的學習能力、分析和解決問題的能力及強烈的進取心;

9.誠懇、踏實,對技術與工作充滿熱情,具備良好的溝通能力和團隊合作精神.

大數據開發工程師的工作職責模板 篇17

1、參與項目整體設計開發實施

2、獨立完成功能模組的開發,並負責各個功能及模組的接口設計工作

3、編寫核心代碼與組件

4、負責系統的性能最佳化和技術難點攻關

5、編寫開發及技術文檔

6、研究與項目有關的新技術,並能套用到項目開發中

7、熟悉ThinkPHP、CI、Laravel、easySwoole等框架,了解Vue、Layui等前端框架,對高並發有實戰經驗

8、掌握Linux/Windows等作業系統、Web環境配置的各種最佳化方案

9、熟練掌握使用資料庫MYSQL,熟練使用Redis、MongoDB、Memcache

10、具備較強的程式部署、調試及程式故障分析能力,掌握Python、Shell變成

大數據開發工程師的工作職責模板 篇18

職責:

1. 根據客戶需求,負責產品設計和開發工作;

2. 根據公司的質量要求,對所負責開發的產品進行單元測試;

3. 承擔部分新技術試驗和研究,並套用到公司產品中;

4. 能夠高效解決項目開發中遇到的問題;

5. 保質保量及時的完成公司下達的任務;

崗位要求:

1. 熟練使用PHP,熟悉ThinkPHP框架者優先;

2. 熟練使用Web前端技術,例如HTML/HTML5、JS、JQuery、CSS等;

3. 熟悉SQL語言,熟悉MySQL等資料庫的套用開發;

4. 具備良好的代碼編程習慣及較強的文檔編寫能力;

5. 具備良好的團隊協作精神,極強的責任心;

6. 具有大型網際網路套用開發經驗者優先。

大數據開發工程師的工作職責模板 篇19

職責:

1、維護現有學歷平台的穩定;

2、針對需求進行定製開發;

3、針對現有資料庫和平台進行相關最佳化;

4、按時完成自己的開發工作,並做好單元測試;

5、及時修改測試人員反饋的bug;

6、撰寫相關的開發文檔。

任職資格:

1、3年以上c# ,Asp.net,webform,mvc編程經驗。熟悉.net運行機制;

2、熟悉面向對象編程,精通c# 對象 、接口、委託等基礎概念及套用;

3、3年以上sqlserver資料庫使用經驗,熟悉編寫存儲過程,能對sql語句進行性能最佳化;

4、掌握html、js、css客戶端技術,熟練使用ajax、jquery;

5、熟練掌握Sql Server 20xx/20xx資料庫開發,能夠使用索引、視圖、查詢最佳化、存儲過程、資料庫作業等技術;

6、具有SQL語句調優和資料庫調優工作經驗。

大數據開發工程師的工作職責模板 篇20

職責:

1. 參與公司項目或產品的前期調研、需求整理、設計、開發、部署等工作:

2. 按照設計的功能,協助公司開發工程師完成相關模組的代碼編寫工作;

3. 整理公司項目或產品的技術文檔;

4. 參與公司項目或產品的驗收工作;

任職要求:

1、基本了解JAVA開發語言,了解面向對象的軟體設計方法;

2、熟悉XML、JSON、XSLT技術;

3、學習能力強,工作熱情高,富有責任感,工作認真、細緻、敬業,責任心強;

大數據開發工程師的工作職責模板 篇21

1. 參與MES、設備管理系統等項目開發和實施,配合項目經理按時交付高質量的開發成果;

2. 參與項目的需求調研,系統設計,需求評審及系統設計報告;

3. 系統模組設計與編碼工作;

4. 項目的系統維護、技術支持及日常問題處理。

任職要求:

1、大專或以上學歷,計算機相關專業,三年以上MES系統相關模組的開發經驗。

2、精通Asp.net、C#開發語言,熟悉B/S架構,熟悉ajax、javascript、css、html等前端技術;熟練使用Visual Studio開發環境進行開發、調試和單元測試;

3、熟悉SQL Server資料庫,能熟練編寫SQL語句進行資料庫操作,能獨立編寫視圖、存儲過程、函式,對資料庫編程有較強的調試、最佳化能力;

4、具備較強的文檔撰寫能力(包括需求分析、概要設計/詳細設計等);

5、具有較好的溝通能力和良好的團隊合作精神

6、可適應不定期出差。

大數據開發工程師的工作職責模板 篇22

職責

1、負責產品開發;

2、負責指導、處理、協調和解決項目中出現的技術問題;

3、根據公司產品的版本管理規範,完成所負責項目的伺服器代碼的版本歸檔、版本變更、版本發布工作。

4、負責處理線上版本緊急技術問題,線上版本bug處理;

5、負責伺服器系統最佳化,提高性能。

任職資格

1、軟體基礎理論知識紮實,具有良好的數據結構、算法功底;

2、精通java,對分散式計算、數據挖掘有深入了解者優先;

3、熟悉Hadoop、Storm、HBase、Hive等框架者優先;

4、具備良好的團隊意識及創新思維、自我激勵能力,善於與人合作;

5、具有良好的表達與溝通能力以及獨立思考並解決問題的能力。

大數據開發工程師的工作職責模板 篇23

職責:

1、依據客戶需求完成大數據項目的數據分析及建模;

2、進行大數據核心算法的編寫;

3、參與項目的需求分析、系統設計、編碼工作;

4、參與開發過程中相關新技術的研究和驗證。

5.協助承擔架構性的體系設計和改造工作,配合制定技術實施方案,按照總體設計組織子系統的設計和開發。

任職要求:

1、精通數據建模、數據體系建設,具備數據倉庫架構設計、模型設計和處理性能調優等相關經驗;

2、具有豐富的基於hadoop體系的數據平台、數據倉庫建設經驗,精通基於hadoop源碼的開發、最佳化改造及成功套用案例;

3、精通hadoop生態體系各項技術,如kafka、flume、hive、impala、hbase、spark等,具有100+節點hadoop集群的開發、運維經驗;

4、具有對大型hadoop集群的硬體規劃能力;

大數據開發工程師的工作職責模板 篇24

1、負責數據管控產品的實施落地;

2、負責數據管控平台、數據標準模組、數據質量模組、元數據管理模組的實施部署;

3、負責業務流程的推廣與控制,保證項目順利落地;

4、負責管控平台部分功能的定製開發;

5、負責對數據管控平台各模組的內容進行培訓。

大數據開發工程師的工作職責模板 篇25

1、負責移動端APP功能設計和重構,最佳化現有APP架構,性能以及用戶體驗。

2、配合產品經理,後端開發及測試完成APP功能疊代開發和交付。

3、協調APP團隊協作,技術支持和進度管理。

大數據開發工程師的工作職責模板 篇26

職責:

1. 按質、按量、按時的完成代碼開發任務。

2. 根據項目需要,撰寫及修改相應的文檔。

3. 完成在各個測試階段BUG的修改

4. 按照編碼規範編程,並編制貫穿整個軟體開發周期的文檔資料

任職條件

1. 大專以上學歷,年齡不超過35歲,熱愛編程開發,計算機,軟體相關專業的應屆生也可培養。

2. 會PHP/MySQL開發, 熟悉基於PHP的面向對象編程思想,

3. 熟悉WEB套用框架(Codelgniter、Zend Framework、Symfony、ThinkPhp或其它);

4. 熟悉MySQL資料庫套用開發,熟悉MySQL日常維護、性能最佳化等基本操作技能;對SQL Server, Oracal等有一定認識了解

5. 謙虛好學,積極上進。

大數據開發工程師的工作職責模板 篇27

1.具有無線路由器產品系統開發經驗,熟悉主流無線路由器晶片方案開發,具有IPQ平台開發經驗者優先;

2.熟悉基於OpenWRT或Linux的無線路由固件開發,能夠對路由固件系統進行裁剪和定製開發;

3..對路由網關產品核心及iptable,網卡驅動,網路協定棧有相當了解,熟悉DNS、DHCP、NTP、HTTP等套用層協定;

4.精通Linux網路體系結構或其它嵌入式系統C語言編程,SHELL編程。

5.熟悉無線路由器底層開發,熟悉網路編程及相關網路協定,熟悉luci深度定製。