大數據開發工程師的主要職責

大數據開發工程師的主要職責 篇1

職責:

1、負責公司大數據平台建設;

2、根據業務需求,制定數據倉庫和數據分析平台的實施和持續更新;

3、攻克技術難關,保證大數據系統的穩定運行;

4、完成大數據產品的開發。

職位要求:

1、計算機相關專業全日制專科及以上學歷,大數據相關經驗;

2、熟悉Java或Scala語言,熟悉Spark,Hadoop,Kafka,Hive,HBase,ZooKeeper等大數據相關技術;

3、精通SQL語句並對Redis,Mongodb等NoSQL資料庫有一定經驗;

4、對於高並發、高穩定可用性、性能、大數據處理有過實際項目產品經驗者優先;

5、責任心強,工作踏實,有團隊協作精神,溝通能力強者優先。

大數據開發工程師的主要職責 篇2

職責:

1.負責公司環保大數據平台的架構與搭建;

2.負責需求分析,根據客戶套用需求規劃大數據平台架構;

3.負責將大數據平台部署至私有伺服器群、私有雲或公有雲;

4.負責在企業內部進行數據平台原型開發與數據實時互動、存儲性能測試;

5.負責與數據挖掘算法互動的架構設計與開發。

任職要求:

1.計算機相關專業,全日制本科以上學歷;

2.具有3年以上大數據相關套用開發經驗,有Java開發經驗更佳;

3.至少熟悉一種流行的大數據編程框架,如Spark,Storm,Flink等;

4.熟悉大數據生態圈常用技術如RocketMQ,Kafka,Flume,Zookeeper等;

5.熟悉Hadoop安裝、調試、發布配置套用,熟悉Linux作業系統更佳;

6.至少熟悉TIDB,MySQL,SQLServer其中一種資料庫;

7.學習能力強,對技術有熱情,關注技術發展方向;

8.具有工業物聯網、智慧型環保項目背景者優先。

大數據開發工程師的主要職責 篇3

職責:

1、負責公司項目套用監測數據,分析軟體大數據平台的代碼開發;

2、負責大數據體系架構設計和套用產品的研究;

3、負責大數據平台及套用場景的構建、部署、測試;

4、編寫軟體研發相關技術文檔;

5、編寫產品研發相關任務單計畫,階段性代碼、技術方案和軟體產品及時提交至配置管理理庫;

6、Spark程式的研發,sqoop腳本開發和商家用戶行為等離線分析數據;

7、kudu,kylin等技術調研,編寫軟體研發相關技術文檔;

8、SUNMI數倉設計架構以及ETL流程開發;

9、建立多維度,多體系的用戶標籤體系以及用戶行為資料庫。

崗位要求 :

1、本科以上學歷,4年以上?工作經驗,2年以上Hadoop平台的相關研發經驗,具有良好的需求分析,方案設計,架構設計,程式編寫、測試能力;

2、熟悉J2EE或Python平台開發,有良好的Java或Python語言功底;

3、了解Linux/Unix作業系統,了解腳本編程(Shell/Python其中一種);

4、具備數據中心資源管理(YARN)、監控(ClouderaManage)、調度(Azkaban)等系統研發經驗者優先,具備分散式系統研發經驗者優先;

5、熟悉hadoop以及其?生態圈系統上的hive、hbase、sqoop、spark、spark-streaming等技

術,懂hadoop源碼者優先;

6、熟悉Kylin有OLAP平台設計和開發經驗優先;

7、具有套用大數據技術處理TB級以上數據的項目開發經驗者優先;

8、有較清晰的代碼編寫規範,邏輯性強,工作態度認真,良好溝通能力和團隊合作精神。

大數據開發工程師的主要職責 篇4

職責:

1、 負責基於Hadoop/Spark平台架構的開發、設計和布局 ;

2、 完成系統框架的設計和核心代碼的編寫;

3、 針對海量的用戶行為數據進行統計、分析與挖掘,不斷提高系統運行效率;

4、 負責對數據進行分析,為項目組提供大數據技術指導及分析手段支撐;

5、 負責大數據平台的性能監控和持續最佳化;針對需求提供大數據分析技術解決方案 ;

6、 大數據平台的運維工作,持續完善大數據平台,保證穩定性、安全性;

7、 熟練使用大數據ETL數據抽取工具;

8、領導安排的其他工作。

任職資格:

1、 3年網際網路行業開發經驗,計算機或相關專業本科以上學歷;

2、 精通Hadoop大數據平台架構,具有紮實的Java/Python等開發語言;並可以開發高效可靠的代碼;

3、 具有較強的數據分析、數據挖掘的能力;

4、 熟悉spark、Hive、storm等計算框架者優先,對分散式存儲和計算原理有較深的理解;

5、 嚴密的數學思維、突出的分析和歸納能力、優秀的溝通表達能;

6、 個性開朗,對技術鑽研好學、邏輯思維能力強,溝通能力優秀,有團隊合作精神。

大數據開發工程師的主要職責 篇5

職責:

1. 負責機票酒店大數據項目的評估、設計及關鍵模組研發;

2. 參與公司大數據平台及在線上分析系統的建設;

3. 機器學習算法討論、評估及算法的最終編碼實現;

4. 數據平台開發規範制定,數據建模及核心框架研發;

任職要求:

1. 本科及以上學歷,計算機或數學相關專業,三年以上相關工作經驗;

2. 掌握Java、Python、Scala等 中的一到兩種語言;

3. 熟悉Mongodb、Hive、Hbase、Redis等NoSQL資料庫開發和調優;

4. 熟悉數據相關開源框架和工具,如ZooKeeper、Spark、Flink、Impala、Kylin 等;

5. 對數據結構和機器學習算法有一定的了解;

6. 具有海量數據處理、數據挖掘、數據分析相關項目的工作經驗者優先;

7. 有機票酒店等旅遊行業數據開發經驗者優先。

大數據開發工程師的主要職責 篇6

1.負責顯示圖像處理相關的FPGA RTL架構及子模組設計,工程綜合及時序分析,解決開發過程中出現的技術問題;

2.負責晶片化IP開發工作,對應晶片化代碼綜合及驗證;

職位要求:

熟悉FPGA原理,熟悉HDMI、DP和網口等接口調試,熟練掌握FPGA開發軟體、硬體描述語言,熟悉DDR控制設計

有豐富的圖像處理或圖像識別相關FPGA項目開發經驗、有較多的複雜工程整合和時序分析經驗,有RTL代碼測試經驗

大數據開發工程師的主要職責 篇7

1、根據設計文檔或者需求說明,完成代碼編寫、調試、測試、部署和維護;

2、負責系統的總體技術方案與系統設計,系統的質量控制;

3、負責公司套用系統項目的推進工作;

4、負責完成公司或部門交付的工作任務。

大數據開發工程師的主要職責 篇8

職責:

1. 編寫存儲過程和SQL腳本實現複雜業務邏輯;

2. 根據業務邏輯完成資料庫表設計,和整個數據的抽取清洗轉換過程(ETL),以及數據輸出;

3. 對於運行緩慢的SQL語句調優;

4. 數據處理自動化腳本部署和維護。

5、定時巡查資料庫系統,發現潛在問題和性能瓶頸,並預警

【任職要求】

大專以上學歷,計算機相關專業,有存儲開發經驗;

2、數據Oracle或SQLSERVER的運行機制,熟練掌握Oracle或SQLSERVER的基本操作和調優;

3、精通SQL語句,基礎紮實

大數據開發工程師的主要職責 篇9

職責:

1. 負責公司項目微信小程式的開發;

2. 負責與服務端完成接口聯調;

3. 能夠正確理解需求,並獨立完成代碼編寫並自測;

4. 有獨立鑽研解決工作中疑難問題的能力

崗位要求:

1. HTML、CSS、JavaScript 基礎紮實;

2. 至少3年以上工作經驗,熟悉微信小程式的開發流程,熟悉小程式開發API,並有相關項目開發經驗;

3. 有前端框架(如Angular.js、Vue.js(主要)、React.js等)項目經驗者優先,對Weex框架熟練;

4. 有良好的編碼習慣,結構清晰、命名規範、邏輯性強;

5. 優秀的溝通能力,積極的工作態度,具有良好的團隊協作精神;

6. 可以承受較強的工作壓力;

7. 熟悉後台等其中一種後台語言優先;

8. 善於分析問題,並用簡單的方案解決複雜問題,化繁為簡。

大數據開發工程師的主要職責 篇10

職責:

1、負責運維系統、平台的構建與開發工作

2、負責運維自動化、規範化解決方案的開發工作

3、深入理解系統,為其持續最佳化提供建設性意見

4、完成領導交代的其他臨時性工作。

崗位要求

1、具有5年以上開發經驗

2、本科及以上學歷,計算機相關專業優先

3、主動、正直、有責任心和團隊協作意識

4、精通Java語言、網路及多執行緒編程,掌握Spring、SpringCloud等常用框架技術

5、熟悉常見的開源技術,如HBase、Redis、KafKa、Dubbo、ZooKeeper等,並具備一定的經驗

6、良好的伺服器端編程能力和編程習慣,對設計模式深入理解

7、了解網際網路產品運維、監控,具有大型運維系統、監控系統、工作流系統開發工作經驗者優先

大數據開發工程師的主要職責 篇11

職責:

1、負責Devops流水線工具開發、運維工具、自動化安裝部署、數據監控分析等平台/工具的開發工作

2、熟練使用Django/flask/webpy或其他python web框架

3、熟悉Ansible/Saltstack等主流運維工具的配置、管理、使用

4、熟練掌握html、jquery、ajax等前端知識,並有實際開發經驗

5、熟悉Jenkins、maven、Github、Gitlab等工具

任職要求:

1、具有3-5年網際網路運維平台開發經驗,能獨立進行功能開發

2、精通Python和shell編程,熟悉Python常用框架(Django、Flask、webpy等);

3、熟練掌握html、jquery、ajax等前端知識,並有實際開發經驗

4、熟悉Ansible/Saltstack等主流運維工具的配置、管理、使用

5、熟悉Jenkins、maven、Github、Gitlab等工具

6、熟悉Linux系統,有Linux套用系統運維相關經驗

大數據開發工程師的主要職責 篇12

職責:

1、協助收集行業技術資料,收集專業領域內的技術信息,為領導決策提供信息支持。

2、參與新產品開發和產品完善,承擔簡單系統原理設計,原理圖、接線圖繪製;編寫調試程式,測試或協助測試開發的系統設備,確保其按設計要求正常運行;維護管理或協助管理所開發的系統;提出產品改進建議和新產品開發提議。

3、技術文檔編寫,建立完整的系統設計技術文檔;編寫裝置使用說明。

崗位要求:

1、本科及其以上學歷,電力電子、自動化相關專業。

2、有相關項目研發經驗。

3、掌握電力電子、數字、模擬電路基礎知識;熟練掌握matlab、autocad軟體,熟悉C語言、Verilog或VHDL開發邏輯設計。

4、熟練使用自動化辦公軟體和相應計算機輔助設計軟體,流暢閱讀和理解英文資料。

5、較強的學習能力、溝通能力、計畫與執行能力。較強的成就動機、責任心、團隊合作精神。

大數據開發工程師的主要職責 篇13

1、負責Android Framework開發和維護;

2、負責Android套用開發;

3、負責系統性能調優;

4、參與重大技術問題的技術攻關;

5、整理和輸出規範的代碼和設計文檔。

大數據開發工程師的主要職責 篇14

職責:

1.和產品經理溝通產品需求;

2.進行業務需求系統分析,提出技術研究及可行性報告及系統概要設計;

3.系統子模組設計和資料庫設計;

4.詳細設計、代碼編寫和單元測試;

5.評審其它團隊成員的代碼;

6.調研、評估最新雲服務技術並套用到當前項目。

任職要求:

1.計算機相關專業,本科及以上學歷(985/211優先考慮),3年以上J2EE工作經驗;

2.熟練使用主流的開發框架,SpringMVC、MyBatis、SpringBoot等;

3.具有豐富的mysql使用與開發經驗,以及Redis等快取資料庫技術經驗;

4.熟悉微服務設計;

5.熟悉maven/gradle、git,熟悉tomcat、nginx等開源項目

6.有高並發及大數據量系統開發經驗的優先;

7.有Restful API、spring cloud、dubbo開發經驗者的優先;

8.有GIS開發經驗的優先。

大數據開發工程師的主要職責 篇15

職責:

1.參與產品需求分析及評審,設計產品解決方案;

2.負責系統架構、資料庫、接口設計等工作;

3.負責系統核心代碼開發;

4.參與日常開發和測試工作,解決開發中的技術問題;

5.解決日常和線上系統問題,及時處理系統問題;

崗位要求:

1.計算機或相關專業本科及以上學歷,1年以上工作經驗;

2.熟練掌握Java語言,有伺服器端開發經驗者優先;

3.熟悉 SSH 開發框架,具備maven實際項目使用經歷,具備接口編程思想,有大型套用開發經驗者優先;

4.熟練套用HIBERNATE持久層技術以及JPA、Spring、SpringMVC,Mybatis等;

5.熟悉MySql,Oracle,具備一定的資料庫設計最佳化能力;

6.有dubbo框架使用經驗優先,有分散式開發、高並發性能調優經驗者優先

7.具備紮實的數據結構及算法基礎;

8.優秀的學習能力、分析和解決問題的能力及強烈的進取心;

9.誠懇、踏實,對技術與工作充滿熱情,具備良好的溝通能力和團隊合作精神.

大數據開發工程師的主要職責 篇16

職責:

1、依據業務需求邏輯和功能模組的設計思路,負責平台項目產品的開發和技術文檔的撰寫,並主導實施。

2、監控系統運行健康狀態,及時最佳化系統性能,支持產品套用服務。

3、參與軟體質量審查,提升開發質量和效率。

4、完成項目的核心編碼,支撐企業SOA服務化設計和實施,配合項目主管做好項目管理 。

5、參與部分產品的架構預研並做技術分享 。

6、全程參與產品的需求分析、設計、開發以及測試幾個階段 。

任職資格:

1、計算機相關專業本科以上學歷。

2、2年以上JAVA項目開發經驗;有過大型項目經驗優先考慮。

3、Java基礎紮實、理解JVM原理、有多執行緒、並發系統開發經驗的優先考慮;熟悉jsp、Jquary、JavaScript/Ajax。

4、熟悉主流開源框架,如Spring、spring mvc、elasticsearch等;

5、掌握分散式系統原理和實踐,出色的工程意識和架構設計能力。有SOA架構開發經驗優先。

6、優秀的分析問題和解決問題的能力。

7、責任心強,做事細心 、有恆心和毅力、具備良好的團隊合作精神和承受壓力的能力。

大數據開發工程師的主要職責 篇17

職責:

1.負責移動網際網路產品伺服器端的設計和研發工作。

2.按時高質量的完成上級安排的開發任務和工作,配合測試團隊進行負責模組測試回歸和修改BUG。

3.按照團隊的開發編碼規範進行開發,編寫規範化、易閱讀、可擴展、便維護、高性能、安全性的代碼。

4.參與團隊的技術分享、溝通和交流,具備與多人、多團隊溝通和協作進行開發的能力。

崗位要求:

1.3年以上Java EE開發經驗,計算機相關專業專科以上學歷,具有紮實的計算機基礎理論知識,對Java底層、泛型、反射、Annotation有深刻的理解。

2.靈活使用常見設計模式,深入理解Spring、SpringMVC、MyBatis、Spring Boot等常用框架的原理。

3.能夠基於MySQL資料庫靈活、高效地設計和編寫出滿足業務需求的SQL和相關表結構。

4.能夠使用Redis、ZooKeeper、快取、佇列、多執行緒、執行緒池、ThreadLocal、Elasticsearch、Quartz、RESTFul、Oscached、ActiveMQ/RabbitMQ/RocketMQ等技術開發項目。

5.具備一定的Web安全經驗,深刻知道防SQL注入、防檔案上傳漏洞、防XSS跨站腳本攻擊、防CSRF/XSRF跨站請求偽造攻擊、防表單重複提交、敏感詞過濾和處理、敏感數據安全性、重要資源安全性等的重要性。

6.要了解或者知道Maven、Jenkins、GIT、Eclipse/IDEA等相關工具的使用。

7.正直誠信、有責任感、有激情、有好奇心; 對技術有強烈的興趣,喜歡鑽研,有優秀的學習能力和技術落地轉化能力;

8.參與開發過大型分散式架構的電商項目,或者使用過Dubbo開發過大型分散式架構的電商項目,具備這些經驗優先考慮。

9.具備Spring Cloud體系項目經驗優先考慮。

大數據開發工程師的主要職責 篇18

1.具有無線路由器產品系統開發經驗,熟悉主流無線路由器晶片方案開發,具有IPQ平台開發經驗者優先;

2.熟悉基於OpenWRT或Linux的無線路由固件開發,能夠對路由固件系統進行裁剪和定製開發;

3..對路由網關產品核心及iptable,網卡驅動,網路協定棧有相當了解,熟悉DNS、DHCP、NTP、HTTP等套用層協定;

4.精通Linux網路體系結構或其它嵌入式系統C語言編程,SHELL編程。

5.熟悉無線路由器底層開發,熟悉網路編程及相關網路協定,熟悉luci深度定製。

大數據開發工程師的主要職責 篇19

職責

1、負責公司企業SaaS產品線與相關平台的後端核心技術和業務開發;

2、接收產品部設計,帶領前端開發,配合產品與測試團隊,實現產品設計等相關工作,逐步完善軟體產品架構;

3、配合技術總監,負責和參與相關技術的技術選型和核心代碼編寫,擬定技術標準;

4、負責技術團隊建設及技術培訓工作,帶領團隊鑽研新的技術;

5、跟蹤和研究IT新技術、新產品的發展方向,推動新技術套用。

任職條件

1、計算機、軟體工程專業本科或以上學歷,5年以上Java的開發經驗,企業產品與業務理解能力優秀;

2、深刻了解常用java框架(spring, mybatis,Hibernate等),能夠整合和開發自有框架、開發工具;

3、具有設計並實現高並發、高可用Java套用的能力。熟悉分散式快取、分散式存儲技術方案;

4、熟悉Linux環境與TCP網路,熟悉容器(Tomcat等)的配置和使用,了解shell腳本工具;

5、思路清晰,善於思考,能獨立分析和解決問題;責任心強,具備良好的團隊合作精神;

6、能夠平衡業務需求與技術架構,具備較強的邏輯思維能力和表達溝通能力,有很強的自學能力,喜歡鑽研技術。

大數據開發工程師的主要職責 篇20

職責:

1、負責公司WMS,OMS,TMS,BMS等產品的核心功能開發及相關開發文檔的編寫;

2、參與公司物流產品對外接口的設計與開發;

3、編寫相關業務場景的技術解決方案;

4、完成領導安排的其它工作。

崗位要求:

1、計算機或相關專業大專及以上學歷;

2、3年及3年以上軟體產品開發經驗且成功上線運行;

3、JAVA基礎紮實, 包括多執行緒、集合、快取、訊息佇列、全文搜尋等;

4、對於主流的開源框架,能夠熟練使用,包含但不限於Springboot、SpringCloud,SpringMVC,Mybatis、Dubbo、Redis框架進行項目開發;熟悉微服務相關框架使用,熟悉分散式原理有分散式套用開發經驗者優先;

5、掌握前端基礎,包括JS、JQuery、HTML、CSS;熟悉使用一種以上前端UI框架,包括jqueryui、layui、bootstrap、element、mui優先;

6、熟悉Oracle,Mysql,SQLserver等主流資料庫,熟練使用Oracle者優先,有熟練的SQL編寫能力者優先;

7、熟悉常用的設計模式,有大型分散式、高並發、高負載、高可用性系統的設計開發經驗者優先;

8、具有規範的開發文檔寫作能力及有一定的項目管理能力,具有良好的邏輯思維能力、溝通能力,良好的團隊配合能力,具有一定的抗壓能力;

9、有WMS,OMS,TMS,BMS,SCV,BI等相關開發經驗者優先。

大數據開發工程師的主要職責 篇21

職責:

1、協助開發主管/高級軟體開發成員完成所負責的各種開發任務、具備良好的溝通交流和邏輯思維能力、有責任心,有團隊精神,樂於幫助同事者優先

2、負責與其他開發成員一起,按時完成系統功能的各種前後台編碼實施

3、負責對平台各種功能完善、 bug修復、性能最佳化、安全監控….問題進行修復

4、完成領導交待的其它開發任務

5、有電商平台行業開發經驗者優先

崗位要求:

1、計算機或相關專業專科以上學歷,1-2年JavaEE開發經驗,熟悉Java、Jquery、io、多執行緒、集合、分散式、快取、訊息、搜尋等機制……,有NodeJs、Python、LinuxShell、Html5、Android、IOS……其它開發語言經驗者優先

2、具有較強的事業心、對工作認真負責、主動性強、有敬業精神,勇於面對困難和接受挑戰

3、具有一定的項目開發經驗、有良好的團隊協作能力和溝通能力

4、 熟悉或了解使用常用開發框架,如:Spring Boot、Hibernate、Spring MVC、EasyUI、AngularJS、Require……

5、熟悉或了解常用的web server,如Tomcat、Weblogic、Websphere、JBoss、jetty……中的一種或多種

6、熟悉或了解資料庫設計和最佳化,如Oracle、MYSQL、Redis、Solr……有NoSQL 資料庫使用經驗者優先

7、熟悉或了解Eclipse、WebStorm、SVN、GIT、UML、Redmine……常用工具多種或一種

8、熟悉或了解前後端開發與有良好代碼規範者優先

大數據開發工程師的主要職責 篇22

1、根據公司項目發展方向,完成手機客戶端、桌面客戶端產品研發。

2、手機APP套用開發(基於android或IOS)。

3、負責Android或IOS系統平台上的客戶端軟體的產品開發與維護

大數據開發工程師的主要職責 篇23

1.基於JAVA的軟體設計與開發(J2EE);

2.參與軟體的業務建模、模組設計、編碼設計

3.負責軟體代碼的編寫、資料庫設計。

4.能獨立解決技術問題。

大數據開發工程師的主要職責 篇24

1、負責手機棋牌客戶端各項系統功能開發、最佳化、修復Bug問題;

2、參與客戶端架構設計以及最佳化,模組測試,以及與服務端開發對接;

3、參與技術文檔的編寫、研發流程的最佳化;

大數據開發工程師的主要職責 篇25

職責:

1、負責Web產品前後端開發和項目定製開發;

2、負責UI/UE設計、技術實現,能獨立解決開發中的重難點問題;

3、負責對現有產品提供維護和支持,及時解決運行過程中出現的問題;

4、對分配的軟體功能模組進行設計、編碼、維護,符合公司規定的規範要求;;

5、根據產品經理的策劃,完成產品的設計開發、代碼編寫,撰寫技術文檔和技術報告。

6、跟蹤新技術發展,並將其套用於產品中

崗位要求:

1、全日制本科以上學歷,計算機相關專業,3年以上相關開發工作經驗;

2、具備良好的計算機基礎、編程能力、分析能力,熟悉常見的數據結構和算法,對Html/Java語言有一定的了解;

3、熟練使用後端主流開源框架(Spring MVC/MyBatis)進行快速開發,以及熟悉Web前端開發技術(Html/Javascript/CSS),熟悉流行的Web前端框架(JQuery/Bootstrap);

4、熟悉Oracle、MSSQL、MySQL至少一種主流關係型資料庫;

5、熟悉常用伺服器的配置及維護和管理等工作;

6、有創業創新精神,抗壓能力強,具有良好的學習能力、語言表達能力、溝通能力

大數據開發工程師的主要職責 篇26

職責:

1.參與基於JAVA技術的套用系統開發;

2.參與需求分析,根據具體的模組需求,獨立完成模組的設計編碼工作;

3.負責所開發模組的故障修復、性能調優等;

4.根據開發規範與流程完成系統設計、編碼、測試以及相關文檔的編寫;

任職要求:

1.計算機相關專業本科及以上學歷,3-5年以上Java開發經驗

2.熟練掌握Java、HTML/Javascript/CSS,JSP/Servlet等JAVAEE相關技術,有vue相關經驗更佳;

3.熟練掌握MySQL等資料庫;

4.熟練掌握Tomcat等套用伺服器、nginx等負載均衡軟體;

5.精通MVC模式下的B/S開發,熟悉Spring/Springboot/SpringMVC/MyBatis等開源框架;

6.敬業、責任心強,良好的溝通能力。

大數據開發工程師的主要職責 篇27

職責:

1、負責數據分析、加工、清理、處理程式的開發;

2、負責數據相關平台的搭建、維護和最佳化;

3、負責基於Hadoop/Spark/Hive/kafka等分散式計算平台實現離線分析、實時分析的計算框架的開發;

崗位要求:

1、本科學歷須211院校以上,碩士及以上學歷不限院校,計算機軟體及相關專業

2、熟悉Java和Scala語言、熟悉常用設計模式、具有代碼重構意識;

3、熟練使用hadoop、hbase、Kafka、hive、spark、presto,熟悉底層框架和實現原理;

4、使用Spark Streaming和Spark SQL進行數據處理, 並具有SPARK SQL最佳化經驗;

5、需要有至少2年開發經驗,有flink開發經驗優先;

6、學習能力強,喜歡研究新技術,有團隊觀念,具備獨立解決問題的能力。

大數據開發工程師的主要職責 篇28

職責:

1. 負責公司APP的設計研發;

2. 負責項目某個單元的產品功能需求分析、設計、開發工作;

3. 負責系統架構設計和性能最佳化;

4. 解決開發中遇到的關鍵問題和技術難題;

5. 協調和指導的部分開發人員的開發工作;

6. 協助保證研發工作的質量和進度,找出系統瓶頸,改進系統算法,提高系統性能;

7. 參與公司重大項目的技術方案設計及技術評審;

8. 遵守團隊的代碼格式、代碼安全、代碼結構的規定,編寫易讀、易維護、高效率的代碼;

9. 網際網路前沿技術研究和新技術套用。

崗位要求:

1、本科或以上學歷,計算機相關專業畢業,具有良好和規範的代碼書寫習慣;

2、精通PHP,熟悉 Linux+Nginx+php+Mysql 網站架構,熟悉設計模式;

3、3年以上網站或網際網路產品開發經驗,對高並發有著深刻的實踐;

4、了解 Linux 操作,有 LNMP 的部署與性能調優經驗;一定英文文檔閱讀能力;

5、具有較強的團隊意識,高度的責任感,對工作積極嚴謹,勇於承擔壓力。