大數據開發工程師崗位的工作職責說明

大數據開發工程師崗位的工作職責說明 篇1

職責:

1、負責公司大數據基礎平台產品開發工作;

2、完成產品/項目劃分的研發任務,按需求規範進行研發;

3、具備良好的需求分析能力、業務建模能力,參與產品和項目相關模組的需求討論,概要、詳細設計;

4、具備良好的架構分析能力與設計能力,積極參與前期設計;

5、能根據設計方案和計畫進行編碼實現,在進度和質量上符合方案和計畫的要求;

6、及時對BUG庫中的軟體問題進行跟蹤修正。

崗位要求:

1、三年以上工作經驗,一年以上大數據平台架構及ETL相關經驗,可獨立搭建/運維CDH/Spark整套平台架構;

2、精通Python/Java/Scala/SQL/Shell等語言中兩種以上,熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三種以上開源框架的原理和源碼;

3、熟悉容器平台開發或者開發優先考慮,有docker、kubernetes相關開發經驗更佳;

4、學習能力強,適應能力好,有豐富的問題原因定位及運維技術支持經驗;

5、有市場上成熟的大數據平台產品實際架構/開發經驗優先。

大數據開發工程師崗位的工作職責說明 篇2

職責:

1、根據工作安排高效、高質地完成代碼編寫,確保符合規範的前端代碼規範;

2、負責公司現有項目和新項目的前端修改調試和開發工作;

3、與設計團隊緊密配合,能夠實現實現設計師的設計想法;

4、與後端開發團隊緊密配合,確保代碼有效對接,最佳化網站前端性能;

5、頁面通過標準校驗,兼容各主流瀏覽器。

任職要求:

1. 本科及以上學歷,熟悉j2ee,精通web開發有5年工作經驗以上(學習能力好放寬至4年),熟悉jsp,spring框架;

2.悉主流移動web開發框架,並有過實際項目開發經驗;

3.有kylin,atlas,oozie,azkaban,spark,ranger任意一種使用項目使用經驗。

大數據開發工程師崗位的工作職責說明 篇3

職責:

1、負責公司c端產品以及廣告數據的平台數據基礎建設;

2、大數據平台的搭建與維護;

3、最佳化算法提高執行效率;

4、數據挖掘相關開發。

職位要求:

1. 本科及以上,計算機、軟體工程、統計學、數據挖掘、機器學習等相關專業;

2. 熟悉JAVA語言及JAVA生態下的開發,了解多執行緒並發,能獨立完成套用開發和部署;

3. 3年及以上大數據流程架構經驗,熟悉Hbase/Hive/Hadoop/Spark或等主流分散式開發平台,有高性能集群設計和開發經驗;

4. 能熟練操作Linux,熟練掌握SQL資料庫語言 HiveSQL/Mysql/Sqlserver;

5. 對有廣告行銷大數據算法/開發經驗者優先,有大型數據項目經驗優先,有用戶行為分析、用戶建模、業務建模經驗者優先;

6. 具有良好的邏輯分析能力、溝通能力和協調能力;

大數據開發工程師崗位的工作職責說明 篇4

職責:

1. 負責公司大數據業務集群的運維工作確保高可用;

2. 負責基礎運維、故障定位、容量規劃、擴容及性能最佳化;

3. 設計實現大規模分散式集群的運維、報警監控和管理平台;

4. 參與業務架構設計,在設計階段給出可運維性改進建議;

5. 深入研究大數據業務相關運維技術,持續最佳化集群服務架構,探索新的大數據運維技術及發展方向。

任職資格:

1.大專以上學歷,2年及以上大數據運維工作經驗,熟悉hadoop/hbase/hive/Yarn/Spark等分散式相關技術,熟悉源碼尤佳,至少掌握python/shell中的一種語言,接受優秀應屆畢業生;

2.了解大數據平台套用架構,具備常見問題的基本分析和解決能力;

3.熟悉Linux作業系統的配置、管理及最佳化,能夠獨立排查及解決作業系統層面的問題;

4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web套用/中間件及主流開源資料庫的使用和配置。

大數據開發工程師崗位的工作職責說明 篇5

職責:

1、負責基於Hadoop框架的海量數據平台建設

2、參與大數據平台的數據架構設計,完成從業務模型到數據模型的設計

3、基於海量數據的數據倉庫,為業務搭建通用的查詢和分析解決方案

4、管理並最佳化存儲&計算資源利用效率、監控並維護例行ETL任務

5、梳理整體業務指標,可視化報表開發

應聘要求:

1、計算機本科及以上學歷,5年以上大型數據倉庫架構設計、模型設計、ETL設計相關經驗

2、熟悉Hadoop生態,熟悉Oracle、SQL資料庫中的一個或多個,有一定的性能最佳化經驗

3、熟練掌握Java語言,MapReduce編程,Python/Shell等腳本語言,Linux作業系統

4、具備大數據云平台、計算存儲平台、可視化開發平台經驗

5、業務理解力強,對數據敏感,有網際網路行業產品數據分析經驗者優先

大數據開發工程師崗位的工作職責說明 篇6

職責:

1、進行網站程式開發與實現,參與項目的編程、調試和模組測試工作;

2、根據項目需求,能夠獨立按時完成網站開發任務;

3、根據主管要求對現有項目進行修改;

4、配合項目學習其他需要的技能。

任職要求:

1、 計算機相關專業本科或以上學歷;

2、有2年以上PHP開發經驗,熟悉MVC/OOP,具有獨立承擔模組分析、設計開發能力;

3、對主流的PHP框架有實戰經驗,熟練使用Thinkphp框架者優先;

4、熟悉或擅長MYSQL或其他大型資料庫的使用及最佳化,熟悉MongoDb/Redis等NoSQL資料庫;

5、熟悉HTML/CSS/JS,了解HTML5/CSS3/AngularJS/Bootstrap,掌握常用的前端構建工具者優先;

6、熟練使用Linux作業系統,熟悉常見軟體的編譯部署(如Mysql/Nginx/Apache)和最佳化;

7、擁有良好的代碼習慣,結構清晰、命名規範、邏輯性強、代碼冗餘率低,有撰寫詳細的編碼注釋的習慣;

8、學習能力強,擁有優秀的邏輯思維能力,有良好的時間和流程意識,有較好的溝通交流能力,能夠迅速融入團隊;

9、有大數據產品軟體開發經驗者優先。

大數據開發工程師崗位的工作職責說明 篇7

1、負責數據管控產品的實施落地;

2、負責數據管控平台、數據標準模組、數據質量模組、元數據管理模組的實施部署;

3、負責業務流程的推廣與控制,保證項目順利落地;

4、負責管控平台部分功能的定製開發;

5、負責對數據管控平台各模組的內容進行培訓。

大數據開發工程師崗位的工作職責說明 篇8

職責:

1、 完成與java相關的開發任務,確保項目的按時保質完成;

2、 對軟體進行後續維護和管理;

3、 能夠有效的與需求人員進行溝通,實現產品的設計意圖;

4、 維護和升級現有產品,快速修復Bug和缺陷。

任職要求:

1、專科及以上學歷, 計算機及相關專業畢業,2年以上java開發經驗,有公安行業系統經驗著重考慮;

2、能適應項目現場開發/實施/維護所需要的出差;

3、熟練使用Eclipse,Idea等開發工具進行Java開發,熟悉SSM,SpringBoot,SpringCloud等框架套用;熟練掌握JQuery,Vue,FreeMarker,Thymeleaf等前端的開發技術,以及掌握Oracle、Mysql資料庫套用開發。有高並發大數據開發經驗者優先;

4、具有較強的時間管理、耐壓能力、溝通協調能力,具有一定的市場意識和素養。

大數據開發工程師崗位的工作職責說明 篇9

職責:

1.負責公司旗下各系統功能開發、維護;

2.維護、升級及最佳化已有程式,編寫技術文檔;

3.獨立負責部分功能模組的系統分析、資料庫設計、程式開發等;

4.配合運營部門進行活動頁面需求分析,完成代碼編寫和測試。

任職資格:

1.本科及以上學歷,計算機專業優先,5年及以上JAVA開發經驗者;

2.熟練掌握 java web 軟體開發技能,掌握主流開發框架:SSH、SSM、springMVC;

3.熟悉網際網路套用基本技術架構,熟練使用一種或多種 web 容器服務,如:nginx,jetty等;

4.掌握一種或多種常見 cache 開源服務:memcache,redis;

5.熟悉常見分散式異步框架,會使用一種或多種訊息服務:kafka,activeMQ,rabbitMQ 等;

6.有較強的溝通能力、團隊合作精神、高度的責任心。

大數據開發工程師崗位的工作職責說明 篇10

職責:

1. 負責產品研發Java後台設計與開發工作、客戶現場相關項目的Java後台設計與開發工作;

2. 對自行編制的功能代碼進行功能與性能最佳化,可協助H5、APP端、第三方進行接口聯調,及時修改測試、提出BUG,確保代碼質量;

3. 撰寫相關的技術文檔,主要包括設計文檔、接口文檔、部署文檔、使用手冊等;

4. 參與項目整個過程的實施工作,並具備獨立安裝部署和後期實施運維能力;

5. 參與到項目售前技術支持工作,能出差實施項目。

任職資格:

1. 計算機相關專業畢業,有3年以上Java工作經驗,有政府信息化或智慧城市相關項目經驗優先;

2. 熟練使用SQL語句與SQL最佳化,熟悉主流資料庫MySql、Oracle等;

3. 熟練J2EE主流技術框架,如Spring、SpringMVC、Mybatis、shiro等;

4. 精通HTTP通信協定、RESTfull API、HttpClient等接口規範與套用;

5. 熟練Java相關邊沿技術與工具:Eclipse、IDEA、Maven、SVN、Git、JavaScript、Poi、Log4j、freemarker、redis、Quartz、MQ等

6. 熟練使用Linux常用命令,可以完成Java服務運行環境的安裝、部署、監控等工作;

7. 具有良好的理解能力與溝通能力,能正確理解產品或項目目標與需求,有問題可以積極溝通確認,能做到及時準確的上報下達;

8. 具有良好的職業素質與團隊合作精神,可以嚴格遵守公司與項目組相關規定,有強烈的集體團隊意識;

9. 對工作態度主動積極、認真負責、且具有一定的抗壓能力;

大數據開發工程師崗位的工作職責說明 篇11

職責:

1、項目立項成功,在技術經理帶領下,進行產品開發工作,獨立完成功能模組,協助完成資料庫的設計與核心業務編碼的工作;

2、產品技術性文檔撰寫,含產品研發過程中概要設計文檔,詳細設計文檔,接口文檔;

3、對上線產品進行日常運維,解決上線產品運行中出現的技術問題,對上線產品進行日常的數據分析與運營維護;

4、 與外部業務系統的接口設計與對接工作;

5、 預判、定位系統發展過程中的問題,提出解決方案,攻克技術瓶頸與難點;

6、實時關注用戶套用平台情況,向技術經理匯報平台運營情況,在技術經理規劃下,不斷根據反饋自行疊代最佳化代碼或架構,提高平台性能;

7、 指導初級開發工程師進行開發與維護。

崗位要求:

1、大專及以上學歷,計算機或相關專業優先;

2、2年以上JAVA研發經驗,熟悉MVC設計模式,熟練使用主流的J2EE開源架構(struts2,springmvc,ibatis等) ;

3、熟悉掌握各種WEB前端技術,包括Vue.js 、AngularJs、element-ui等;

4、熟悉MySQL、Oracle或NoSQL資料庫技術,熟悉SQL調優機制,有大型資料庫軟體開發經驗者優先;

5、熟悉mongodb,redis、memcached,nginx,tomcat的一種或多種;

6、了解軟體工程、編程規範、有過程控制意識;

7、良好的溝通能力及團隊合作精神,責任心強,工作認真負責,善於學習與解決問題;

8、有大數據相關項目開發經驗優先考慮。

大數據開發工程師崗位的工作職責說明 篇12

職責:

1、參與項目整體設計,開發和計畫的實施;

2、獨立完成功能模組的開發,並負責各個功能及模組的接口設計工作;

3、編寫核心代碼與組件;

4、負責系統的性能最佳化和技術難點公關;

5、對開發階段任務進行WBS分解,製作開發計畫,帶領項目團隊開發人員協同完成各個功能開發;

任職條件:

1.具有4年以上獨立PHP開發經驗。

2.熟悉mysql,包括資料庫設計,速度最佳化。

3.對網際網路的技術有較全面理解,能獨立應付大訪問量下網站的設計和開發工作。

4.具有PHP快取技術、靜態化設計方面的經驗,能夠獨立開發。

5.精通PHP,具備在Linux平台下使用PHP開發服務端程式,包含伺服器部署、配置最佳化、回響速度最佳化、並發處理,SHELL腳本語言等。

6.具有較強的團隊意識,高度的責任感,對工作積極嚴謹,勇於承擔壓力。

7.有良好的溝通和學習能力、有較強的團隊協作能力以及快速解決問題的能力,並有組內領導能力。

大數據開發工程師崗位的工作職責說明 篇13

職責:

1、根據產品需求、設計文檔,負責公司大數據分析平台產品相關開發工作;

2、協助架構師進行系統設計工作,參與部分技術預研工作;

3、遵循編碼規範,及時完成分配的開發任務,保證項目開發進度;

任職資格:

1、大專以上學歷,計算機相關專業,兩年以上Java開發經驗;

2、紮實的Java基礎,良好的編程規範,熟練掌握spring套用開發框架,有較好Web前端功底;

3、熟悉Linux作業系統、MySQL/Oracle等資料庫,熟悉Javascript、HTML、CSS等網頁開發技術;

4、具備較強的編程能力,較強的理解能力,能夠獨立根據業務需求進行技術實現;有系統設計能力優先;

5、具備良好的溝通能力、團隊協作精神,主動學習新技術的能力。

大數據開發工程師崗位的工作職責說明 篇14

職責:

1、根據需求安排高效、高質地完成代碼編寫,確保符合前端代碼規範;

2、與產品和設計團隊緊密配合,能夠有效溝通產品需求和設計的想法;

3、與後端開發團隊緊密配合,確保代碼有效對接,最佳化前端性能;

4、承擔前端開發工作,對代碼質量及進度負責;

5、利用HTML5、CSS3等相關技術參與前端套用的開發。

任職要求:

1、 本科及以上學歷,計算機相關專業;

2、良好的英文讀寫能力;網際網路相關3年以上從業經驗;

3、 精通HTML/XHTML、CSS、JavaScript、AJAX、JSON、XML等技術;

4、 JavaScript程式模組開發,通用類庫、框架編寫;

5、 熟練掌握Jquery、Bootstrap、VUE、Angular等前端框架,熟悉對象化Javascript編程;

6、熟悉CSS、CSS3各種樣式屬性;

7、有html5開發經驗和手機、Pad 等多平台上的前端套用開發者優先。

大數據開發工程師崗位的工作職責說明 篇15

職責:

1、負責API接口、管理後台的開發和維護;

2、參與技術架構設計和最佳化,根據業務規劃及技術規則制定套用架構方案;

3、參與技術難題攻關,持續提升系統在高並發、海量請求下的處理能力;

4、數據分析,提供決策數據支持及建議;

5、參與線上產品的運維。

任職要求:

1、 PHP基礎紮實,5年以上相關工作經驗,有其它語言(Java/Python/Go)開發經驗者優先;

2、 精通開源框架(ThinkPHP\swoole\WorkerMan\CodeIgniter等)的原理及設計模式;

3、 精通MySQL、NOSQL、MongoDB等資料庫,能夠編寫和最佳化複雜的SQL程式;

4、 熟悉api接口開發,後台開發或熟悉數據開發工作經驗者優先,熟悉訊息佇列、任務調度服務開發經驗者優先;

5、 熟悉Unix/Linux作業系統和Nginx/Apache/Tomcat等伺服器軟體的配置,熟練掌握shell、Python、Perl其中一種腳本語言;

6、 熟悉主流的分散式架構,有高負載大並發的實際工作經驗;

7、 能夠快速定位和解決系統中的性能方面問題,熟悉常用的數據分析方法;

8、 需有一定的運維技術,有docker使用經驗,了解持續集成\交付\部署。

大數據開發工程師崗位的工作職責說明 篇16

職責:

1.參與基於JAVA技術的套用系統開發;

2.參與需求分析,根據具體的模組需求,獨立完成模組的設計編碼工作;

3.負責所開發模組的故障修復、性能調優等;

4.根據開發規範與流程完成系統設計、編碼、測試以及相關文檔的編寫;

任職要求:

1.計算機相關專業本科及以上學歷,3-5年以上Java開發經驗

2.熟練掌握Java、HTML/Javascript/CSS,JSP/Servlet等JAVAEE相關技術,有vue相關經驗更佳;

3.熟練掌握MySQL等資料庫;

4.熟練掌握Tomcat等套用伺服器、nginx等負載均衡軟體;

5.精通MVC模式下的B/S開發,熟悉Spring/Springboot/SpringMVC/MyBatis等開源框架;

6.敬業、責任心強,良好的溝通能力。

大數據開發工程師崗位的工作職責說明 篇17

負責資料庫系統架構的設計和實施,參與項目中的資料庫邏輯結構設計,參與大數據平台的架構設計;

基於產品需求說明書,設計審核並創建資料庫存儲結構、資料庫對象;

根據業務需求批量更新數據;開發和維護資料庫定時任務;使用spark SQl等技術,開發數據分析功能;

監控並及時發現TOP SQL,通過最佳化索引結構提高性能或給研發人員提出最佳化建議;

為企業信息化和其他內部相關業務提供相關技術支持。

大數據開發工程師崗位的工作職責說明 篇18

職責:

1.根據需求完成功能設計和代碼編寫;

2.負責後端系統性能最佳化和改進;

3.獨立承擔子系統和模組的架構設計以及開發;

4.從技術層面參與產品討論、設計;

任職要求:

1.精通Java,4年以上Java開發經驗;

2.精通J2EE開發相關技術和框架,對各種框架如Spring、Hibernate/Spring Data、SpringMVC、MyBatis、Shiro等有深入的套用經驗;

3.精通mysql、redis、mongoDB等資料庫和能夠獨立編寫性能良好的SQL代碼、並能夠進行SQL調優;

4.熟練掌握jQuery、Javascript、JSP、HTML、CSS、AJAX等Web前端編程技術;

5.具備良好的文檔撰寫能力,能夠獨立交付數據接口文檔,編碼時能清晰明了的注釋;

6.具備鑽研新技術的興趣和能力;

7.積極主動,善於溝通,獨立工作能力強並具備良好的團隊合作意識。