大數據開發工程師崗位的工作職責說明 篇1
職責:
1、負責公司大數據基礎平台產品開發工作;
2、完成產品/項目劃分的研發任務,按需求規範進行研發;
3、具備良好的需求分析能力、業務建模能力,參與產品和項目相關模組的需求討論,概要、詳細設計;
4、具備良好的架構分析能力與設計能力,積極參與前期設計;
5、能根據設計方案和計畫進行編碼實現,在進度和質量上符合方案和計畫的要求;
6、及時對BUG庫中的軟體問題進行跟蹤修正。
崗位要求:
1、三年以上工作經驗,一年以上大數據平台架構及ETL相關經驗,可獨立搭建/運維CDH/Spark整套平台架構;
2、精通Python/Java/Scala/SQL/Shell等語言中兩種以上,熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三種以上開源框架的原理和源碼;
3、熟悉容器平台開發或者開發優先考慮,有docker、kubernetes相關開發經驗更佳;
4、學習能力強,適應能力好,有豐富的問題原因定位及運維技術支持經驗;
5、有市場上成熟的大數據平台產品實際架構/開發經驗優先。
大數據開發工程師崗位的工作職責說明 篇2
職責:
1、根據工作安排高效、高質地完成代碼編寫,確保符合規範的前端代碼規範;
2、負責公司現有項目和新項目的前端修改調試和開發工作;
3、與設計團隊緊密配合,能夠實現實現設計師的設計想法;
4、與後端開發團隊緊密配合,確保代碼有效對接,最佳化網站前端性能;
5、頁面通過標準校驗,兼容各主流瀏覽器。
任職要求:
1. 本科及以上學歷,熟悉j2ee,精通web開發有5年工作經驗以上(學習能力好放寬至4年),熟悉jsp,spring框架;
2.悉主流移動web開發框架,並有過實際項目開發經驗;
3.有kylin,atlas,oozie,azkaban,spark,ranger任意一種使用項目使用經驗。
大數據開發工程師崗位的工作職責說明 篇3
職責:
1、負責公司c端產品以及廣告數據的平台數據基礎建設;
2、大數據平台的搭建與維護;
3、最佳化算法提高執行效率;
4、數據挖掘相關開發。
職位要求:
1. 本科及以上,計算機、軟體工程、統計學、數據挖掘、機器學習等相關專業;
2. 熟悉JAVA語言及JAVA生態下的開發,了解多執行緒並發,能獨立完成套用開發和部署;
3. 3年及以上大數據流程架構經驗,熟悉Hbase/Hive/Hadoop/Spark或等主流分散式開發平台,有高性能集群設計和開發經驗;
4. 能熟練操作Linux,熟練掌握SQL資料庫語言 HiveSQL/Mysql/Sqlserver;
5. 對有廣告行銷大數據算法/開發經驗者優先,有大型數據項目經驗優先,有用戶行為分析、用戶建模、業務建模經驗者優先;
6. 具有良好的邏輯分析能力、溝通能力和協調能力;
大數據開發工程師崗位的工作職責說明 篇4
職責:
1. 負責公司大數據業務集群的運維工作確保高可用;
2. 負責基礎運維、故障定位、容量規劃、擴容及性能最佳化;
3. 設計實現大規模分散式集群的運維、報警監控和管理平台;
4. 參與業務架構設計,在設計階段給出可運維性改進建議;
5. 深入研究大數據業務相關運維技術,持續最佳化集群服務架構,探索新的大數據運維技術及發展方向。
任職資格:
1.大專以上學歷,2年及以上大數據運維工作經驗,熟悉hadoop/hbase/hive/Yarn/Spark等分散式相關技術,熟悉源碼尤佳,至少掌握python/shell中的一種語言,接受優秀應屆畢業生;
2.了解大數據平台套用架構,具備常見問題的基本分析和解決能力;
3.熟悉Linux作業系統的配置、管理及最佳化,能夠獨立排查及解決作業系統層面的問題;
4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web套用/中間件及主流開源資料庫的使用和配置。
大數據開發工程師崗位的工作職責說明 篇5
職責:
1、負責基於Hadoop框架的海量數據平台建設
2、參與大數據平台的數據架構設計,完成從業務模型到數據模型的設計
3、基於海量數據的數據倉庫,為業務搭建通用的查詢和分析解決方案
4、管理並最佳化存儲&計算資源利用效率、監控並維護例行ETL任務
5、梳理整體業務指標,可視化報表開發
應聘要求:
1、計算機本科及以上學歷,5年以上大型數據倉庫架構設計、模型設計、ETL設計相關經驗
2、熟悉Hadoop生態,熟悉Oracle、SQL資料庫中的一個或多個,有一定的性能最佳化經驗
3、熟練掌握Java語言,MapReduce編程,Python/Shell等腳本語言,Linux作業系統
4、具備大數據云平台、計算存儲平台、可視化開發平台經驗
5、業務理解力強,對數據敏感,有網際網路行業產品數據分析經驗者優先
大數據開發工程師崗位的工作職責說明 篇6
職責:
1、進行網站程式開發與實現,參與項目的編程、調試和模組測試工作;
2、根據項目需求,能夠獨立按時完成網站開發任務;
3、根據主管要求對現有項目進行修改;
4、配合項目學習其他需要的技能。
任職要求:
1、 計算機相關專業本科或以上學歷;
2、有2年以上PHP開發經驗,熟悉MVC/OOP,具有獨立承擔模組分析、設計開發能力;
3、對主流的PHP框架有實戰經驗,熟練使用Thinkphp框架者優先;
4、熟悉或擅長MYSQL或其他大型資料庫的使用及最佳化,熟悉MongoDb/Redis等NoSQL資料庫;
5、熟悉HTML/CSS/JS,了解HTML5/CSS3/AngularJS/Bootstrap,掌握常用的前端構建工具者優先;
6、熟練使用Linux作業系統,熟悉常見軟體的編譯部署(如Mysql/Nginx/Apache)和最佳化;
7、擁有良好的代碼習慣,結構清晰、命名規範、邏輯性強、代碼冗餘率低,有撰寫詳細的編碼注釋的習慣;
8、學習能力強,擁有優秀的邏輯思維能力,有良好的時間和流程意識,有較好的溝通交流能力,能夠迅速融入團隊;
9、有大數據產品軟體開發經驗者優先。
大數據開發工程師崗位的工作職責說明 篇7
1、負責數據管控產品的實施落地;
2、負責數據管控平台、數據標準模組、數據質量模組、元數據管理模組的實施部署;
3、負責業務流程的推廣與控制,保證項目順利落地;
4、負責管控平台部分功能的定製開發;
5、負責對數據管控平台各模組的內容進行培訓。
大數據開發工程師崗位的工作職責說明 篇8
職責:
1、 完成與java相關的開發任務,確保項目的按時保質完成;
2、 對軟體進行後續維護和管理;
3、 能夠有效的與需求人員進行溝通,實現產品的設計意圖;
4、 維護和升級現有產品,快速修復Bug和缺陷。
任職要求:
1、專科及以上學歷, 計算機及相關專業畢業,2年以上java開發經驗,有公安行業系統經驗著重考慮;
2、能適應項目現場開發/實施/維護所需要的出差;
3、熟練使用Eclipse,Idea等開發工具進行Java開發,熟悉SSM,SpringBoot,SpringCloud等框架套用;熟練掌握JQuery,Vue,FreeMarker,Thymeleaf等前端的開發技術,以及掌握Oracle、Mysql資料庫套用開發。有高並發大數據開發經驗者優先;
4、具有較強的時間管理、耐壓能力、溝通協調能力,具有一定的市場意識和素養。
大數據開發工程師崗位的工作職責說明 篇9
職責:
1.負責公司旗下各系統功能開發、維護;
2.維護、升級及最佳化已有程式,編寫技術文檔;
3.獨立負責部分功能模組的系統分析、資料庫設計、程式開發等;
4.配合運營部門進行活動頁面需求分析,完成代碼編寫和測試。
任職資格:
1.本科及以上學歷,計算機專業優先,5年及以上JAVA開發經驗者;
2.熟練掌握 java web 軟體開發技能,掌握主流開發框架:SSH、SSM、springMVC;
3.熟悉網際網路套用基本技術架構,熟練使用一種或多種 web 容器服務,如:nginx,jetty等;
4.掌握一種或多種常見 cache 開源服務:memcache,redis;
5.熟悉常見分散式異步框架,會使用一種或多種訊息服務:kafka,activeMQ,rabbitMQ 等;
6.有較強的溝通能力、團隊合作精神、高度的責任心。
大數據開發工程師崗位的工作職責說明 篇10
職責:
1. 負責產品研發Java後台設計與開發工作、客戶現場相關項目的Java後台設計與開發工作;
2. 對自行編制的功能代碼進行功能與性能最佳化,可協助H5、APP端、第三方進行接口聯調,及時修改測試、提出BUG,確保代碼質量;
3. 撰寫相關的技術文檔,主要包括設計文檔、接口文檔、部署文檔、使用手冊等;
4. 參與項目整個過程的實施工作,並具備獨立安裝部署和後期實施運維能力;
5. 參與到項目售前技術支持工作,能出差實施項目。
任職資格:
1. 計算機相關專業畢業,有3年以上Java工作經驗,有政府信息化或智慧城市相關項目經驗優先;
2. 熟練使用SQL語句與SQL最佳化,熟悉主流資料庫MySql、Oracle等;
3. 熟練J2EE主流技術框架,如Spring、SpringMVC、Mybatis、shiro等;
4. 精通HTTP通信協定、RESTfull API、HttpClient等接口規範與套用;
5. 熟練Java相關邊沿技術與工具:Eclipse、IDEA、Maven、SVN、Git、JavaScript、Poi、Log4j、freemarker、redis、Quartz、MQ等
6. 熟練使用Linux常用命令,可以完成Java服務運行環境的安裝、部署、監控等工作;
7. 具有良好的理解能力與溝通能力,能正確理解產品或項目目標與需求,有問題可以積極溝通確認,能做到及時準確的上報下達;
8. 具有良好的職業素質與團隊合作精神,可以嚴格遵守公司與項目組相關規定,有強烈的集體團隊意識;
9. 對工作態度主動積極、認真負責、且具有一定的抗壓能力;
大數據開發工程師崗位的工作職責說明 篇11
職責:
1、項目立項成功,在技術經理帶領下,進行產品開發工作,獨立完成功能模組,協助完成資料庫的設計與核心業務編碼的工作;
2、產品技術性文檔撰寫,含產品研發過程中概要設計文檔,詳細設計文檔,接口文檔;
3、對上線產品進行日常運維,解決上線產品運行中出現的技術問題,對上線產品進行日常的數據分析與運營維護;
4、 與外部業務系統的接口設計與對接工作;
5、 預判、定位系統發展過程中的問題,提出解決方案,攻克技術瓶頸與難點;
6、實時關注用戶套用平台情況,向技術經理匯報平台運營情況,在技術經理規劃下,不斷根據反饋自行疊代最佳化代碼或架構,提高平台性能;
7、 指導初級開發工程師進行開發與維護。
崗位要求:
1、大專及以上學歷,計算機或相關專業優先;
2、2年以上JAVA研發經驗,熟悉MVC設計模式,熟練使用主流的J2EE開源架構(struts2,springmvc,ibatis等) ;
3、熟悉掌握各種WEB前端技術,包括Vue.js 、AngularJs、element-ui等;
4、熟悉MySQL、Oracle或NoSQL資料庫技術,熟悉SQL調優機制,有大型資料庫軟體開發經驗者優先;
5、熟悉mongodb,redis、memcached,nginx,tomcat的一種或多種;
6、了解軟體工程、編程規範、有過程控制意識;
7、良好的溝通能力及團隊合作精神,責任心強,工作認真負責,善於學習與解決問題;
8、有大數據相關項目開發經驗優先考慮。
大數據開發工程師崗位的工作職責說明 篇12
職責:
1、參與項目整體設計,開發和計畫的實施;
2、獨立完成功能模組的開發,並負責各個功能及模組的接口設計工作;
3、編寫核心代碼與組件;
4、負責系統的性能最佳化和技術難點公關;
5、對開發階段任務進行WBS分解,製作開發計畫,帶領項目團隊開發人員協同完成各個功能開發;
任職條件:
1.具有4年以上獨立PHP開發經驗。
2.熟悉mysql,包括資料庫設計,速度最佳化。
3.對網際網路的技術有較全面理解,能獨立應付大訪問量下網站的設計和開發工作。
4.具有PHP快取技術、靜態化設計方面的經驗,能夠獨立開發。
5.精通PHP,具備在Linux平台下使用PHP開發服務端程式,包含伺服器部署、配置最佳化、回響速度最佳化、並發處理,SHELL腳本語言等。
6.具有較強的團隊意識,高度的責任感,對工作積極嚴謹,勇於承擔壓力。
7.有良好的溝通和學習能力、有較強的團隊協作能力以及快速解決問題的能力,並有組內領導能力。
大數據開發工程師崗位的工作職責說明 篇13
職責:
1、根據產品需求、設計文檔,負責公司大數據分析平台產品相關開發工作;
2、協助架構師進行系統設計工作,參與部分技術預研工作;
3、遵循編碼規範,及時完成分配的開發任務,保證項目開發進度;
任職資格:
1、大專以上學歷,計算機相關專業,兩年以上Java開發經驗;
2、紮實的Java基礎,良好的編程規範,熟練掌握spring套用開發框架,有較好Web前端功底;
3、熟悉Linux作業系統、MySQL/Oracle等資料庫,熟悉Javascript、HTML、CSS等網頁開發技術;
4、具備較強的編程能力,較強的理解能力,能夠獨立根據業務需求進行技術實現;有系統設計能力優先;
5、具備良好的溝通能力、團隊協作精神,主動學習新技術的能力。
大數據開發工程師崗位的工作職責說明 篇14
職責:
1、根據需求安排高效、高質地完成代碼編寫,確保符合前端代碼規範;
2、與產品和設計團隊緊密配合,能夠有效溝通產品需求和設計的想法;
3、與後端開發團隊緊密配合,確保代碼有效對接,最佳化前端性能;
4、承擔前端開發工作,對代碼質量及進度負責;
5、利用HTML5、CSS3等相關技術參與前端套用的開發。
任職要求:
1、 本科及以上學歷,計算機相關專業;
2、良好的英文讀寫能力;網際網路相關3年以上從業經驗;
3、 精通HTML/XHTML、CSS、JavaScript、AJAX、JSON、XML等技術;
4、 JavaScript程式模組開發,通用類庫、框架編寫;
5、 熟練掌握Jquery、Bootstrap、VUE、Angular等前端框架,熟悉對象化Javascript編程;
6、熟悉CSS、CSS3各種樣式屬性;
7、有html5開發經驗和手機、Pad 等多平台上的前端套用開發者優先。
大數據開發工程師崗位的工作職責說明 篇15
職責:
1、負責API接口、管理後台的開發和維護;
2、參與技術架構設計和最佳化,根據業務規劃及技術規則制定套用架構方案;
3、參與技術難題攻關,持續提升系統在高並發、海量請求下的處理能力;
4、數據分析,提供決策數據支持及建議;
5、參與線上產品的運維。
任職要求:
1、 PHP基礎紮實,5年以上相關工作經驗,有其它語言(Java/Python/Go)開發經驗者優先;
2、 精通開源框架(ThinkPHP\swoole\WorkerMan\CodeIgniter等)的原理及設計模式;
3、 精通MySQL、NOSQL、MongoDB等資料庫,能夠編寫和最佳化複雜的SQL程式;
4、 熟悉api接口開發,後台開發或熟悉數據開發工作經驗者優先,熟悉訊息佇列、任務調度服務開發經驗者優先;
5、 熟悉Unix/Linux作業系統和Nginx/Apache/Tomcat等伺服器軟體的配置,熟練掌握shell、Python、Perl其中一種腳本語言;
6、 熟悉主流的分散式架構,有高負載大並發的實際工作經驗;
7、 能夠快速定位和解決系統中的性能方面問題,熟悉常用的數據分析方法;
8、 需有一定的運維技術,有docker使用經驗,了解持續集成\交付\部署。
大數據開發工程師崗位的工作職責說明 篇16
職責:
1.參與基於JAVA技術的套用系統開發;
2.參與需求分析,根據具體的模組需求,獨立完成模組的設計編碼工作;
3.負責所開發模組的故障修復、性能調優等;
4.根據開發規範與流程完成系統設計、編碼、測試以及相關文檔的編寫;
任職要求:
1.計算機相關專業本科及以上學歷,3-5年以上Java開發經驗
2.熟練掌握Java、HTML/Javascript/CSS,JSP/Servlet等JAVAEE相關技術,有vue相關經驗更佳;
3.熟練掌握MySQL等資料庫;
4.熟練掌握Tomcat等套用伺服器、nginx等負載均衡軟體;
5.精通MVC模式下的B/S開發,熟悉Spring/Springboot/SpringMVC/MyBatis等開源框架;
6.敬業、責任心強,良好的溝通能力。
大數據開發工程師崗位的工作職責說明 篇17
負責資料庫系統架構的設計和實施,參與項目中的資料庫邏輯結構設計,參與大數據平台的架構設計;
基於產品需求說明書,設計審核並創建資料庫存儲結構、資料庫對象;
根據業務需求批量更新數據;開發和維護資料庫定時任務;使用spark SQl等技術,開發數據分析功能;
監控並及時發現TOP SQL,通過最佳化索引結構提高性能或給研發人員提出最佳化建議;
為企業信息化和其他內部相關業務提供相關技術支持。
大數據開發工程師崗位的工作職責說明 篇18
職責:
1.根據需求完成功能設計和代碼編寫;
2.負責後端系統性能最佳化和改進;
3.獨立承擔子系統和模組的架構設計以及開發;
4.從技術層面參與產品討論、設計;
任職要求:
1.精通Java,4年以上Java開發經驗;
2.精通J2EE開發相關技術和框架,對各種框架如Spring、Hibernate/Spring Data、SpringMVC、MyBatis、Shiro等有深入的套用經驗;
3.精通mysql、redis、mongoDB等資料庫和能夠獨立編寫性能良好的SQL代碼、並能夠進行SQL調優;
4.熟練掌握jQuery、Javascript、JSP、HTML、CSS、AJAX等Web前端編程技術;
5.具備良好的文檔撰寫能力,能夠獨立交付數據接口文檔,編碼時能清晰明了的注釋;
6.具備鑽研新技術的興趣和能力;
7.積極主動,善於溝通,獨立工作能力強並具備良好的團隊合作意識。