數據中心工程師崗位職責

數據中心工程師崗位職責 篇1

崗位職責:

1.負責銜接大數據平台與前端的數據傳輸；

2.根據客戶需求設計大數據業務平台架構、配置組件；

3.負責後台服務的調試與測試，梳理接口文檔、開發文檔與測試文檔。

任職資格:

1.碩士以上，或較為優秀的本科生；後端開發經驗2年以上；

2.有基於b/s架構進行實際業務平台開發的經驗，有to b軟體開發經驗更佳；

3.通用軟體開發基礎、軟體架構基礎、scrum敏捷開發方法，有大數據基礎更佳；

4.精通java或python語言，有rcp框架經驗更佳；熟練掌握mybatis、springcloud / springboot、node.js等框架，精通sql技術；了解乙太網通信協定，熟悉websocket技術。熟練使用git，svn等工具；

5.學習能力強，勇於挑戰，代碼質量意識強，篤信“工程即魔法”。

數據中心工程師崗位職責 篇2

1、學習並理解勵步雲學業務及系統，根據業務部門需求對公司各項業務數據進行統計分析，出具相關報表；

2、進行數據倉庫設計、模型開發、數據質量校驗，報表開發；

3、進行數據差異分析，找出統計口徑、數據錯誤、操作錯誤等造成的差異原因；

4、進行數據查詢最佳化，解決跑數性能問題。

數據中心工程師崗位職責 篇3

1、3年以上etl開發經驗，熟悉etl開發規範和流程；

2、熟練使用datastage、informatica、kettle、hive、plsql、spark、mapreduce等工具中的一個或多個，有開發、維護經驗；

3、熟練編寫存儲過程，擅長sql最佳化；

4、熟悉oracle、sqlserver等常用資料庫中的`一個或多個；

5、熟悉perl、shell腳本，linux作業系統；

6、有大型數據倉庫、bi相關項目的開發經驗，精通架構、建模者優先；

7、熟練使用erwin或powerdesigner等進行數據建模；

8、以下經驗優先考慮：流式處理、日誌處理、數據倉庫全日制本科以上學歷（985/211），計算機科學與技術/軟體工程/數據相關專業

1、3年以上etl開發經驗，熟悉etl開發規範和流程；

2、熟練使用datastage、informatica、kettle、hive、plsql、spark、mapreduce等工具中的一個或多個，有開發、維護經驗；

3、熟練編寫存儲過程，擅長sql最佳化；

4、熟悉oracle、sqlserver等常用資料庫中的一個或多個；

5、熟悉perl、shell腳本，linux作業系統；

6、有大型數據倉庫、bi相關項目的開發經驗，精通架構、建模者優先；

7、熟練使用erwin或powerdesigner等進行數據建模；

8、以下經驗優先考慮：流式處理、日誌處理、數據倉庫

數據中心工程師崗位職責 篇4

•識別，分析和解決計畫支持問題。

•與BU利益相關者合作，確定並優先考慮數據和統計要求，包括要收集的特定數據元素。

•協助開發和實施資料庫，數據收集系統/工具，數據分析以及其他最佳化統計效率和質量的策略(包括確定流程改進以更好地滿足業務需求)。

•分析大量數據集，提出有見地的業務建議。

•通過查看報告和績效指標來確定和糾正數據收集問題，從而確保數據的準確性和完整性。

•識別，分析，解釋和建模數據湖中數據的趨勢或模式。

•為各種客群設計和生成準確有效的統計數據可視化產品和報告。

•通過促進技術和非技術利益相關者之間的溝通，確保技術團隊了解計畫和業務工作的短期和長期目標

•準時交付優質，易懂，明確的產品。

•參與構建機器學習策略平台。

•對數據驅動業務，關鍵思想家，問題解決者和自我啟動者的熱情

•促進技術和非技術利益相關者之間交流的能力

•出色的書面和口頭交流能力。

數據中心工程師崗位職責 篇5

工作職責：

1、運用數據挖掘和機器學習方法和技術，深入挖掘和分析海量商業數據

2、包括但不限於風控模型、用戶畫像、商家畫像建模、文本分析和商業預測等

3、運用數據挖掘/統計學習的理論和方法，深入挖掘和分析用戶行為，建設用戶畫像

4、從系統套用的角度，利用數據挖掘/統計學習的理論和方法解決實際問題

任職要求

—計算機、數學，統計學或人工智慧等相關專業碩士以上學歷，5—10年以上或相關工作經歷

—精通1—2種程式語言（Python或Java），熟練掌握常用數據結構和算法，具備比較強的'實戰開發能力，能帶領團隊共同進步。

—具有統計或數據挖掘背景，並對機器學習算法和理論有較深入的研究

—熟悉數據挖掘相關算法（決策樹、SVM、聚類、邏輯回歸、貝葉斯）

—具有良好的學習能力、時間和流程意識、溝通能力

—熟悉Spark或hadoop生態分散式計算框架

—優秀的溝通能力，有創新精神，樂於接受挑戰，能承受工作壓力

—有網際網路，央企，政務，金融等領域大規模數據挖掘經驗者優先

數據中心工程師崗位職責 篇6

1.從事GIS數據製作、分析、數據管理等工作;

2.編寫工作總結和作業流程等檔案;

3.通過已經完成的矢量化成果和表格資料庫入庫和檢查工作;

4.利用軟體對圖形和屬性進行檢查，並進行錯誤修改;

5.其他數據製作處理工作。

數據中心工程師崗位職責 篇7

1、負責每日的數據倉庫運維工作，保障數據的穩定性、一致性等;

2、參與數據倉庫的最佳化設計，如元數據、數據許可權、調度最佳化;

3、負責數據質量和數據標準化的設計與開發;

4、負責滿足業務部門的日常業務提數與報表需求的開發。

數據中心工程師崗位職責 篇8

數據處理工程師（大數據項目）全成通信上海全成通信技術有限公司，全成通信，全成崗位職責：

1、負責大數據平台的日常維護和監控

2、負責大數據項目日報發布工作

3、負責日報數據的統計

4、負責大數據項目日常數據的計算、分析和維護

任職要求：

1、一年以上相關工作經驗，有電信行業經驗者優先

2、熟悉linux和excel，熟練使用perl或者其他的'腳本語言

3、具有oracledll/dml技術的使用經驗

4、具有良好的團隊合作精神，有較強的學習能力、適應能力、溝通能力

數據中心工程師崗位職責 篇9

1、維護資料庫穩定運行，持續發現和解決潛在的問題；

2、負責資料庫的性能最佳化，使用新技術和新架構滿足日益增長的業務需求；

3、負責資料庫的監控系統設計，為開發團隊提供平台支持；

4、負責資料庫的運維方面的相關工作，包括資料庫的安裝部署、壓力測試、備份恢復、知識庫管理等

5、負責資料庫進行容量規劃、架構設計，提高業務高可用性和容災能力；

6、負責資料庫相關工作的整體規劃，提供決策建議。

數據中心工程師崗位職責 篇10

1.依據項目需求建構數據萃取與轉換流程

2.挖掘數據特徵，進行數據和特徵融合

3.搭建數學模型，並對模型進行檢驗評估

職位要求：

1、計算機、數學、統計、人工智慧等相關專業的碩士或以上學歷;

2、二年以上數據挖掘、機器學習相關工作經驗，熟悉python、spark、pandas、sklearn等數據分析工具者優先;

3、熟練掌握貝葉斯、隨機森林、深度學習等機器學習算法;

4、突出的分析問題和解決問題能力，自我驅動，並且具備較強的學習能力、創新套用能力及溝通協調能力，有良好的'團隊合作意識;

5、有國際背景或能熟練使用英文溝通者優先

數據中心工程師崗位職責 篇11

1.負責公司產品的現場安裝，部署，最佳化;

2.負責資料庫集群的部署和配置升級;

3.定期進行性能檢測、分析、調優，數據備份、遷移，保障資料庫系統高效安全及穩定運行;

4.負責排查資料庫故障，分析和解決疑難問題，提出預防方案。資料庫故障處理與災難恢復;

5.對開發工程師的SQL語句進行審核，SQL最佳化，及時發現並處理高負載SQL;

6.負責客戶單位軟體系統的管理和日常維護，;

數據中心工程師崗位職責 篇12

1、負責套用平台維護，保證其有效運行;

2、負責業務數據的挖掘、整合以及分析模型的建立、最佳化和評估;為業務人員日常工作提供可靠而明確的數據支撐;

3、負責報表相關功能的設計、開發工作，並負責報表最佳化、維護、數據採集;

4、負責系統相關文檔的制定和編寫。

5、有實際的MY SQL或Oracle等資料庫開發相關工作經歷，具有高級工程師技術能力;

6、有良好的溝通協調能力，能與客戶及項目組同事有效的溝通;

7、能夠獨立分析客戶需求，並能針對客戶需求編寫需求分析、設計等技術方案;

8、熱愛軟體事業，具有較強的責任感,有快速掌握新技術和獨立解決技術問題的能力;

數據中心工程師崗位職責 篇13

崗位職責：

深入研究業內領先的技術思路，輸出具有創新價值的預研項目可行性分析報告以及相關實驗數據;

負責產品、銷售、供應鏈、電商等公司數據的海量挖掘，並建立和最佳化用戶標籤、特徵模型、產品精準匹配、異常預警等;

負責大數據下傳統機器學習算法的並行化實現及套用，並提出改進方法和思路;

參與公司大數據架構，負責BI實施中的數據挖掘模組算法研究、模型建立和最佳化，幫助實現數據挖掘和分析平台的建設;

負責相關數據挖掘項目的需求收集、項目建立、項目設計開發和結果輸出質量把控，通過數據挖掘結果驅動業務執行;

配合技術進行數據挖掘模型開發和模型封裝，例如決策規則模型、預警模型、流失模型、效果標桿模型、客戶生命周期管理模型等;

任職要求：

大學本科及以上學歷，統計學、計算機、信息技術、數學相關專業;

兩年以上數據建模經驗;

數據主流資料庫，mysql、oracle、DB2等傳統結構化數據倉庫，熟悉HBase、MongoDB等非結構化資料庫;

熟悉常用的聚類、分類、回歸、關聯、時間序列等監督式和非監督式學習算法;

熟悉R、Python、MLlib等數據挖掘工具中至少一種。

熟悉spark、storm等大數據計算框架者優先。

數據中心工程師崗位職責 篇14

(1)分析需求，完成相關數據抽取、數據清洗、數據探索、數據建模分析等工作;

(2)按要求完成數據分析報告、建模報告、數據報表等;

(3)對數據進行深度挖掘和建模，做運營和用戶等各方面分析，深度挖掘運營最佳化和用戶行為特徵等，推動分析問題的解決，為業務決策提供日常支持;

(4)與業務部門和技術部門對接，完成設計，編寫，維護和完善公司業務相關的.算法。

(5)參與項目成果彙編，對相關結果進行解讀和匯報。

任職要求：

(1)大專以上學歷，統計、數學、計算機、軟體專業優先;

(2)熟練使用Python，Mysql語言，具有一定的工程能力，完善的文檔和注釋習慣。熟悉JupyterLab遠程代碼編寫環境，Linux常用命令。會使用R，Java，Scala等語言更佳。

(3)熟悉數據分析過程，能夠完成數據抽取、數據處理、數據建模、數據分析報告等任務;

(4)一定的數據挖掘/機器學習理論和技術基礎，了解常用的數據挖掘算法如：聚類模型、線性回歸、邏輯回歸、分類模型、決策樹模型等。

數據中心工程師崗位職責 篇15

1、針對海量用戶行為數據進行挖掘和建模，深入挖掘數據的業務價值。研究機器學習或統計學習領域的前沿技術，並能活學活用到項目中。

2、基於對汽車廣告投放業務及用戶的理解，參與精準行銷、個性化推薦等模型建設和領域研究，提升轉化率等業務指標。

3、根據業務需要採集相關數據，對原始數據進行ETL和歸類整理，並實現流程自動化。

4、其他大數據處理及項目開發工作等。

數據中心工程師崗位職責 篇16

1.根據項目經理或高級數據挖掘工程師要求獨立完成項目的數據蒐集和數據處理;

2.能夠快速根據項目需要學習並理解行業知識，並能在項目經理或高級數據挖掘工程指導下完成部分數據分析工作;

3.能夠使用SAS,SPSS,或R,Python等開源平台根據用戶需求定製開發相應的算法;

4.理解數據挖掘模型及預測分析結果，撰寫相關分析報告;

5.了解數據倉庫及商務智慧型背景，熟練掌握一類數據展現分析工具，如：Tableau，Cognos等;

數據中心工程師崗位職責 篇17

任職要求：

1、軟體、計算機、通訊等理工科相關專業本科及以上學歷；

2、具有3年配置管理或產品數據管理經驗；

3、熟悉計算機與網路管理；

4、熟悉配置管理與產品數據管理知識，熟練掌握svn、plm等數據管理平台的`操作與管理；

5、熟悉系統與信息安全知識；

6、具有較強的邏輯思維能力及良好的溝通能力，良好的主動學習能力及執行力。

數據中心工程師崗位職責 篇18

1、參與部門項目的售前工作，參與現場交流，深入挖掘用戶需求，編寫投標方案，參與投標;

2、完成所負責項目的需求規格說明書的編寫，並向項目組開發人員和測試人員講解需求，如需求發生變化及時調整需求。

3、完成所負責項目的概要設計，並解決項目進展過程中的需求與設計問題;

4、可承擔部分項目經理的職責，組織相關資源對項目工作進行計畫/控制/調整;

數據中心工程師崗位職責 篇19

崗位職責：

1.參與金融大數據平台系統和算法的研發和最佳化;

2.基於大數據金融場景，進行信用風險模型，風控模型，行銷模型的創新設計;

3.與業務部門溝通合作，將數據模型套用於實際業務。

任職要求：

1.計算機相關專業碩士及以上學歷，至少7年以上相關工作經驗;;

2.具有良好的商業敏感度和優秀的數據分析技能，能夠開發創新而實際的.分析方法以解決複雜的商業問題。

3.熟悉機器學習的一般模型;例如分類.聚類.預測，理解一些常用的特徵選擇和矩陣分解算法。

4.熟悉深度神經網路和常用模型(如CNN，DBN，sparseconding,RNN等)，有Caffe或Theano或ConvNet的實踐經驗。

5.在語義理解檢索(如知識圖譜表示.結構化預測.語義解析.信息檢索.知識挖掘等)有過深入的工作與研究。

6.較強的自學能力.優秀的邏輯思維能力和良好的溝通表達能力和敬業精神。

7.具備良好的系統分析能力，良好的抽象思維和邏輯思維能力，獨立分析問題解決問題的能力;

8.可承受較大壓力，有責任感，較強的溝通協調能力，具有團隊合作精神;

9.有網際網路公司.大型金融企業和大型IT企業工作經歷的優先。

數據中心工程師崗位職責 篇20

1.數據採集系統和分散式爬蟲系統的架構設計和開發

2.對接外部數據服務商提供的數據及資訊服務，實現數據的'有效沉澱，建立數據服務評估機制

3.負責大規模文本、圖像、視頻數據的抓取、抽取，去重、分類，垃圾過濾，質量識別等工作

4.研究各種目標網站的形態，網際網路特徵挖掘，發現它們的特點和規律

數據中心工程師崗位職責 篇21

1、進行GIS數據建庫和數據處理方案的設計和實現;

2、運用相關GIS軟體進行數據空間化處理建庫;

3、進行影像識別及處理;

4、進行數據採集處理建庫項目管理。

數據中心工程師崗位職責 篇22

1、針對具體的業務場景需求、定義數據分析及挖掘問題;

2、使用統計學分析方法、挖掘算法、構建有效且通用的數據分析模型，對數據挖掘方案進行驗證、開發、改進和最佳化，實現數據挖掘的功能套用;

3、搭建高擴展高性能的數據分析模型庫，作為數據分析團隊的基礎工具;

4、完成領導安排的其他工作。

數據中心工程師崗位職責 篇23

職責描述：

1、負責文本數據處理，如格式轉換、分詞處理、實體抽取、專業詞典整理等；

2、自然語言處理相關工具開發；

3、協助訓練nlp模型。

任職要求：

1、計算機相關專業（本科2年以上）；

2、精通c/c++或java，熟悉python、bash？shell等腳本語言；

3、熟悉正則表達式，了解常用分類、聚類算法及相應工具；

4、熟悉使用基本分類、聚類算法及相應工具；

5、具備nlp相關工作（特別是數據處理與分析）經驗，了解nlp基本知識；

6、其他：耐心、細緻；較強的邏輯思維能力；性格踏實穩定，抗壓能力強。

數據中心工程師崗位職責 篇24

1、對海量業務數據進行分析，並利用算法挖掘用戶行為特徵，發現潛在規律，建立機器學習算法並最佳化;

2、利用數據挖掘技術分析、預測用戶的消費行為;

3、建立各種業務邏輯模型和數學模型，幫助公司改善運營管理，節省成本。

任職要求：

1、大學本科及以上學歷;

2、統計學、會計學、數學、物理等相關專業;

3、本科5年以上同崗位工作經驗，研究生3年以上同崗位工作經驗;

4、對統計學和數據挖掘算法原理有較為深刻的理解，了解數據倉庫思想，熟悉SPSS、SAS、R、MAHOUT等數據挖掘軟體之一;

5、熟悉決策樹、聚類、邏輯回歸，關聯分析、SVM，貝葉斯等數據挖掘算法，有海量數據挖掘的項目經驗;

6、有用戶行為分析、用戶建模、業務建模、數學建模經驗優先;

7、良好的邏輯分析能力、分析問題和解決問題的`能力，對數據敏感，良好的溝通能力。

數據中心工程師崗位職責 篇25

1.負責工業設備組網及數據採集方案設計；

2.負責設計方案所需感測器、儀表選型，布線圖、數據存儲方式、數據表等詳細設計；

3.負責與設備廠商、數控系統廠商進行業務協定、通信協定及接口協調；

4.負責現場數據採集相關軟硬體安裝調試；

5.負責和用戶現場對口協調、技術指導及現場培訓。