數據倉庫工程師的具體職責文本

數據倉庫工程師的具體職責文本 篇1

職責:

1、負責大數據平台搭建及數據倉庫建模;

2、負責資料庫管理及數據最佳化;

3、利用大數據相關技術實現對數據的分析、挖掘、處理、及數據可視化等相關工作;

4、維護大數據平台並能解決相關問題, 保障平台正常運行;

5、學習和研究新技術以滿足系統需求。

任職資格:

1、本科及以上學歷,計算機、通信等相關專業;

2、有相關工作經驗者優先;

3、對網際網路產品有見解,關注前沿技術,有較強的學習能力、分析能力和動手能力;

4、熟悉Linux作業系統及ORACLE、MySQL及MongoDB等資料庫,了解SQL最佳化,熟悉ER模型和相關數據建模技術,能夠熟練使用Java或Python、SHELL;

5、熟悉Hadoop的體系架構和運行原理,有大數據處理方面經驗

6、具有大型數據倉庫和ETL開發、HIVE經驗優先

7、個性樂觀開朗,溝通能力強,具備良好的團隊協作精神,能利用自身技術能力提升團隊整體研發效率。

數據倉庫工程師的具體職責文本 篇2

職責:

1、參與數據倉庫建設,負責數據倉庫模型設計;

2、開發高質量可擴展的底層數據倉庫體系;

3、負責數據倉庫系統與業務系統的接口設計和確認工作;

4、負責數據平台相關的管理工作,如數據研發規範、數據質量及穩定性保證等建設;

5、參與公司各個業務線BI、數據產品與套用的數據研發,發覺數據潛在價值。

崗位要求:

1.大學本科及以上學歷,計算機、經濟、金融、數學專業背景,有3年以上工作經驗;

2.熟悉數據倉庫建模理論,以及數倉數據層級關係,具備大型數倉邏輯模型和物理模型設計經驗;

3.熟悉一種ETL開發工具(sqoop,datax等), 熟悉ETL開發實施流程和原理;

4.掌握CDH版的hadoop環境,掌握hiveQL,有調優經驗;

5.有一定的程式語言基礎,不限制於java,python,shell等;

6.有元數據管理、數據質量管理工作經驗的優先考慮;

7.工作認真,負責,仔細,有良好的團隊合作精神。

數據倉庫工程師的具體職責文本 篇3

職責:

1、學習並理解勵步雲學業務及系統,根據業務部門需求對公司各項業務數據進行統計分析,出具相關報表;

2、進行數據倉庫設計、模型開發、數據質量校驗,報表開發;

3、進行數據差異分析,找出統計口徑、數據錯誤、操作錯誤等造成的差異原因;

4、進行數據查詢最佳化,解決跑數性能問題。

任職資格:

1、本科以上學歷,數學、統計、計算機相關專業優先;

2、3年以上網際網路相關行業數據開發經驗;

3、精通數據倉庫建設思路,並有相關實施經驗,特別是通用匯總層建設經驗;

4、較強的數據開發能力,熟悉Hadoop相關技術,深刻理解MapReduce原理和過程;

5、精通Hive SQL,進行數據處理及模型開發;

6、有較強的學習能力,能快速學習和理解業務知識及數據需求;

數據倉庫工程師的具體職責文本 篇4

Responsibility

1、負責建設數據倉庫架構,包括元數據管理、ETL調度、數據集成、OLAP等子系統的設計和開發;

2、制定和推廣數據字典,建立完善的元數據管理規範,負責數據質量監控設計;

3、搭建和維護數據倉庫表,解決業務人員在倉庫系統流程、工具使用、數據處理等遇到的問題;

4、深入了解網易遊戲、CC直播、藏寶閣、網易大神等業務,負責數據倉庫和其它業務系統接口。

5、基於對數據的理解和業務需求,對數據進行整理、分析和用戶畫像搭建。

Requirements

1、計算機相關專業本科及以上學歷,有2年以上數據倉庫、ETL工作經驗;

2、熟悉SQL、Shell等相關技術,有海量數據處理、ETL及任務調度最佳化、數據倉庫建模等經驗;

3、熟悉Linux環境,了解Java/Python服務端系統開發;

4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大數據技術者優先;

5、邏輯清晰、對數據敏感,良好的溝通能力和協作能力,敢於接受挑戰,能夠承受壓力;

數據倉庫工程師的具體職責文本 篇5

職責:

1、負責數據倉庫(HADOOP)ETL工作以及數據運營;

2、負責數據產品的業務需求梳理、數據開發以及維護;

3、負責數據倉庫的維度建模以及設計相關的腳本調度;

4、負責維度模型的數據處理的腳本開發,程式開發以及接口對接。

職位要求:

1. 本科以上學歷,信息管理、計算機相關專業,兩年以上ETL、數據倉庫和大數據相關經驗;

2. 熟悉數據倉庫架構,了解HADOOP等大數據平台;

3. 有ORACLE\DB2等大型的數據倉庫的開發經驗;

4. 能夠用HIVE的SQL,HADOOP的MAPREDUCE和SPARK去處理數據;

5. 熟悉關係資料庫,並有HIVE的SQL的開發經驗;

6. 熟悉Linux的shell編程;

7. 有銀行和運營商相關的大數據或者數據倉庫相關經驗的優先

8. 熱愛技術工作,具有較強的團隊協作意識,數據安全意識;

9. 工作嚴謹、責任心強,能承受工作壓力。

數據倉庫工程師的具體職責文本 篇6

1、建立健全公司防靜電體系;

2、生產現場所有接地、點檢、記錄相關工作的落實;

3、戶及第三方審核的準備及主導;

4、分析與改善生產現場ESD不良。

數據倉庫工程師的具體職責文本 篇7

1、負責ESD靜電防護內部審核稽查工作及ESD問題改善;

2、負責靜電防護知識培訓及相關檔案的制定與完善;

3、主導公司ESD月度、季度和年度審核計畫及實施;

4、依據客戶要求制定ESD測試方案,並協助客戶做ESD測試工作;

5、完成上級領導交待的其他與ESD相關的工作。

數據倉庫工程師的具體職責文本 篇8

職責:

1. 參與數據倉庫和基礎架構規劃、安全規劃、ETL架構和規範制定;

2. 負責海量數據的ETL開發和最佳化,抽取成各種數據需求,並及時解決ETL相關技術問題;

3. 負責對ETL技術培訓,指導進行數據倉庫項目的開發、測試和運 維;

4. 負責ETL數據準確性驗證及報表維護;

5. 海量數據的ETL開發,抽取成各種數據需求。

任職要求:

1. 本科以上學歷,優秀名校或碩士以上優先,有較好的英文閱讀能力;

2. 精通開源etl開發工具及etl架構,有一定的etl開發經驗,熟悉日常作業的部署和調度。;

3. 熟悉主流資料庫技術,如oracle、Sql server、PostgeSQL、MySql等;

4、精通Shell編程。

數據倉庫工程師的具體職責文本 篇9

1. 負責智慧型家居系統技術規劃、產業鏈資源、供應商整合的統籌推進;

2. 負責智慧型家居系統的功能定義、場景及用例需求編寫;

3. 負責智慧型家居系統的系統需求及功能定義編寫,包含系統軟、硬體需求、系統架構、頂層邏輯、狀態機、匯流排、原理圖等設計;

4. 負責智慧型家居系統各模組的系統集成與匹配;

5. 負責智慧型家居系統互動及接口定義;

6. 協助部門領導推進整體項目進展。

數據倉庫工程師的具體職責文本 篇10

1、負責組裝、測試工藝可行性分析,SE分析相關工作,並協助研發進行工藝性評估、驗證;

2、負責編制工藝過程流程圖、線平衡分析,產能最佳化並對人員培訓,提升製程直通率;

3、負責編制產品作業參數標準、更新、完善工藝檔案和檔案管理;

4、具備較強的邏輯分析及數據處理能力;

5、協助處理上級交辦的其它事務;

數據倉庫工程師的具體職責文本 篇11

職責:

1. 為用戶提供伺服器技術服務,在分公司主管和公司業務部門的領導下,開展技術諮詢、項目支持工作;

2. 負責總公司在分公司市場開展業務所需要的技術工作;

3. 協調分公司當地技術活動與總公司相應部門的協調;

4. 配合分公司完成全年的銷售任務;

5. 履行各業務部的技術要求,加強項目管理。

6、能夠充分了解用戶各個系統、存儲、伺服器、網路等情況,並結合高校用戶實際情況提出可行的最佳化建議;.了解網路相關知識,熟悉TCP/IP協定線,有調試過交換機、路由器、防火牆、各類安全產品經驗優先,有HCNP或等同以上證書優先。

任職條件:

(1)本科以上學歷,計算機相關專業,具有一年以上計算機通信等相關工作經驗者優先(優秀應屆畢業生亦可);

(2)掌握存儲、伺服器等技術和解決方案;

(3)具有撰寫標書的工作經驗,從事過大型網路的設計、施工或維護工作;

(4)具有項目管理經驗,能夠按照ISO9001及相應要求進行項目管理;

(5)具有較強的學習能力和表達能力;

數據倉庫工程師的具體職責文本 篇12

職責:

1、參與數據ETL和數據倉庫治理;

2、參與大數據分析和挖掘,個性化推薦等系統的設計和開發;

3、負責數據挖掘、自然語言處理及預測等相關模型、算法的設計與開發;

4、參與BI等系統基礎數據支撐開發;

5、參與用戶畫像、用戶行為評分、行業指數、銷售預測等功能模組的開發;

6、參與爬蟲等外部相關數據爬取。

任職要求:

1、熟悉機率論和統計方法;

2、掌握統計學習方法和機器學習算法者優先;

3、掌握JAVA,理解MapReduce開發思維,能獨立開發分散式計算;熟悉Shell、R、MATLAB、Octive、Python等腳本語言或套用開發者優先;

4、熟悉關係型資料庫MySQL等,了解NoSQL;

5、具備工程化思維,思考數據業務能夠全面謹慎;

6、具備快速學習的能力和業務理解力,對數據開發有濃厚的興趣,具備理解和整合算法的能力。