數據工程崗位職責 篇1
1、負責國內外上市公司、股票、基金、債券等金融相關數據進行收集、整理和分類;
2、根據業務需求和相關算法模型公式,對原始數據進行加工、清洗工作;
3、協助處理項目反饋的數據問題,保證數據質量和精準度;
4、搭建和完善數據採集平台,保證平台的高效和穩定性。
數據工程崗位職責 篇2
1、負責數據平台數據整合與數據倉庫模型的建立、維護和最佳化;
2、參與指標體系與報表的設計、開發與維護;
3、了解、監控套用需求及數據源的變化,並評估對數據倉庫模型的.影響;
4、設計數據模型的etl實現,參與團隊etl流程的最佳化以及相關技術問題的解決。
5、基於數據分析和數據資源的挖掘,提升數據的商業套用價值。
數據工程崗位職責 篇3
1、具備大數據或者資料庫工作經驗2年以上;
2、熟悉主流nosql資料庫技術hbase,mongodb圖資料庫等其中兩種;
3、熟悉hadoop生態圈技術;熟悉3個以上大數據開發框架和中間件:hive、kafka、flume、spark等;
4、具有java、python調試、linux、shell編程能力;
5、思路清晰、良好的學習能力、善於協作、溝通和具備團隊合作意識,能夠適應出差。