架構師崗位職責

架構師崗位職責篇1

1、負責大數據平台資源規劃、許可權控制、運維架構設計，為各產品業務提供穩定、高效、安全的運行環境;

2、負責實時，離線數據分析處理及實時平台的建設和搭建

3、熟悉 Flink 流式計算引擎的使用以及源碼原理，並且有相關的流式處理平台的經驗。

4、Java基礎紮實，熟練掌握垃圾回收，網路，多執行緒編程，了解 python 或 scala

5、負責大數據平台技術架構、數據架構的分析與設計;

1. 負責大數據項目整體架構規劃，包括套用架構、技術架構、物理架構和數據架構等;

2. 負責指導工程師進行技術驗證與實現，核心技術問題的攻關，解決項目開發過程中的技術難題;

3. 負責項目對外技術溝通，具有較強的溝通，表達和文檔撰寫能力;

4. 根據公司項目和業務發展特點，負責研究相關大數據前沿技術;

5. 推動技術能力的沉澱。

1、負責公司大數據處理框架研發工作，設計與開發分散式存儲、數據處理與分析架構。

2、負責大數據平台與產品和相關技術的追蹤及研究。

3、負責大數據的處理工作，以及業務數據提取、載入、轉換處理流程的開發和最佳化。

4、利用大數據平台工具對數據維護。

5、負責相關項目的技術支持和服務。

6、持續對系統的技術架構進行改進和最佳化。

1、建設大數據平台，主要技術為k8s, docker;

2、跟進開源社區的更新，閱讀文檔，驗證feature;

3、閱讀容器生態圈各組件的開源項目代碼，開發新功能;

4、持續提昇平台的性能和穩定性。

1. 負責數瀾大數據平台的架構設計和研發，建立數據生態服務，解決海量數據面臨的挑戰;

2. 管理和最佳化Hadoop、Spark等集群，計算作業的調優，保證集群和平台的高效和穩定;

3. 負責Hadoop、Spark、Flink的功能、性能和擴展，解決並實現業務需求;

4. 負責大數據產品的自動化、離線與實時計算、即席計算、數據質量、數據安全、機器學習等平台的設計和開發;

5. 調研和把握當前的最新技術，將其中的先進技術引入到自己的平台中，改善產品，提升競爭力;