職位描述：

職責描述：

1.參與大數據平臺和大數據處理框架的架構規劃設計；

2.參與數據治理工作，提升數據易用性及數據質量；

3.理解并合理抽象業務需求，發揮數據價值，主動思考不斷優化，與業務團隊緊密合作；

4.配合大數據負責人完成Hadoop、Spark等集群的管理、優化和維護，保證集群規模持續、穩定。

任職要求：

1.兩年以上相關工作經驗；

2.熟練掌握java語言，熟練使用linux,強悍的編碼和處理問題能力；

3.熟悉大數據開源棧spark/hadoop、Hive、Hbase、ElasticSearch、kafka、redis,strom/spark-streaming/flink，有至少TB以上級大數據處理經驗.有SparkStreaming的實時統計開發經驗優先；

4.對數據敏感，認真細致，善于從數據中發現疑點；

5.善于溝通，具備優秀的技術與業務結合能力；

6.學習能力強，喜歡研究開源新技術，有團隊觀念，具備獨立解決問題的能力

篇2:大數據開發總監崗位職責大數據開發總監職責任職要求

大數據開發總監崗位職責

大數據開發總監主要職責

1.帶領大數據團隊,包括數據建設、數據質量治理、數據應用和數據產品;

2.設計并優化公司大數據架構,包括數據建設流、數倉模型、數據集市架構;

3.構建數據質量保障體系,包括全流程監控、預警和數據快速恢復、數據質量評估

4.完善數據應用體系,包括數據產品構建、數據分析需求響應、數據集市

5.數據工程架構迭代,包括實時流、權限管理、調度、應用輸出等主要職責

1.帶領大數據團隊,包括數據建設、數據質量治理、數據應用和數據產品;

2.設計并優化公司大數據架構,包括數據建設流、數倉模型、數據集市架構;

3.構建數據質量保障體系,包括全流程監控、預警和數據快速恢復、數據質量評估

4.完善數據應用體系,包括數據產品構建、數據分析需求響應、數據集市

5.數據工程架構迭代,包括實時流、權限管理、調度、應用輸出等

篇3:大數據高級開發職位描述與崗位職責任職要求

職位描述：

1、負責基于Hadoop、Spark、MPP的大數據、數據倉庫構架設計及開發工作；

2、負責理解業務數據需求，開展數據采集、存儲、管理、分析、建模及數據處理流程設計及開發;

3、牽頭大數據庫開發工作，負責整體推進劑技術疑難問題的解決。

本職位為外包職位，外包到浙江華云信息科技有限公司，從事電力行業信息化工作。