首頁 > 制度大全 > 資深數據倉庫研發工程師職位描述與崗位職責任職要求

資深數據倉庫研發工程師職位描述與崗位職責任職要求

2024-07-29 閱讀 7216

職位描述

崗位職責

1.負責數據倉庫研發工作

2.負責數據建模以及數據倉庫應用產品的設計和開發

3.負責數據倉庫ETL流程的優化及解決ETL相關技術問題

4.負責數據倉庫和業務數據集市建設

5.業務模型抽象、數據模型設計開發

6.參與業務指標體系建設

任職要求

1.本科及以上學歷,計算機、電子通信、數學、統計或者相關專業

2.三年以上工作經驗

3.熟練掌握HiveQL

4.熟悉Hadoop生態,掌握Hive/Spark/Storm/Kafka等的使用和性能調優

5.具備大型數據倉庫架構設計、模型設計、ETL設計的相關經驗

6.扎實的Java/Scala基礎

7.具備海量數據處理和數據挖掘研發經驗的優先

8.具備良好的團隊合作精神,工作有激情

篇2:數據倉庫研發工程師崗位職責

搜狗金融-數據倉庫研發工程師-北京-02173(MJ001926)搜狗北京搜狗科技發展有限公司,北京搜狗科技,搜狗,搜狗科技,搜狗翻譯,搜狗詞典,搜狗崗位職責:

1、數據倉庫、數據集市的數據模型設計

2、數據倉庫ETL規則設計和開發

3、利用HQL進行數據清洗,根據應用場景建立數據集市。

4、數據倉庫數據導入,建表,日常任務跑批,日志監控。

5、數據倉庫需求調研和需求分析

任職條件:

1、熟悉python,熟練使用shell編程解決數據清洗;

2、熟練使用Hadoop、Hive、Sqoop,熟練使用hiveSQL并有一定編寫map/reduce開發經驗;

3、熟悉數據倉庫建模理論,了解數據倉庫數據分層架構,精通3NF和多維數據模型設計;

4、具備大中型數據倉庫架構設計、模型設計、ETL設計的相關經驗;

5、具備海量數據處理、有性能調優經、金融、電商、電信、互聯網行業數據模型經驗者優先

這是一款定位于服務平臺互聯網用戶的金融產品,由搜狗公司內部孵化,深度挖掘搜狗在互聯網端的用戶規模優勢以及多年的大數據能力積累。在當下大熱的互聯網金融領域,搜狗將發揮用戶服務和智能算法優勢,并結合平臺的綜合運營實力。

篇3:數據倉庫研發負責人職位描述與崗位職責任職要求

職位描述

工作職責

1、負責今日頭條的一條或多條核心產品線的數據倉庫建設,例如,火山,抖音,西瓜,國際化,問答等;

2、參與數據治理工作,提升數據易用性及數據質量,與數據工具團隊緊密合作

3、深入業務,理解并合理抽象業務需求,發揮數據價值,與業務團隊緊密合作。

任職要求

1、精通數據倉庫實施方法論、深入了解數據倉庫體系,并支撐過實際業務場景;

2、具備較強的編碼能力,熟悉sql,python,hive,spark,kafka,storm中的多項;

3、善于溝通,具備優秀的技術與業務結合能力;

4、有PB量級數據處理經驗者優先;

5、有團隊管理經驗者優先。