倉庫開發崗位職責任職要求
倉庫開發崗位職責
數據倉庫開發工程師1、負責業務相關數據指標的計算挖掘;
2、負責數據建模以及數據倉庫應用產品的設計和開發;
3、負責數據倉庫ETL流程的優化及解決ETL相關技術問題;
4、數據倉庫和業務數據集市建設;
5、業務模型抽象、數據模型設計開發。
6、參與數據平臺的數據研發,發掘數據商業價值,打造良好體驗的數據平臺。1、扎實的Java/Scala基礎,有項目主程經歷;
2、具有Hadoop/Spark開發與應用經驗,有較大規模的項目經歷并應用在生產環境;
2、深入了解Hadoop生態系統,掌握Hive/Flume/Spark/Kafka等的使用和調優;
3、精通Redis、HBase等NOSQL數據庫,熟練掌握jwm性能調優
4、深入理解數據倉庫理論、體系架構,從事數據倉庫領域至少2年以上,熟悉數據倉庫模型設計與ETL開發經驗,掌握Kimball的維度建模設計方法
5、具備大型數據倉庫架構設計、模型設計、ETL設計的相關經驗;
6、3年以上大數據開發經驗,學習能力強,良好的溝通與表達能力和自我驅動力。1、負責業務相關數據指標的計算挖掘;
2、負責數據建模以及數據倉庫應用產品的設計和開發;
3、負責數據倉庫ETL流程的優化及解決ETL相關技術問題;
4、數據倉庫和業務數據集市建設;
5、業務模型抽象、數據模型設計開發。
6、參與數據平臺的數據研發,發掘數據商業價值,打造良好體驗的數據平臺。
倉庫開發崗位
篇2:倉庫開發工程師崗位職責
數據倉庫開發工程師同程藝龍同程網絡科技股份有限公司,同程旅游,同程藝龍,同程職責描述:
1、數據倉庫、數據集市的數據模型設計
2、數據倉庫ETL規則設計和開發數據倉庫需求調研和需求分析
3.業務模型抽象、數據模型設計開發
4.支持業務的數據需求,跟分析師一起完善業務的數據分析體系和工具
5.ETL、數據應用和服務的設計開發
6.積累數據生產、分析工具,不斷提高數據生產效率
7.實時數據倉庫設計、開發與服務
任職要求:
1、1年以上數據倉庫開發和架構經驗,深刻理解數據倉庫應用設計原理和實踐;
3、精通數據庫索引和sql語句的優化,和服務器的性能參數調整
4、熟練一種以上主流ETL工具和BI工具
5、能根據業務需求設計數據倉庫模型,掌握多種數據倉或數據集市開發,多維分析相關技術和OLAP前端展現工具;
6、有互聯網旅游數據倉庫經驗者優先;有處理實時數據經驗者優先;
7、強烈責任心,開放的性格,良好的溝通能力;較強的分析問題、解決問題能力,良好的溝通能力、團隊精神。
8、有一個以上企業級數據倉庫項目設計經驗,精通數據倉庫架構,熟悉數據倉庫項目的實施流程;
篇3:數據倉庫開發(高級)工程師職位描述與崗位職責任職要求
職位描述:
工作職責:
1、負責今日頭條的用戶產品線的數據倉庫架構設計、建模和ETL開發;
2、參與數據治理工作,提升數據易用性及數據質量,與數據工具團隊緊密合作;
3、理解并合理抽象業務需求,發揮數據價值,與業務團隊緊密合作。
任職要求:
1、精通數據倉庫實施方法論、深入了解數據倉庫體系,并支撐過實際業務場景;
2、具備較強的編碼能力,熟悉sql,python,hive,spark,kafka,storm中的多項,有至少TB以上級大數據處理經驗;
3、對數據敏感,認真細致,善于從數據中發現疑點;
4、善于溝通,具備優秀的技術與業務結合能力。