首頁 > 制度大全 > 資深數(shù)據(jù)倉庫工程師崗位職責

資深數(shù)據(jù)倉庫工程師崗位職責

2024-07-28 閱讀 2856

資深數(shù)據(jù)倉庫工程師(嚴選)-郵件事業(yè)部172網(wǎng)易集團網(wǎng)易(杭州)網(wǎng)絡有限公司,杭州網(wǎng)易,網(wǎng)易,網(wǎng)易杭州,網(wǎng)易游戲,網(wǎng)易網(wǎng)絡,網(wǎng)易集團,網(wǎng)易工作職責:

1.負責電商數(shù)據(jù)倉庫搭建、ETL開發(fā)與維護;

2.完成數(shù)據(jù)統(tǒng)計、編寫計算任務、接口開發(fā);

3.參于數(shù)據(jù)規(guī)范制定、文檔編寫。

任職要求:

1.本科以上學歷,軟件工程/計算機/通信/數(shù)學等相關專業(yè);

2.熟悉HiveSQL語言,熟悉shell,python等至少一種腳本語言;

3.有hadoop、spark、flink等至少一種大數(shù)據(jù)平臺的使用經(jīng)驗;

4.理解能力強,善于溝通,有責任心和團隊精神;

5.有數(shù)據(jù)倉庫建設、商業(yè)數(shù)據(jù)分析、增長項目經(jīng)驗者優(yōu)先。

篇2:數(shù)據(jù)倉庫研發(fā)工程師崗位職責

搜狗金融-數(shù)據(jù)倉庫研發(fā)工程師-北京-02173(MJ001926)搜狗北京搜狗科技發(fā)展有限公司,北京搜狗科技,搜狗,搜狗科技,搜狗翻譯,搜狗詞典,搜狗崗位職責:

1、數(shù)據(jù)倉庫、數(shù)據(jù)集市的數(shù)據(jù)模型設計

2、數(shù)據(jù)倉庫ETL規(guī)則設計和開發(fā)

3、利用HQL進行數(shù)據(jù)清洗,根據(jù)應用場景建立數(shù)據(jù)集市。

4、數(shù)據(jù)倉庫數(shù)據(jù)導入,建表,日常任務跑批,日志監(jiān)控。

5、數(shù)據(jù)倉庫需求調(diào)研和需求分析

任職條件:

1、熟悉python,熟練使用shell編程解決數(shù)據(jù)清洗;

2、熟練使用Hadoop、Hive、Sqoop,熟練使用hiveSQL并有一定編寫map/reduce開發(fā)經(jīng)驗;

3、熟悉數(shù)據(jù)倉庫建模理論,了解數(shù)據(jù)倉庫數(shù)據(jù)分層架構(gòu),精通3NF和多維數(shù)據(jù)模型設計;

4、具備大中型數(shù)據(jù)倉庫架構(gòu)設計、模型設計、ETL設計的相關經(jīng)驗;

5、具備海量數(shù)據(jù)處理、有性能調(diào)優(yōu)經(jīng)、金融、電商、電信、互聯(lián)網(wǎng)行業(yè)數(shù)據(jù)模型經(jīng)驗者優(yōu)先

這是一款定位于服務平臺互聯(lián)網(wǎng)用戶的金融產(chǎn)品,由搜狗公司內(nèi)部孵化,深度挖掘搜狗在互聯(lián)網(wǎng)端的用戶規(guī)模優(yōu)勢以及多年的大數(shù)據(jù)能力積累。在當下大熱的互聯(lián)網(wǎng)金融領域,搜狗將發(fā)揮用戶服務和智能算法優(yōu)勢,并結(jié)合平臺的綜合運營實力。

篇3:倉庫開發(fā)工程師崗位職責

數(shù)據(jù)倉庫開發(fā)工程師同程藝龍同程網(wǎng)絡科技股份有限公司,同程旅游,同程藝龍,同程職責描述:

1、數(shù)據(jù)倉庫、數(shù)據(jù)集市的數(shù)據(jù)模型設計

2、數(shù)據(jù)倉庫ETL規(guī)則設計和開發(fā)數(shù)據(jù)倉庫需求調(diào)研和需求分析

3.業(yè)務模型抽象、數(shù)據(jù)模型設計開發(fā)

4.支持業(yè)務的數(shù)據(jù)需求,跟分析師一起完善業(yè)務的數(shù)據(jù)分析體系和工具

5.ETL、數(shù)據(jù)應用和服務的設計開發(fā)

6.積累數(shù)據(jù)生產(chǎn)、分析工具,不斷提高數(shù)據(jù)生產(chǎn)效率

7.實時數(shù)據(jù)倉庫設計、開發(fā)與服務

任職要求:

1、1年以上數(shù)據(jù)倉庫開發(fā)和架構(gòu)經(jīng)驗,深刻理解數(shù)據(jù)倉庫應用設計原理和實踐;

3、精通數(shù)據(jù)庫索引和sql語句的優(yōu)化,和服務器的性能參數(shù)調(diào)整

4、熟練一種以上主流ETL工具和BI工具

5、能根據(jù)業(yè)務需求設計數(shù)據(jù)倉庫模型,掌握多種數(shù)據(jù)倉或數(shù)據(jù)集市開發(fā),多維分析相關技術和OLAP前端展現(xiàn)工具;

6、有互聯(lián)網(wǎng)旅游數(shù)據(jù)倉庫經(jīng)驗者優(yōu)先;有處理實時數(shù)據(jù)經(jīng)驗者優(yōu)先;

7、強烈責任心,開放的性格,良好的溝通能力;較強的分析問題、解決問題能力,良好的溝通能力、團隊精神。

8、有一個以上企業(yè)級數(shù)據(jù)倉庫項目設計經(jīng)驗,精通數(shù)據(jù)倉庫架構(gòu),熟悉數(shù)據(jù)倉庫項目的實施流程;