職位描述：

職責(zé)描述：

1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建模，業(yè)務(wù)數(shù)據(jù)集市建設(shè)開(kāi)發(fā)

2、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)ETL流程的優(yōu)化及解決ETL相關(guān)技術(shù)問(wèn)題、ETL流程監(jiān)控，保障數(shù)據(jù)平臺(tái)架構(gòu)穩(wěn)定性

3、建立數(shù)據(jù)分析指標(biāo)體系，不斷完善指標(biāo)體系和分析模型；

4、通過(guò)專項(xiàng)分析，輸出專項(xiàng)分析報(bào)告

5、負(fù)責(zé)數(shù)據(jù)分析相關(guān)需求和數(shù)據(jù)測(cè)試的工作

任職要求：

學(xué)歷要求：

全日制統(tǒng)考類本科及以上學(xué)歷，計(jì)算機(jī)、通信、電子、軟件工程、統(tǒng)計(jì)學(xué)、應(yīng)用數(shù)學(xué)、數(shù)據(jù)分析等相關(guān)專業(yè)

專業(yè)技能：

1、熟悉數(shù)據(jù)倉(cāng)庫(kù)各類模型建模理論，熟悉數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)分層架構(gòu)和多維數(shù)據(jù)模型設(shè)計(jì)；

2、豐富的數(shù)據(jù)分析經(jīng)驗(yàn)，熟練掌握SQL、HQL、SparkSQL，擅長(zhǎng)運(yùn)用其分析并完成復(fù)雜業(yè)務(wù)數(shù)據(jù)查詢

3、掌握至少一種數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：Mysql/Oracle/DB2等，靈活運(yùn)用SQL實(shí)現(xiàn)海量數(shù)據(jù)ETL加工處理；

4、熟悉Hadoop生態(tài)（如：Hdfs/Mapreduce/Hive/Hbase等），并有相關(guān)實(shí)踐經(jīng)驗(yàn)；

5、熟練掌握一門或多門編程語(yǔ)言（如：Python/shell/Java/C++等），并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先；

素質(zhì)：

1、敏銳的數(shù)據(jù)觀察和分析能力，及時(shí)發(fā)現(xiàn)和分析其中隱含的變化和問(wèn)題并給出建議；

2、良好的溝通能力和團(tuán)隊(duì)精神，較強(qiáng)的學(xué)習(xí)能力，能承擔(dān)一定的工作壓力。

經(jīng)驗(yàn)：

至少2年以上數(shù)據(jù)倉(cāng)庫(kù)（離線&實(shí)時(shí)）模型設(shè)計(jì)開(kāi)發(fā)、ETL設(shè)計(jì)開(kāi)發(fā)的相關(guān)經(jīng)驗(yàn)，有通信運(yùn)營(yíng)商O域/B域大數(shù)據(jù)、智慧城市大數(shù)據(jù)的數(shù)據(jù)倉(cāng)庫(kù)、ETL設(shè)計(jì)研發(fā)經(jīng)驗(yàn)者優(yōu)先"

篇2:數(shù)據(jù)倉(cāng)庫(kù)研發(fā)工程師崗位職責(zé)

搜狗金融-數(shù)據(jù)倉(cāng)庫(kù)研發(fā)工程師-北京-02173(MJ001926)搜狗北京搜狗科技發(fā)展有限公司,北京搜狗科技,搜狗,搜狗科技,搜狗翻譯,搜狗詞典,搜狗崗位職責(zé):

1、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市的數(shù)據(jù)模型設(shè)計(jì)

2、數(shù)據(jù)倉(cāng)庫(kù)ETL規(guī)則設(shè)計(jì)和開(kāi)發(fā)

3、利用HQL進(jìn)行數(shù)據(jù)清洗,根據(jù)應(yīng)用場(chǎng)景建立數(shù)據(jù)集市。

4、數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)導(dǎo)入,建表,日常任務(wù)跑批,日志監(jiān)控。

5、數(shù)據(jù)倉(cāng)庫(kù)需求調(diào)研和需求分析

任職條件:

1、熟悉python,熟練使用shell編程解決數(shù)據(jù)清洗;

2、熟練使用Hadoop、Hive、Sqoop,熟練使用hiveSQL并有一定編寫map/reduce開(kāi)發(fā)經(jīng)驗(yàn);

3、熟悉數(shù)據(jù)倉(cāng)庫(kù)建模理論,了解數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)分層架構(gòu),精通3NF和多維數(shù)據(jù)模型設(shè)計(jì);

4、具備大中型數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)、模型設(shè)計(jì)、ETL設(shè)計(jì)的相關(guān)經(jīng)驗(yàn);

5、具備海量數(shù)據(jù)處理、有性能調(diào)優(yōu)經(jīng)、金融、電商、電信、互聯(lián)網(wǎng)行業(yè)數(shù)據(jù)模型經(jīng)驗(yàn)者優(yōu)先

這是一款定位于服務(wù)平臺(tái)互聯(lián)網(wǎng)用戶的金融產(chǎn)品,由搜狗公司內(nèi)部孵化,深度挖掘搜狗在互聯(lián)網(wǎng)端的用戶規(guī)模優(yōu)勢(shì)以及多年的大數(shù)據(jù)能力積累。在當(dāng)下大熱的互聯(lián)網(wǎng)金融領(lǐng)域,搜狗將發(fā)揮用戶服務(wù)和智能算法優(yōu)勢(shì),并結(jié)合平臺(tái)的綜合運(yùn)營(yíng)實(shí)力。

篇3:倉(cāng)庫(kù)開(kāi)發(fā)工程師崗位職責(zé)

數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)工程師同程藝龍同程網(wǎng)絡(luò)科技股份有限公司,同程旅游,同程藝龍,同程職責(zé)描述:

1、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市的數(shù)據(jù)模型設(shè)計(jì)

2、數(shù)據(jù)倉(cāng)庫(kù)ETL規(guī)則設(shè)計(jì)和開(kāi)發(fā)數(shù)據(jù)倉(cāng)庫(kù)需求調(diào)研和需求分析

3.業(yè)務(wù)模型抽象、數(shù)據(jù)模型設(shè)計(jì)開(kāi)發(fā)

4.支持業(yè)務(wù)的數(shù)據(jù)需求,跟分析師一起完善業(yè)務(wù)的數(shù)據(jù)分析體系和工具

5.ETL、數(shù)據(jù)應(yīng)用和服務(wù)的設(shè)計(jì)開(kāi)發(fā)

6.積累數(shù)據(jù)生產(chǎn)、分析工具,不斷提高數(shù)據(jù)生產(chǎn)效率

7.實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、開(kāi)發(fā)與服務(wù)

任職要求:

1、1年以上數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)和架構(gòu)經(jīng)驗(yàn),深刻理解數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用設(shè)計(jì)原理和實(shí)踐;

3、精通數(shù)據(jù)庫(kù)索引和sql語(yǔ)句的優(yōu)化,和服務(wù)器的性能參數(shù)調(diào)整

4、熟練一種以上主流ETL工具和BI工具

5、能根據(jù)業(yè)務(wù)需求設(shè)計(jì)數(shù)據(jù)倉(cāng)庫(kù)模型,掌握多種數(shù)據(jù)倉(cāng)或數(shù)據(jù)集市開(kāi)發(fā),多維分析相關(guān)技術(shù)和OLAP前端展現(xiàn)工具;

6、有互聯(lián)網(wǎng)旅游數(shù)據(jù)倉(cāng)庫(kù)經(jīng)驗(yàn)者優(yōu)先;有處理實(shí)時(shí)數(shù)據(jù)經(jīng)驗(yàn)者優(yōu)先;

7、強(qiáng)烈責(zé)任心,開(kāi)放的性格,良好的溝通能力;較強(qiáng)的分析問(wèn)題、解決問(wèn)題能力,良好的溝通能力、團(tuán)隊(duì)精神。

8、有一個(gè)以上企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目設(shè)計(jì)經(jīng)驗(yàn),精通數(shù)據(jù)倉(cāng)庫(kù)架構(gòu),熟悉數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目的實(shí)施流程;