ETL高級工程師職位要求

1、計算機、數(shù)學(xué)或統(tǒng)計等專業(yè)，本科以上學(xué)歷；

2、精通SQL語言；熟悉數(shù)據(jù)倉庫設(shè)計、建模；

3、精通Python，能夠編寫腳本處理、分析數(shù)據(jù)；

4、熟悉批量離線式分布式并行計算技術(shù)（如Hadoop、MapReduce、Hive、Spark等）

5、熟悉SQLServer、MySQL數(shù)據(jù)庫；了解Redis等非關(guān)系型數(shù)據(jù)庫；

6、熟悉至少一種常用ETL工具（如Kettle、SSIS、Gobblin）；了解常用報表工具（如ReportingServices以及各類開源報表）；

7、了解常用數(shù)據(jù)挖掘方法（回歸、決策樹、聚類等）。

ETL高級工程師崗位職責(zé)

1、負(fù)責(zé)國際網(wǎng)站后臺數(shù)據(jù)倉庫搭建、維護(hù)；

2、運用各類大數(shù)據(jù)工具設(shè)計ETL流程，消費生產(chǎn)環(huán)境埋點、日志等數(shù)據(jù)；

3、日常數(shù)據(jù)監(jiān)控以及數(shù)據(jù)預(yù)警，異常數(shù)據(jù)解讀挖掘，并與業(yè)務(wù)同事溝通解決方案；

4、分析用戶的特征和行為數(shù)據(jù)，挖掘不同類型用戶的行為特性，為實際的業(yè)務(wù)運營提供數(shù)據(jù)支持；

5、從數(shù)據(jù)分析結(jié)果中尋找insight和商業(yè)價值，并以簡明扼要的形式傳導(dǎo)到其他部分，指導(dǎo)實際的業(yè)務(wù)運營；

6、處理國際網(wǎng)站的臨時數(shù)據(jù)需求，并對于常用重要需求轉(zhuǎn)化成數(shù)據(jù)產(chǎn)品。

篇2:中級ETL工程師崗位職責(zé)

中級ETL工程師比孚科技上海比孚信息科技有限公司,比孚,比孚科技,比孚職位描述:

1.負(fù)責(zé)數(shù)據(jù)倉庫/數(shù)據(jù)集市ETL設(shè)計開發(fā);

2.負(fù)責(zé)與業(yè)務(wù)部門數(shù)據(jù)需求的溝通與確認(rèn);

任職資格:

1.三以上工作經(jīng)驗;

2.熟悉主流ETL開發(fā)工具,如:SSIS、Kettle、Datastage等;

3.熟練掌握主流數(shù)據(jù)庫的使用,如:SQLServer、Mysql、Oracle,對SQL查詢優(yōu)化有豐富的經(jīng)驗;

4.熟悉主流報表工具,如:Tableau、PowerBi、Cognos;

5.良好的溝通技能,清晰的邏輯思維能力;

6.工作認(rèn)真仔細(xì),積極主動,具備較強的自主學(xué)習(xí)、自我總結(jié)能力。

篇3:ETL數(shù)據(jù)工程師崗位職責(zé)任職要求

ETL數(shù)據(jù)工程師崗位職責(zé)

崗位職責(zé):

1.參與金融大數(shù)據(jù)研發(fā);

2.參與數(shù)據(jù)倉庫ETL流程的優(yōu)化及解決ETL相關(guān)技術(shù)問題;

3.負(fù)責(zé)數(shù)據(jù)基礎(chǔ)架構(gòu)的升級和優(yōu)化,不斷提升系統(tǒng)的穩(wěn)定性和效率;

4.設(shè)計并實現(xiàn)對機器學(xué)習(xí)、數(shù)據(jù)挖掘的系統(tǒng)性支持;

崗位要求:

1.計算機相關(guān)專業(yè),本科及以上學(xué)歷;

2.具備良好的編程習(xí)慣,熟悉常用的數(shù)據(jù)結(jié)構(gòu)和算法;

3.熟練掌握PHP/Python/java任一語言;

4.具備良好的數(shù)據(jù)庫理論基礎(chǔ)知識,較強的sql書寫能力,熟練使用MySQL/postgres等數(shù)據(jù)庫;

5.有數(shù)據(jù)處理,ETL流程優(yōu)化實戰(zhàn)經(jīng)驗,熟悉kettle/informatica等抽取工具;

6.有使用kafka,storm,sparkstreaming實時數(shù)據(jù)處理系統(tǒng)建設(shè)經(jīng)驗優(yōu)先。

ETL數(shù)據(jù)工程師崗位