職位描述：

職責描述：

1、負責數據分析、加工、清理、處理程序的開發

2、負責數據相關平臺的搭建、開發、維護、優化

3、分布式平臺應用開發（Hadoop/Spark/Hive/Hbase）

4、開發數據統計系統，各類統計程序報表。

任職要求：

1、2年以上Java或Python開發工作經驗，JAVA基礎扎實；

2、熟悉常見在線與離線大數據系統,如Hive,HBase,ES,Kafka等的工作原理與開發調優;具有MapReduce開發經驗，有實際大數據項目經驗；

3、熟練掌握Oracle、MySql等主流數據庫上的開發；

4、具有良好的溝通能力、組織能力及團隊協作精神，有較強的分析和解決問題的能力.

篇2:中級ETL工程師崗位職責

中級ETL工程師比孚科技上海比孚信息科技有限公司,比孚,比孚科技,比孚職位描述:

1.負責數據倉庫/數據集市ETL設計開發;

2.負責與業務部門數據需求的溝通與確認;

任職資格:

1.三以上工作經驗;

2.熟悉主流ETL開發工具,如:SSIS、Kettle、Datastage等;

3.熟練掌握主流數據庫的使用,如:SQLServer、Mysql、Oracle,對SQL查詢優化有豐富的經驗;

4.熟悉主流報表工具,如:Tableau、PowerBi、Cognos;

5.良好的溝通技能,清晰的邏輯思維能力;

6.工作認真仔細,積極主動,具備較強的自主學習、自我總結能力。

篇3:ETL數據工程師崗位職責任職要求

ETL數據工程師崗位職責

崗位職責:

1.參與金融大數據研發;

2.參與數據倉庫ETL流程的優化及解決ETL相關技術問題;

3.負責數據基礎架構的升級和優化,不斷提升系統的穩定性和效率;

4.設計并實現對機器學習、數據挖掘的系統性支持;

崗位要求:

1.計算機相關專業,本科及以上學歷;

2.具備良好的編程習慣,熟悉常用的數據結構和算法;

3.熟練掌握PHP/Python/java任一語言;

4.具備良好的數據庫理論基礎知識,較強的sql書寫能力,熟練使用MySQL/postgres等數據庫;

5.有數據處理,ETL流程優化實戰經驗,熟悉kettle/informatica等抽取工具;

6.有使用kafka,storm,sparkstreaming實時數據處理系統建設經驗優先。

ETL數據工程師崗位