數據處理工程師崗位職責
數據處理工程師全日制本科以上學歷(985/211),計算機科學與技術/軟件工程/數據相關專業(yè)
1、3年以上ETL開發(fā)經驗,熟悉ETL開發(fā)規(guī)范和流程;
2、熟練使用DataStage、Informatica、Kettle、Hive、PLSQL、SPARK、MapReduce等工具中的一個或多個,有開發(fā)、維護經驗;
3、熟練編寫存儲過程,擅長SQL優(yōu)化;
4、熟悉Oracle、SQLServer等常用數據庫中的一個或多個;
5、熟悉perl、shell腳本,Linux操作系統;
6、有大型數據倉庫、BI相關項目的開發(fā)經驗,精通架構、建模者優(yōu)先;
7、熟練使用Erwin或PowerDesigner等進行數據建模;
8.以下經驗優(yōu)先考慮:流式處理、日志處理、數據倉庫全日制本科以上學歷(985/211),計算機科學與技術/軟件工程/數據相關專業(yè)
1、3年以上ETL開發(fā)經驗,熟悉ETL開發(fā)規(guī)范和流程;
2、熟練使用DataStage、Informatica、Kettle、Hive、PLSQL、SPARK、MapReduce等工具中的一個或多個,有開發(fā)、維護經驗;
3、熟練編寫存儲過程,擅長SQL優(yōu)化;
4、熟悉Oracle、SQLServer等常用數據庫中的一個或多個;
5、熟悉perl、shell腳本,Linux操作系統;
6、有大型數據倉庫、BI相關項目的開發(fā)經驗,精通架構、建模者優(yōu)先;
7、熟練使用Erwin或PowerDesigner等進行數據建模;
8.以下經驗優(yōu)先考慮:流式處理、日志處理、數據倉庫
篇2:大數據處理工程師崗位職責
數據處理工程師(大數據項目)全成通信上海全成通信技術有限公司,全成通信,全成崗位職責:
1、負責大數據平臺的日常維護和監(jiān)控
2、負責大數據項目日報發(fā)布工作
3、負責日報數據的統計
4、負責大數據項目日常數據的計算、分析和維護
任職要求:
1、一年以上相關工作經驗,有電信行業(yè)經驗者優(yōu)先
2、熟悉Linux和Excel,熟練使用perl或者其他的腳本語言
3、具有OracleDLL/DML技術的使用經驗
4、具有良好的團隊合作精神,有較強的學習能力、適應能力、溝通能力
篇3:數據處理工程師崗位職責數據處理工程師職責任職要求
數據處理工程師崗位職責
數據處理工程師1)直接面對客戶,參與項目運作中數據處理,了解客戶軟硬件要求;
2)參與、協助數據收集和模型建構;
3)安裝、調試公司軟件在客戶端上線;
4)開發(fā)常用數據處理功能,幫助業(yè)務團隊提高工作效率;
5)與香港、新加坡和紐約團隊合作,為亞太地區(qū)技術服務提供支持。·計算機或軟件相關專業(yè),本科及以上學歷;
·掌握兩門以及常見數據庫設計開發(fā)技術,Mysql、Oracle、SqlServer、Hive等;
·具有參加過ETL開發(fā)項目,處理過(大)數據經驗優(yōu)先;
·工作細心、認真負責且善于溝通,能快速理解業(yè)務,對數據敏感,并能主導項目的進度,保證團隊產出。1)直接面對客戶,參與項目運作中數據處理,了解客戶軟硬件要求;
2)參與、協助數據收集和模型建構;
3)安裝、調試公司軟件在客戶端上線;
4)開發(fā)常用數據處理功能,幫助業(yè)務團隊提高工作效率;
5)與香港、新加坡和紐約團隊合作,為亞太地區(qū)技術服務提供支持。