數(shù)據(jù)處理工程師崗位職責(zé)
數(shù)據(jù)處理工程師全日制本科以上學(xué)歷(985/211),計(jì)算機(jī)科學(xué)與技術(shù)/軟件工程/數(shù)據(jù)相關(guān)專業(yè)
1、3年以上ETL開發(fā)經(jīng)驗(yàn),熟悉ETL開發(fā)規(guī)范和流程;
2、熟練使用DataStage、Informatica、Kettle、Hive、PLSQL、SPARK、MapReduce等工具中的一個(gè)或多個(gè),有開發(fā)、維護(hù)經(jīng)驗(yàn);
3、熟練編寫存儲過程,擅長SQL優(yōu)化;
4、熟悉Oracle、SQLServer等常用數(shù)據(jù)庫中的一個(gè)或多個(gè);
5、熟悉perl、shell腳本,Linux操作系統(tǒng);
6、有大型數(shù)據(jù)倉庫、BI相關(guān)項(xiàng)目的開發(fā)經(jīng)驗(yàn),精通架構(gòu)、建模者優(yōu)先;
7、熟練使用Erwin或PowerDesigner等進(jìn)行數(shù)據(jù)建模;
8.以下經(jīng)驗(yàn)優(yōu)先考慮:流式處理、日志處理、數(shù)據(jù)倉庫全日制本科以上學(xué)歷(985/211),計(jì)算機(jī)科學(xué)與技術(shù)/軟件工程/數(shù)據(jù)相關(guān)專業(yè)
1、3年以上ETL開發(fā)經(jīng)驗(yàn),熟悉ETL開發(fā)規(guī)范和流程;
2、熟練使用DataStage、Informatica、Kettle、Hive、PLSQL、SPARK、MapReduce等工具中的一個(gè)或多個(gè),有開發(fā)、維護(hù)經(jīng)驗(yàn);
3、熟練編寫存儲過程,擅長SQL優(yōu)化;
4、熟悉Oracle、SQLServer等常用數(shù)據(jù)庫中的一個(gè)或多個(gè);
5、熟悉perl、shell腳本,Linux操作系統(tǒng);
6、有大型數(shù)據(jù)倉庫、BI相關(guān)項(xiàng)目的開發(fā)經(jīng)驗(yàn),精通架構(gòu)、建模者優(yōu)先;
7、熟練使用Erwin或PowerDesigner等進(jìn)行數(shù)據(jù)建模;
8.以下經(jīng)驗(yàn)優(yōu)先考慮:流式處理、日志處理、數(shù)據(jù)倉庫
篇2:大數(shù)據(jù)處理工程師崗位職責(zé)
數(shù)據(jù)處理工程師(大數(shù)據(jù)項(xiàng)目)全成通信上海全成通信技術(shù)有限公司,全成通信,全成崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)平臺的日常維護(hù)和監(jiān)控
2、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目日報(bào)發(fā)布工作
3、負(fù)責(zé)日報(bào)數(shù)據(jù)的統(tǒng)計(jì)
4、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目日常數(shù)據(jù)的計(jì)算、分析和維護(hù)
任職要求:
1、一年以上相關(guān)工作經(jīng)驗(yàn),有電信行業(yè)經(jīng)驗(yàn)者優(yōu)先
2、熟悉Linux和Excel,熟練使用perl或者其他的腳本語言
3、具有OracleDLL/DML技術(shù)的使用經(jīng)驗(yàn)
4、具有良好的團(tuán)隊(duì)合作精神,有較強(qiáng)的學(xué)習(xí)能力、適應(yīng)能力、溝通能力
篇3:數(shù)據(jù)處理工程師崗位職責(zé)數(shù)據(jù)處理工程師職責(zé)任職要求
數(shù)據(jù)處理工程師崗位職責(zé)
數(shù)據(jù)處理工程師1)直接面對客戶,參與項(xiàng)目運(yùn)作中數(shù)據(jù)處理,了解客戶軟硬件要求;
2)參與、協(xié)助數(shù)據(jù)收集和模型建構(gòu);
3)安裝、調(diào)試公司軟件在客戶端上線;
4)開發(fā)常用數(shù)據(jù)處理功能,幫助業(yè)務(wù)團(tuán)隊(duì)提高工作效率;
5)與香港、新加坡和紐約團(tuán)隊(duì)合作,為亞太地區(qū)技術(shù)服務(wù)提供支持。·計(jì)算機(jī)或軟件相關(guān)專業(yè),本科及以上學(xué)歷;
·掌握兩門以及常見數(shù)據(jù)庫設(shè)計(jì)開發(fā)技術(shù),Mysql、Oracle、SqlServer、Hive等;
·具有參加過ETL開發(fā)項(xiàng)目,處理過(大)數(shù)據(jù)經(jīng)驗(yàn)優(yōu)先;
·工作細(xì)心、認(rèn)真負(fù)責(zé)且善于溝通,能快速理解業(yè)務(wù),對數(shù)據(jù)敏感,并能主導(dǎo)項(xiàng)目的進(jìn)度,保證團(tuán)隊(duì)產(chǎn)出。1)直接面對客戶,參與項(xiàng)目運(yùn)作中數(shù)據(jù)處理,了解客戶軟硬件要求;
2)參與、協(xié)助數(shù)據(jù)收集和模型建構(gòu);
3)安裝、調(diào)試公司軟件在客戶端上線;
4)開發(fā)常用數(shù)據(jù)處理功能,幫助業(yè)務(wù)團(tuán)隊(duì)提高工作效率;
5)與香港、新加坡和紐約團(tuán)隊(duì)合作,為亞太地區(qū)技術(shù)服務(wù)提供支持。