大數(shù)據(jù)開發(fā)工程師(數(shù)倉方向)職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1.理解業(yè)務(wù)需求,負(fù)責(zé)數(shù)據(jù)倉庫建設(shè)、ETL流程的開發(fā)和優(yōu)化工作;
2.解決業(yè)務(wù)數(shù)據(jù)分析、數(shù)據(jù)報(bào)表、數(shù)據(jù)異常相關(guān)的技術(shù)問題;
3.Spark/YARN/HDFS的性能改進(jìn)、功能擴(kuò)展、故障分析;
任職資格:
1.計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2.精通Java編程語言,并熟悉Scala、Python、Shell等一門以上腳本語言;
3.熟悉Hadoop大數(shù)據(jù)平臺架構(gòu),熟悉Spark/SparkSQL/YARN開發(fā)調(diào)優(yōu)技術(shù),具有相關(guān)項(xiàng)目經(jīng)驗(yàn)
4.掌握數(shù)據(jù)倉庫(DW)/OLAP/商業(yè)智能(BI)/數(shù)據(jù)統(tǒng)計(jì)理論,熟悉Oracle/Mysql數(shù)據(jù)庫;
5.思路清晰,具備良好的溝通能力和理解能力,較強(qiáng)的學(xué)習(xí)能力以及快速解決問題的能力;
6.具有高度的責(zé)任感,工作認(rèn)真、踏實(shí)。
福利待遇:
1、薪酬:有競爭力的薪酬體系,我們不止跟你談理想,錢也必須談一談~
2、交通:無論天涯,免費(fèi)班車直達(dá)公司,驀然回首,地鐵就在公司不遠(yuǎn)處。。。
3、工作時(shí)間:5天7小時(shí)工作制,充足的休息讓你一整天元?dú)鉂M滿!
4、各種福利:五險(xiǎn)一金小case,節(jié)日禮物福利補(bǔ)貼說不完!
5、團(tuán)建活動(dòng):下午茶,團(tuán)隊(duì)活動(dòng),部門聚餐,經(jīng)費(fèi)充足不差錢,大公司就是這么壕!
6、發(fā)展平臺:想要升職加薪走向人生巔峰?上市公司晉升發(fā)展機(jī)會多多~
微信
篇2:大數(shù)據(jù)工程師崗位工作職責(zé)
簡介:大數(shù)據(jù)(bigdata),指無法在一定時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合,是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)。
大數(shù)據(jù)工程師職位描述(模板一)
崗位職責(zé):
1.負(fù)責(zé)數(shù)據(jù)分析、加工、清洗、處理程序的開發(fā);
2.從事海量數(shù)據(jù)分析、挖掘相關(guān)工作;
3.負(fù)責(zé)大數(shù)據(jù)相關(guān)平臺的搭建、開發(fā)、維護(hù)、優(yōu)化;
4.對業(yè)務(wù)部門的數(shù)據(jù)分析需求給予實(shí)現(xiàn)與支持;
5.對公司的“數(shù)據(jù)驅(qū)動(dòng)運(yùn)營”的業(yè)務(wù)目標(biāo)進(jìn)行大數(shù)據(jù)架構(gòu)方案實(shí)現(xiàn)。
任職要求:
1.計(jì)算機(jī)相關(guān)專業(yè),本科及以上學(xué)歷,3年以上Java開發(fā)工作經(jīng)驗(yàn),學(xué)習(xí)能力突出;
2.熟悉hadoop生態(tài)系統(tǒng)內(nèi)常見項(xiàng)目的使用(hdfs、hive、hbase、spark、zookeeper、yarn等),具有python、spark、MapReduce開發(fā)經(jīng)驗(yàn),有實(shí)際大數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)優(yōu)先;
3.熟練掌握Oracle、MySql等主流數(shù)據(jù)庫;
4.精通JAVA,熟悉基于J2EE的WEB架構(gòu)設(shè)計(jì),熟悉Web開發(fā)流程,有豐富的WebMVC(Struts/SpringMVC、Spring,Hibernate/Mybatis等)開發(fā)經(jīng)驗(yàn);
5.熟悉Linu*/Uni*系統(tǒng)環(huán)境下的操作;熟悉Tomcat等應(yīng)用服務(wù)器的配置和優(yōu)化;
6.具有良好的溝通能力、組織能力及團(tuán)隊(duì)協(xié)作精神,有較強(qiáng)的分析和解決問題的能力。
大數(shù)據(jù)工程師職位描述(模板二)
崗位職責(zé):
1.大數(shù)據(jù)平臺功能規(guī)劃、設(shè)計(jì);
2.大數(shù)據(jù)平臺的設(shè)計(jì)、研發(fā);
3.大數(shù)據(jù)平臺實(shí)施、數(shù)據(jù)接入。
任職要求:
1.統(tǒng)招本科及以上學(xué)歷,計(jì)算機(jī)科學(xué)、軟件工程、數(shù)學(xué)、統(tǒng)計(jì)學(xué)相關(guān)專業(yè)畢業(yè);
2.具有扎實(shí)的Java基礎(chǔ),精通SQL、mysql以及2年以上軟件開發(fā)經(jīng)驗(yàn);
3.熟悉HADOOP平臺架構(gòu),有hadooop、HBase、Hive、Spark、kafka使用經(jīng)驗(yàn);
4.熟練Python進(jìn)行數(shù)據(jù)處理,網(wǎng)頁爬取;
5.有非結(jié)構(gòu)化數(shù)據(jù)解析、識別經(jīng)驗(yàn)優(yōu)先。
大數(shù)據(jù)工程師職位描述(模板三)
崗位職責(zé):
1.負(fù)責(zé)數(shù)據(jù)倉庫建設(shè)、設(shè)計(jì)、優(yōu)化和落地;
2.負(fù)責(zé)數(shù)據(jù)ETL開發(fā)、數(shù)據(jù)平臺建設(shè)、設(shè)計(jì)并實(shí)現(xiàn)對BI分析、數(shù)據(jù)產(chǎn)品開發(fā)。
任職要求:
1.985院校計(jì)算機(jī)相關(guān)專業(yè)本科以上學(xué)歷;
2.有較扎實(shí)的數(shù)據(jù)倉庫理論基礎(chǔ),對數(shù)據(jù)模型建設(shè)、應(yīng)用層建設(shè)有比較豐富的經(jīng)驗(yàn);
3.有Hadoop、Hive、Spark、Impala等大數(shù)據(jù)技術(shù)使用經(jīng)驗(yàn)者優(yōu)先。
大數(shù)據(jù)工程師職位描述(模板四)
崗位職責(zé):
1.主要負(fù)責(zé)電信業(yè)務(wù)的大數(shù)據(jù)開發(fā)工作;
2.結(jié)合業(yè)務(wù)需求設(shè)計(jì)數(shù)據(jù)分析場景,并形成后臺實(shí)現(xiàn)方案,獨(dú)立完成業(yè)務(wù)數(shù)據(jù)建模,并將結(jié)果轉(zhuǎn)化為運(yùn)營指標(biāo);
3.對產(chǎn)品全生命周期跟進(jìn),協(xié)調(diào)各種資源保證產(chǎn)品順利發(fā)展。
任職要求:
1.計(jì)算機(jī)或者相關(guān)專業(yè)本科及以上學(xué)歷,3年及以上相關(guān)工作經(jīng)驗(yàn);
2.熟練掌握java開發(fā)語言,熟悉多線程和線程調(diào)優(yōu),如懂scala開發(fā)更佳;
3.熟悉Linu*服務(wù)器環(huán)境、熟悉shell;
4.熟悉分布式系統(tǒng)、集群管理、SOA架構(gòu)等相關(guān)技術(shù),熟悉hadooponyarn集群部署和工作原理,熟練掌握MR開發(fā),有大型集群開發(fā)運(yùn)維經(jīng)驗(yàn)更佳;
5.熟悉以下技術(shù)中3種及以上者優(yōu)先考慮:hive、hbase、impala、Ngin*、zookeeper、redis、kafka、storm、spark、es、爬蟲;
6.具有良好的溝通能力和團(tuán)隊(duì)精神,具有良好的抗壓能力。
大數(shù)據(jù)工程師職位描述(模板五)
崗位職責(zé):
1.負(fù)責(zé)大數(shù)據(jù)處理平臺應(yīng)用的開發(fā)工作;
2.利用Hadoopyarn/Storm/Spark進(jìn)行開發(fā)、存儲、分布式計(jì)算應(yīng)用的代碼實(shí)現(xiàn);
3.優(yōu)化Hadoopyarn/Storm/Spark參數(shù),實(shí)現(xiàn)系統(tǒng)調(diào)優(yōu),滿足行業(yè)應(yīng)用的實(shí)時(shí)大數(shù)據(jù)處理需求;
4.學(xué)習(xí)新技術(shù),提高整個(gè)平臺的計(jì)算能力和效率;
5.開發(fā)基于HIVE、Hbase、ES等數(shù)據(jù)處理方式的腳本程序。
任職要求:
1.3年以上Hadoop/Storm/Spark開發(fā)經(jīng)驗(yàn),對分布式、并行計(jì)算理論有深刻理解;
2.精通java/scala/python任一語言;
3.對Hadoop/Storm/Spark源碼有研究,有大數(shù)據(jù)平臺開發(fā)工作經(jīng)驗(yàn)者優(yōu)先;
4.有很好的技術(shù)敏感性,良好的學(xué)習(xí)能力和吃苦耐勞能力;
5.具有較好的溝通協(xié)調(diào)能力、團(tuán)隊(duì)合作能力、文檔編寫能力。
篇3:貴金屬大數(shù)據(jù)工程師崗位職責(zé)
大數(shù)據(jù)工程師工作職責(zé):
1.負(fù)責(zé)公司大數(shù)據(jù)平臺框架的研發(fā)設(shè)計(jì)工作。
2.通過對貴金屬業(yè)務(wù)規(guī)則的理解,完成對數(shù)據(jù)的分析和處理。
3.開發(fā)數(shù)據(jù)后臺,將數(shù)據(jù)分析結(jié)果呈現(xiàn)到前端。
任職要求:
1.全日制本科以上學(xué)歷,計(jì)算機(jī),數(shù)學(xué)或統(tǒng)計(jì)相關(guān)專業(yè)。
2.有數(shù)據(jù)分析,數(shù)據(jù)處理等相關(guān)領(lǐng)域的工作經(jīng)驗(yàn)。
3.有PB級別的文本數(shù)據(jù)的清洗和處理經(jīng)驗(yàn)。
4.熟悉常用的大數(shù)據(jù)技術(shù)。如:sparkstreaming,hbase,kafka等。
5.熟悉Java開發(fā)語言。