職位描述：

職責(zé)描述：

1.負(fù)責(zé)公司應(yīng)用平臺(tái)及數(shù)據(jù)平臺(tái)的規(guī)劃、架構(gòu)設(shè)計(jì)；

2.針對(duì)特定業(yè)務(wù)場(chǎng)景需求，能快速提供技術(shù)解決方案；

3.帶領(lǐng)不少于5人的開(kāi)發(fā)團(tuán)隊(duì)，有效控制軟件開(kāi)發(fā)過(guò)程。

任職要求：

1.本科或以上學(xué)歷，計(jì)算機(jī)、通信、電子等IT相關(guān)專業(yè)，5年以上相關(guān)開(kāi)發(fā)經(jīng)驗(yàn)；

2.熟悉下列5種以上工具或技術(shù)：Linux、Docker、MongoDB、Redis、Nginx、MapReduce、Hbase、Kafka、Spark；

3.精通Java技術(shù)，可以使用Python語(yǔ)言；

4.具有較好的溝通協(xié)調(diào)能力、團(tuán)隊(duì)合作能力、文檔編寫(xiě)能力。

篇2:大數(shù)據(jù)工程師崗位工作職責(zé)

簡(jiǎn)介:大數(shù)據(jù)(bigdata),指無(wú)法在一定時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合,是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。

大數(shù)據(jù)工程師職位描述(模板一)

崗位職責(zé):

1.負(fù)責(zé)數(shù)據(jù)分析、加工、清洗、處理程序的開(kāi)發(fā);

2.從事海量數(shù)據(jù)分析、挖掘相關(guān)工作;

3.負(fù)責(zé)大數(shù)據(jù)相關(guān)平臺(tái)的搭建、開(kāi)發(fā)、維護(hù)、優(yōu)化;

4.對(duì)業(yè)務(wù)部門(mén)的數(shù)據(jù)分析需求給予實(shí)現(xiàn)與支持;

5.對(duì)公司的“數(shù)據(jù)驅(qū)動(dòng)運(yùn)營(yíng)”的業(yè)務(wù)目標(biāo)進(jìn)行大數(shù)據(jù)架構(gòu)方案實(shí)現(xiàn)。

任職要求:

1.計(jì)算機(jī)相關(guān)專業(yè),本科及以上學(xué)歷,3年以上Java開(kāi)發(fā)工作經(jīng)驗(yàn),學(xué)習(xí)能力突出;

2.熟悉hadoop生態(tài)系統(tǒng)內(nèi)常見(jiàn)項(xiàng)目的使用(hdfs、hive、hbase、spark、zookeeper、yarn等),具有python、spark、MapReduce開(kāi)發(fā)經(jīng)驗(yàn),有實(shí)際大數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)優(yōu)先;

3.熟練掌握Oracle、MySql等主流數(shù)據(jù)庫(kù);

4.精通JAVA,熟悉基于J2EE的WEB架構(gòu)設(shè)計(jì),熟悉Web開(kāi)發(fā)流程,有豐富的WebMVC(Struts/SpringMVC、Spring,Hibernate/Mybatis等)開(kāi)發(fā)經(jīng)驗(yàn);

5.熟悉Linu*/Uni*系統(tǒng)環(huán)境下的操作;熟悉Tomcat等應(yīng)用服務(wù)器的配置和優(yōu)化;

6.具有良好的溝通能力、組織能力及團(tuán)隊(duì)協(xié)作精神,有較強(qiáng)的分析和解決問(wèn)題的能力。

大數(shù)據(jù)工程師職位描述(模板二)

崗位職責(zé):

1.大數(shù)據(jù)平臺(tái)功能規(guī)劃、設(shè)計(jì);

2.大數(shù)據(jù)平臺(tái)的設(shè)計(jì)、研發(fā);

3.大數(shù)據(jù)平臺(tái)實(shí)施、數(shù)據(jù)接入。

任職要求:

1.統(tǒng)招本科及以上學(xué)歷,計(jì)算機(jī)科學(xué)、軟件工程、數(shù)學(xué)、統(tǒng)計(jì)學(xué)相關(guān)專業(yè)畢業(yè);

2.具有扎實(shí)的Java基礎(chǔ),精通SQL、mysql以及2年以上軟件開(kāi)發(fā)經(jīng)驗(yàn);

3.熟悉HADOOP平臺(tái)架構(gòu),有hadooop、HBase、Hive、Spark、kafka使用經(jīng)驗(yàn);

4.熟練Python進(jìn)行數(shù)據(jù)處理,網(wǎng)頁(yè)爬取;

5.有非結(jié)構(gòu)化數(shù)據(jù)解析、識(shí)別經(jīng)驗(yàn)優(yōu)先。

大數(shù)據(jù)工程師職位描述(模板三)

崗位職責(zé):

1.負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)、設(shè)計(jì)、優(yōu)化和落地;

2.負(fù)責(zé)數(shù)據(jù)ETL開(kāi)發(fā)、數(shù)據(jù)平臺(tái)建設(shè)、設(shè)計(jì)并實(shí)現(xiàn)對(duì)BI分析、數(shù)據(jù)產(chǎn)品開(kāi)發(fā)。

任職要求:

1.985院校計(jì)算機(jī)相關(guān)專業(yè)本科以上學(xué)歷;

2.有較扎實(shí)的數(shù)據(jù)倉(cāng)庫(kù)理論基礎(chǔ),對(duì)數(shù)據(jù)模型建設(shè)、應(yīng)用層建設(shè)有比較豐富的經(jīng)驗(yàn);

3.有Hadoop、Hive、Spark、Impala等大數(shù)據(jù)技術(shù)使用經(jīng)驗(yàn)者優(yōu)先。

大數(shù)據(jù)工程師職位描述(模板四)

崗位職責(zé):

1.主要負(fù)責(zé)電信業(yè)務(wù)的大數(shù)據(jù)開(kāi)發(fā)工作;

2.結(jié)合業(yè)務(wù)需求設(shè)計(jì)數(shù)據(jù)分析場(chǎng)景,并形成后臺(tái)實(shí)現(xiàn)方案,獨(dú)立完成業(yè)務(wù)數(shù)據(jù)建模,并將結(jié)果轉(zhuǎn)化為運(yùn)營(yíng)指標(biāo);

3.對(duì)產(chǎn)品全生命周期跟進(jìn),協(xié)調(diào)各種資源保證產(chǎn)品順利發(fā)展。

任職要求:

1.計(jì)算機(jī)或者相關(guān)專業(yè)本科及以上學(xué)歷,3年及以上相關(guān)工作經(jīng)驗(yàn);

2.熟練掌握java開(kāi)發(fā)語(yǔ)言,熟悉多線程和線程調(diào)優(yōu),如懂scala開(kāi)發(fā)更佳;

3.熟悉Linu*服務(wù)器環(huán)境、熟悉shell;

4.熟悉分布式系統(tǒng)、集群管理、SOA架構(gòu)等相關(guān)技術(shù),熟悉hadooponyarn集群部署和工作原理,熟練掌握MR開(kāi)發(fā),有大型集群開(kāi)發(fā)運(yùn)維經(jīng)驗(yàn)更佳;

5.熟悉以下技術(shù)中3種及以上者優(yōu)先考慮:hive、hbase、impala、Ngin*、zookeeper、redis、kafka、storm、spark、es、爬蟲(chóng);

6.具有良好的溝通能力和團(tuán)隊(duì)精神,具有良好的抗壓能力。

大數(shù)據(jù)工程師職位描述(模板五)

崗位職責(zé):

1.負(fù)責(zé)大數(shù)據(jù)處理平臺(tái)應(yīng)用的開(kāi)發(fā)工作;

2.利用Hadoopyarn/Storm/Spark進(jìn)行開(kāi)發(fā)、存儲(chǔ)、分布式計(jì)算應(yīng)用的代碼實(shí)現(xiàn);

3.優(yōu)化Hadoopyarn/Storm/Spark參數(shù),實(shí)現(xiàn)系統(tǒng)調(diào)優(yōu),滿足行業(yè)應(yīng)用的實(shí)時(shí)大數(shù)據(jù)處理需求;

4.學(xué)習(xí)新技術(shù),提高整個(gè)平臺(tái)的計(jì)算能力和效率;

5.開(kāi)發(fā)基于HIVE、Hbase、ES等數(shù)據(jù)處理方式的腳本程序。

任職要求:

1.3年以上Hadoop/Storm/Spark開(kāi)發(fā)經(jīng)驗(yàn),對(duì)分布式、并行計(jì)算理論有深刻理解;

2.精通java/scala/python任一語(yǔ)言;

3.對(duì)Hadoop/Storm/Spark源碼有研究,有大數(shù)據(jù)平臺(tái)開(kāi)發(fā)工作經(jīng)驗(yàn)者優(yōu)先;

4.有很好的技術(shù)敏感性,良好的學(xué)習(xí)能力和吃苦耐勞能力;

5.具有較好的溝通協(xié)調(diào)能力、團(tuán)隊(duì)合作能力、文檔編寫(xiě)能力。

篇3:貴金屬大數(shù)據(jù)工程師崗位職責(zé)

大數(shù)據(jù)工程師工作職責(zé):

1.負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)框架的研發(fā)設(shè)計(jì)工作。

2.通過(guò)對(duì)貴金屬業(yè)務(wù)規(guī)則的理解,完成對(duì)數(shù)據(jù)的分析和處理。

3.開(kāi)發(fā)數(shù)據(jù)后臺(tái),將數(shù)據(jù)分析結(jié)果呈現(xiàn)到前端。

任職要求:

1.全日制本科以上學(xué)歷,計(jì)算機(jī),數(shù)學(xué)或統(tǒng)計(jì)相關(guān)專業(yè)。

2.有數(shù)據(jù)分析,數(shù)據(jù)處理等相關(guān)領(lǐng)域的工作經(jīng)驗(yàn)。

3.有PB級(jí)別的文本數(shù)據(jù)的清洗和處理經(jīng)驗(yàn)。

4.熟悉常用的大數(shù)據(jù)技術(shù)。如:sparkstreaming,hbase,kafka等。

5.熟悉Java開(kāi)發(fā)語(yǔ)言。