首頁 > 制度大全 > 大數(shù)據(jù)管理工程師職位描述與崗位職責任職要求

大數(shù)據(jù)管理工程師職位描述與崗位職責任職要求

2024-07-26 閱讀 8776

職位描述

職責描述

1、參與電子政務大數(shù)據(jù)規(guī)劃,制定大數(shù)據(jù)管理方案,包括管理目標、方法策略、溝通計劃等;

2、參與電子政務大數(shù)據(jù)相關管理辦法制定、管理流程制定、數(shù)據(jù)元標準制定;

3、參與業(yè)務需求梳理(涵蓋業(yè)務痛點、管理需要、監(jiān)管要求、重要報表等)、業(yè)務系統(tǒng)梳理、數(shù)據(jù)資源梳理、政務信息資源梳理;

4、參與制定大數(shù)據(jù)相關系統(tǒng)(元數(shù)據(jù)管理工具、數(shù)據(jù)標準管理工具和數(shù)據(jù)質(zhì)量管控平臺)的功能需求,滿足數(shù)據(jù)管理和數(shù)據(jù)質(zhì)量提升的要求;?

5、參與制定電子政務大數(shù)據(jù)管理實施方案;

6、參與大數(shù)據(jù)相關宣傳培訓工作和持續(xù)引導,包括大數(shù)據(jù)相關管理辦法、管理流程制定、數(shù)據(jù)元標準制定、數(shù)據(jù)質(zhì)量整改方案等;

7、參與大數(shù)據(jù)數(shù)據(jù)項目整體推動及跨部門之間的組織協(xié)調(diào)工作;

8、參與基于政務應用場景特征的大數(shù)據(jù)應用服務工作。

任職要求

1、信息管理與計算機科學類、電子政務類、管理類等專業(yè)

2、熟悉大數(shù)據(jù)治理方法,了解數(shù)據(jù)治理各要素,以及各要素之間的相互依賴關系

3、5年以上大數(shù)據(jù)項目管理經(jīng)驗(有電子政務項目經(jīng)驗優(yōu)先)

4、具備優(yōu)秀的EXCEL能力,能夠處理海量條目信息,滿足數(shù)據(jù)治理中間過程的文檔處理要求

5、具備良好的文檔規(guī)范性編撰能力

6、具備良好的學習能力、邏輯思維能力、溝通能力、團隊協(xié)作能力和執(zhí)行力

篇2:大數(shù)據(jù)工程師崗位工作職責

簡介:大數(shù)據(jù)(bigdata),指無法在一定時間范圍內(nèi)用常規(guī)軟件工具進行捕捉、管理和處理的數(shù)據(jù)集合,是需要新處理模式才能具有更強的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)。

大數(shù)據(jù)工程師職位描述(模板一)

崗位職責:

1.負責數(shù)據(jù)分析、加工、清洗、處理程序的開發(fā);

2.從事海量數(shù)據(jù)分析、挖掘相關工作;

3.負責大數(shù)據(jù)相關平臺的搭建、開發(fā)、維護、優(yōu)化;

4.對業(yè)務部門的數(shù)據(jù)分析需求給予實現(xiàn)與支持;

5.對公司的“數(shù)據(jù)驅(qū)動運營”的業(yè)務目標進行大數(shù)據(jù)架構(gòu)方案實現(xiàn)。

任職要求:

1.計算機相關專業(yè),本科及以上學歷,3年以上Java開發(fā)工作經(jīng)驗,學習能力突出;

2.熟悉hadoop生態(tài)系統(tǒng)內(nèi)常見項目的使用(hdfs、hive、hbase、spark、zookeeper、yarn等),具有python、spark、MapReduce開發(fā)經(jīng)驗,有實際大數(shù)據(jù)項目經(jīng)驗優(yōu)先;

3.熟練掌握Oracle、MySql等主流數(shù)據(jù)庫;

4.精通JAVA,熟悉基于J2EE的WEB架構(gòu)設計,熟悉Web開發(fā)流程,有豐富的WebMVC(Struts/SpringMVC、Spring,Hibernate/Mybatis等)開發(fā)經(jīng)驗;

5.熟悉Linu*/Uni*系統(tǒng)環(huán)境下的操作;熟悉Tomcat等應用服務器的配置和優(yōu)化;

6.具有良好的溝通能力、組織能力及團隊協(xié)作精神,有較強的分析和解決問題的能力。

大數(shù)據(jù)工程師職位描述(模板二)

崗位職責:

1.大數(shù)據(jù)平臺功能規(guī)劃、設計;

2.大數(shù)據(jù)平臺的設計、研發(fā);

3.大數(shù)據(jù)平臺實施、數(shù)據(jù)接入。

任職要求:

1.統(tǒng)招本科及以上學歷,計算機科學、軟件工程、數(shù)學、統(tǒng)計學相關專業(yè)畢業(yè);

2.具有扎實的Java基礎,精通SQL、mysql以及2年以上軟件開發(fā)經(jīng)驗;

3.熟悉HADOOP平臺架構(gòu),有hadooop、HBase、Hive、Spark、kafka使用經(jīng)驗;

4.熟練Python進行數(shù)據(jù)處理,網(wǎng)頁爬取;

5.有非結(jié)構(gòu)化數(shù)據(jù)解析、識別經(jīng)驗優(yōu)先。

大數(shù)據(jù)工程師職位描述(模板三)

崗位職責:

1.負責數(shù)據(jù)倉庫建設、設計、優(yōu)化和落地;

2.負責數(shù)據(jù)ETL開發(fā)、數(shù)據(jù)平臺建設、設計并實現(xiàn)對BI分析、數(shù)據(jù)產(chǎn)品開發(fā)。

任職要求:

1.985院校計算機相關專業(yè)本科以上學歷;

2.有較扎實的數(shù)據(jù)倉庫理論基礎,對數(shù)據(jù)模型建設、應用層建設有比較豐富的經(jīng)驗;

3.有Hadoop、Hive、Spark、Impala等大數(shù)據(jù)技術(shù)使用經(jīng)驗者優(yōu)先。

大數(shù)據(jù)工程師職位描述(模板四)

崗位職責:

1.主要負責電信業(yè)務的大數(shù)據(jù)開發(fā)工作;

2.結(jié)合業(yè)務需求設計數(shù)據(jù)分析場景,并形成后臺實現(xiàn)方案,獨立完成業(yè)務數(shù)據(jù)建模,并將結(jié)果轉(zhuǎn)化為運營指標;

3.對產(chǎn)品全生命周期跟進,協(xié)調(diào)各種資源保證產(chǎn)品順利發(fā)展。

任職要求:

1.計算機或者相關專業(yè)本科及以上學歷,3年及以上相關工作經(jīng)驗;

2.熟練掌握java開發(fā)語言,熟悉多線程和線程調(diào)優(yōu),如懂scala開發(fā)更佳;

3.熟悉Linu*服務器環(huán)境、熟悉shell;

4.熟悉分布式系統(tǒng)、集群管理、SOA架構(gòu)等相關技術(shù),熟悉hadooponyarn集群部署和工作原理,熟練掌握MR開發(fā),有大型集群開發(fā)運維經(jīng)驗更佳;

5.熟悉以下技術(shù)中3種及以上者優(yōu)先考慮:hive、hbase、impala、Ngin*、zookeeper、redis、kafka、storm、spark、es、爬蟲;

6.具有良好的溝通能力和團隊精神,具有良好的抗壓能力。

大數(shù)據(jù)工程師職位描述(模板五)

崗位職責:

1.負責大數(shù)據(jù)處理平臺應用的開發(fā)工作;

2.利用Hadoopyarn/Storm/Spark進行開發(fā)、存儲、分布式計算應用的代碼實現(xiàn);

3.優(yōu)化Hadoopyarn/Storm/Spark參數(shù),實現(xiàn)系統(tǒng)調(diào)優(yōu),滿足行業(yè)應用的實時大數(shù)據(jù)處理需求;

4.學習新技術(shù),提高整個平臺的計算能力和效率;

5.開發(fā)基于HIVE、Hbase、ES等數(shù)據(jù)處理方式的腳本程序。

任職要求:

1.3年以上Hadoop/Storm/Spark開發(fā)經(jīng)驗,對分布式、并行計算理論有深刻理解;

2.精通java/scala/python任一語言;

3.對Hadoop/Storm/Spark源碼有研究,有大數(shù)據(jù)平臺開發(fā)工作經(jīng)驗者優(yōu)先;

4.有很好的技術(shù)敏感性,良好的學習能力和吃苦耐勞能力;

5.具有較好的溝通協(xié)調(diào)能力、團隊合作能力、文檔編寫能力。

篇3:貴金屬大數(shù)據(jù)工程師崗位職責

大數(shù)據(jù)工程師工作職責:

1.負責公司大數(shù)據(jù)平臺框架的研發(fā)設計工作。

2.通過對貴金屬業(yè)務規(guī)則的理解,完成對數(shù)據(jù)的分析和處理。

3.開發(fā)數(shù)據(jù)后臺,將數(shù)據(jù)分析結(jié)果呈現(xiàn)到前端。

任職要求:

1.全日制本科以上學歷,計算機,數(shù)學或統(tǒng)計相關專業(yè)。

2.有數(shù)據(jù)分析,數(shù)據(jù)處理等相關領域的工作經(jīng)驗。

3.有PB級別的文本數(shù)據(jù)的清洗和處理經(jīng)驗。

4.熟悉常用的大數(shù)據(jù)技術(shù)。如:sparkstreaming,hbase,kafka等。

5.熟悉Java開發(fā)語言。

相關文章