數(shù)據(jù)系統(tǒng)架構(gòu)師崗位職責(zé)
數(shù)據(jù)系統(tǒng)架構(gòu)師主要職責(zé):
1.負(fù)責(zé)數(shù)據(jù)平臺(tái)、數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)的規(guī)劃與設(shè)計(jì);
2.負(fù)責(zé)數(shù)據(jù)平臺(tái)的整體數(shù)據(jù)架構(gòu)設(shè)計(jì),完成從業(yè)務(wù)模型到數(shù)據(jù)模型的設(shè)計(jì)工作,熟悉業(yè)務(wù)模型分析及轉(zhuǎn)換,具備較強(qiáng)的業(yè)務(wù)理解和業(yè)務(wù)抽象能力,善于從復(fù)雜現(xiàn)象中抽象根本問(wèn)題,分析根本原因,并形成最合適的快速解決方案;
3.負(fù)責(zé)根據(jù)業(yè)務(wù)功能、業(yè)務(wù)模型,進(jìn)行數(shù)據(jù)庫(kù)建模設(shè)計(jì),具備大型企業(yè)級(jí)數(shù)據(jù)庫(kù)模型設(shè)計(jì)能力,對(duì)能源類系統(tǒng),元數(shù)據(jù)系統(tǒng)有非常深刻的認(rèn)識(shí)和理解,能解決能源類系統(tǒng)數(shù)據(jù)價(jià)值應(yīng)用的關(guān)鍵問(wèn)題。
4.完成各種面向業(yè)務(wù)目標(biāo)的數(shù)據(jù)分析模型的定義和應(yīng)用開發(fā),
5.負(fù)責(zé)數(shù)據(jù)平臺(tái)的數(shù)據(jù)提取、數(shù)據(jù)挖掘及數(shù)據(jù)分析,具有良好的商業(yè)敏感度和優(yōu)秀的數(shù)據(jù)分析技能,能夠解決復(fù)雜的算法問(wèn)題。
6.負(fù)責(zé)和各個(gè)業(yè)務(wù)系統(tǒng)之間的數(shù)據(jù)對(duì)接,把控客戶各業(yè)務(wù)部門的數(shù)據(jù)需求;
7.帶領(lǐng)團(tuán)隊(duì)成員一起完成數(shù)據(jù)應(yīng)用工作的流程、規(guī)范和方法的建立。
崗位要求:
經(jīng)驗(yàn)
1.8年以上IT行業(yè)工作經(jīng)驗(yàn),具有豐富的信息系統(tǒng)設(shè)計(jì)、實(shí)施經(jīng)驗(yàn);
2.具有5年以上企業(yè)級(jí)數(shù)據(jù)平臺(tái)、數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)經(jīng)驗(yàn);
3.豐富的數(shù)據(jù)架構(gòu)規(guī)劃、數(shù)據(jù)建模、數(shù)據(jù)庫(kù)設(shè)計(jì)以及程序設(shè)計(jì)、開發(fā)經(jīng)驗(yàn);
4.豐富的數(shù)據(jù)解決方案或數(shù)據(jù)架構(gòu)(數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集成、數(shù)據(jù)管理)構(gòu)建經(jīng)驗(yàn);
5.豐富的基于開源技術(shù)的提供大數(shù)據(jù)解決方案的經(jīng)驗(yàn);
6.熟悉常用的分析、統(tǒng)計(jì)、建模方法,熟悉數(shù)據(jù)倉(cāng)庫(kù)相關(guān)技術(shù),如ETL、報(bào)表開發(fā),熟悉分布式計(jì)算的設(shè)計(jì),了解在能源企業(yè)從數(shù)據(jù)化到?jīng)Q策分析過(guò)程中會(huì)遇到的各種問(wèn)題,并有過(guò)實(shí)戰(zhàn)經(jīng)驗(yàn)。
Skills&Competences:
技能和能力:
1.深入了解包括:抽象、SQL查詢路徑以及優(yōu)化路徑在內(nèi)的方法和技能;
2.熟悉hive、pig、python任意一種大數(shù)據(jù)處理語(yǔ)言;熟悉hadoop、sql、shell;
3.熟悉Oracle、SQLServer、DB2、MySQL等主流數(shù)據(jù)庫(kù)及數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)和應(yīng)用;
4.熟悉Hadoop/Spark/NoSQL數(shù)據(jù)庫(kù)等大數(shù)據(jù)技術(shù);
5.有數(shù)據(jù)治理、主數(shù)據(jù)管理、數(shù)據(jù)挖掘等工作經(jīng)驗(yàn)者優(yōu)先考慮;
6.具有較強(qiáng)的責(zé)任心、執(zhí)行力,有良好的溝通技巧和團(tuán)隊(duì)領(lǐng)導(dǎo)能力。
Education&ProfessionsCertifications:
教育背景和職業(yè)資質(zhì):
計(jì)算機(jī)、數(shù)據(jù)、統(tǒng)計(jì)相關(guān)專業(yè)本科以上學(xué)歷;主要職責(zé):
1.負(fù)責(zé)數(shù)據(jù)平臺(tái)、數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)的規(guī)劃與設(shè)計(jì);
2.負(fù)責(zé)數(shù)據(jù)平臺(tái)的整體數(shù)據(jù)架構(gòu)設(shè)計(jì),完成從業(yè)務(wù)模型到數(shù)據(jù)模型的設(shè)計(jì)工作,熟悉業(yè)務(wù)模型分析及轉(zhuǎn)換,具備較強(qiáng)的業(yè)務(wù)理解和業(yè)務(wù)抽象能力,善于從復(fù)雜現(xiàn)象中抽象根本問(wèn)題,分析根本原因,并形成最合適的快速解決方案;
3.負(fù)責(zé)根據(jù)業(yè)務(wù)功能、業(yè)務(wù)模型,進(jìn)行數(shù)據(jù)庫(kù)建模設(shè)計(jì),具備大型企業(yè)級(jí)數(shù)據(jù)庫(kù)模型設(shè)計(jì)能力,對(duì)能源類系統(tǒng),元數(shù)據(jù)系統(tǒng)有非常深刻的認(rèn)識(shí)和理解,能解決能源類系統(tǒng)數(shù)據(jù)價(jià)值應(yīng)用的關(guān)鍵問(wèn)題。
4.完成各種面向業(yè)務(wù)目標(biāo)的數(shù)據(jù)分析模型的定義和應(yīng)用開發(fā),
5.負(fù)責(zé)數(shù)據(jù)平臺(tái)的數(shù)據(jù)提取、數(shù)據(jù)挖掘及數(shù)據(jù)分析,具有良好的商業(yè)敏感度和優(yōu)秀的數(shù)據(jù)分析技能,能夠解決復(fù)雜的算法問(wèn)題。
6.負(fù)責(zé)和各個(gè)業(yè)務(wù)系統(tǒng)之間的數(shù)據(jù)對(duì)接,把控客戶各業(yè)務(wù)部門的數(shù)據(jù)需求;
7.帶領(lǐng)團(tuán)隊(duì)成員一起完成數(shù)據(jù)應(yīng)用工作的流程、規(guī)范和方法的建立。
崗位要求:
經(jīng)驗(yàn)
1.8年以上IT行業(yè)工作經(jīng)驗(yàn),具有豐富的信息系統(tǒng)設(shè)計(jì)、實(shí)施經(jīng)驗(yàn);
2.具有5年以上企業(yè)級(jí)數(shù)據(jù)平臺(tái)、數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)經(jīng)驗(yàn);
3.豐富的數(shù)據(jù)架構(gòu)規(guī)劃、數(shù)據(jù)建模、數(shù)據(jù)庫(kù)設(shè)計(jì)以及程序設(shè)計(jì)、開發(fā)經(jīng)驗(yàn);
4.豐富的數(shù)據(jù)解決方案或數(shù)據(jù)架構(gòu)(數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集成、數(shù)據(jù)管理)構(gòu)建經(jīng)驗(yàn);
5.豐富的基于開源技術(shù)的提供大數(shù)據(jù)解決方案的經(jīng)驗(yàn);
6.熟悉常用的分析、統(tǒng)計(jì)、建模方法,熟悉數(shù)據(jù)倉(cāng)庫(kù)相關(guān)技術(shù),如ETL、報(bào)表開發(fā),熟悉分布式計(jì)算的設(shè)計(jì),了解在能源企業(yè)從數(shù)據(jù)化到?jīng)Q策分析過(guò)程中會(huì)遇到的各種問(wèn)題,并有過(guò)實(shí)戰(zhàn)經(jīng)驗(yàn)。
Skills&Competences:
技能和能力:
1.深入了解包括:抽象、SQL查詢路徑以及優(yōu)化路徑在內(nèi)的方法和技能;
2.熟悉hive、pig、python任意一種大數(shù)據(jù)處理語(yǔ)言;熟悉hadoop、sql、shell;
3.熟悉Oracle、SQLServer、DB2、MySQL等主流數(shù)據(jù)庫(kù)及數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)和應(yīng)用;
4.熟悉Hadoop/Spark/NoSQL數(shù)據(jù)庫(kù)等大數(shù)據(jù)技術(shù);
5.有數(shù)據(jù)治理、主數(shù)據(jù)管理、數(shù)據(jù)挖掘等工作經(jīng)驗(yàn)者優(yōu)先考慮;
6.具有較強(qiáng)的責(zé)任心、執(zhí)行力,有良好的溝通技巧和團(tuán)隊(duì)領(lǐng)導(dǎo)能力。
Education&ProfessionsCertifications:
教育背景和職業(yè)資質(zhì):
計(jì)算機(jī)、數(shù)據(jù)、統(tǒng)計(jì)相關(guān)專業(yè)本科以上學(xué)歷;
篇2:數(shù)據(jù)架構(gòu)師崗位工作職責(zé)
1、深入理解MDM主數(shù)據(jù)管理思想和流程;
2、理解業(yè)務(wù)數(shù)據(jù)、主數(shù)據(jù)與元數(shù)據(jù)的區(qū)別與關(guān)系;
3、參與過(guò)數(shù)據(jù)模型的設(shè)計(jì)與開發(fā);
4、深入理解數(shù)據(jù)清洗,標(biāo)準(zhǔn)化,轉(zhuǎn)換,匹配,數(shù)據(jù)質(zhì)量、安全管理的原理和業(yè)務(wù)流程;
5、參與過(guò)數(shù)據(jù)ETL開發(fā)與設(shè)計(jì);
6、熟練運(yùn)用主流DBMS,nosql數(shù)據(jù)庫(kù)。
篇3:大數(shù)據(jù)系統(tǒng)架構(gòu)師崗位職責(zé)大數(shù)據(jù)系統(tǒng)架構(gòu)師職責(zé)任職要求
大數(shù)據(jù)系統(tǒng)架構(gòu)師崗位職責(zé)
職責(zé)描述:
1.負(fù)責(zé)客戶業(yè)務(wù)需求、數(shù)據(jù)分析需求的調(diào)研、收集與分析;
2.負(fù)責(zé)Kyligence大數(shù)據(jù)平臺(tái)整體架構(gòu)和數(shù)據(jù)架構(gòu)設(shè)計(jì),根據(jù)具體業(yè)務(wù)需求和產(chǎn)品對(duì)數(shù)據(jù)模型進(jìn)行統(tǒng)一分析和規(guī)劃;
3.負(fù)責(zé)技術(shù)設(shè)計(jì)及技術(shù)實(shí)現(xiàn)規(guī)范編制,指導(dǎo)開發(fā)團(tuán)隊(duì)進(jìn)行項(xiàng)目設(shè)計(jì)、項(xiàng)目實(shí)現(xiàn)及技術(shù)匯報(bào);
4.負(fù)責(zé)項(xiàng)目重難點(diǎn)模塊的功能設(shè)計(jì)和難點(diǎn)攻堅(jiān);
5.參與大數(shù)據(jù)平臺(tái)的應(yīng)用設(shè)計(jì)、開發(fā)、測(cè)試及優(yōu)化工作。
任職要求:
1.計(jì)算機(jī)相關(guān)專業(yè),本科及以上學(xué)歷;
2.有5年以上工作經(jīng)驗(yàn),3年以上數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)和大數(shù)據(jù)系統(tǒng)設(shè)計(jì)經(jīng)驗(yàn);
3.精通Hadoop、Hive、HBase原理及優(yōu)化,熟悉大數(shù)據(jù)生態(tài)技術(shù)圈,如Storm、Spark、Flume、Sqoop、Kafka、Zookeeper、ES等,有大規(guī)模集群架構(gòu)設(shè)計(jì)、開發(fā)及管理經(jīng)驗(yàn);
4.熟練使用SQL語(yǔ)言,掌握Oracle、DB2、GP、MySQL等至少兩種數(shù)據(jù)庫(kù)系統(tǒng)的使用,有較好的SQL性能調(diào)優(yōu)經(jīng)驗(yàn);
5.至少熟悉Java,Scala,Python,Shell等編程語(yǔ)言中的2種;
6.熟悉數(shù)據(jù)治理及應(yīng)用,元數(shù)據(jù)管理的設(shè)計(jì)與應(yīng)用;
7.熟悉數(shù)據(jù)倉(cāng)庫(kù)模型的設(shè)計(jì),分層設(shè)計(jì)原理,并結(jié)合大數(shù)據(jù)技術(shù)組建解決模型應(yīng)用的問(wèn)題;
8.優(yōu)秀的分析和解決問(wèn)題的能力,對(duì)挑戰(zhàn)性問(wèn)題充滿激情;
9.具備良好的文檔撰寫能力和技術(shù)團(tuán)隊(duì)管理能力;
10.具備良好的團(tuán)隊(duì)合作精神,較強(qiáng)的溝通能力,具備良好的技術(shù)領(lǐng)導(dǎo)能力;
11.有Hive數(shù)據(jù)倉(cāng)庫(kù)或者ApacheKylin的開發(fā)經(jīng)驗(yàn)者優(yōu)先考慮;