數(shù)據(jù)系統(tǒng)架構(gòu)師崗位職責(zé)

崗位職責(zé):

1、參與大數(shù)據(jù)平臺架構(gòu)的規(guī)劃和設(shè)計

2、根據(jù)業(yè)務(wù)需求整合優(yōu)化數(shù)據(jù)架構(gòu),主動思考不斷優(yōu)化

3、解決大數(shù)據(jù)平臺建設(shè)中的遇到的問題

4、保證大數(shù)據(jù)平臺及相關(guān)數(shù)據(jù)產(chǎn)品的可靠性、穩(wěn)定性

5、關(guān)注開源技術(shù)動態(tài),推動平臺技術(shù)架構(gòu)持續(xù)更新

任職條件:

1、計算機(jī)或相關(guān)專業(yè)本科以上學(xué)歷/有大數(shù)據(jù)架構(gòu)認(rèn)證優(yōu)先;

2、5年或以上企業(yè)級應(yīng)用架構(gòu)相關(guān)工作經(jīng)驗;

3、3年以上大數(shù)據(jù)平臺產(chǎn)品或分布式系統(tǒng)設(shè)計經(jīng)驗;

4、具有發(fā)電行業(yè)或工業(yè)互聯(lián)網(wǎng)大數(shù)據(jù)采集經(jīng)驗的優(yōu)先;

5、精通Hadoop、Hive、Hbase原理,熟悉大數(shù)據(jù)生態(tài)技術(shù),如Storm、Spark、Flume、Kafka、Zookeeper等,有大規(guī)模集群架構(gòu)、開發(fā)及運(yùn)維經(jīng)驗;

6、具備源碼級問題解決和集群優(yōu)化改造能力者優(yōu)先;

7、優(yōu)秀的分析和解決問題的能力,對挑戰(zhàn)性問題充滿激情;

8、具備良好的團(tuán)隊合作精神,較強(qiáng)的溝通能力,具備良好的技術(shù)領(lǐng)導(dǎo)能力;

9、具備良好的文檔撰寫能力和技術(shù)團(tuán)隊管理能力。崗位職責(zé):

1、參與大數(shù)據(jù)平臺架構(gòu)的規(guī)劃和設(shè)計

2、根據(jù)業(yè)務(wù)需求整合優(yōu)化數(shù)據(jù)架構(gòu),主動思考不斷優(yōu)化

3、解決大數(shù)據(jù)平臺建設(shè)中的遇到的問題

4、保證大數(shù)據(jù)平臺及相關(guān)數(shù)據(jù)產(chǎn)品的可靠性、穩(wěn)定性

5、關(guān)注開源技術(shù)動態(tài),推動平臺技術(shù)架構(gòu)持續(xù)更新

任職條件:

1、計算機(jī)或相關(guān)專業(yè)本科以上學(xué)歷/有大數(shù)據(jù)架構(gòu)認(rèn)證優(yōu)先;

2、5年或以上企業(yè)級應(yīng)用架構(gòu)相關(guān)工作經(jīng)驗;

3、3年以上大數(shù)據(jù)平臺產(chǎn)品或分布式系統(tǒng)設(shè)計經(jīng)驗;

4、具有發(fā)電行業(yè)或工業(yè)互聯(lián)網(wǎng)大數(shù)據(jù)采集經(jīng)驗的優(yōu)先;

5、精通Hadoop、Hive、Hbase原理,熟悉大數(shù)據(jù)生態(tài)技術(shù),如Storm、Spark、Flume、Kafka、Zookeeper等,有大規(guī)模集群架構(gòu)、開發(fā)及運(yùn)維經(jīng)驗;

6、具備源碼級問題解決和集群優(yōu)化改造能力者優(yōu)先;

7、優(yōu)秀的分析和解決問題的能力,對挑戰(zhàn)性問題充滿激情;

8、具備良好的團(tuán)隊合作精神,較強(qiáng)的溝通能力,具備良好的技術(shù)領(lǐng)導(dǎo)能力;

9、具備良好的文檔撰寫能力和技術(shù)團(tuán)隊管理能力。

篇2:數(shù)據(jù)架構(gòu)師崗位工作職責(zé)

1、深入理解MDM主數(shù)據(jù)管理思想和流程;

2、理解業(yè)務(wù)數(shù)據(jù)、主數(shù)據(jù)與元數(shù)據(jù)的區(qū)別與關(guān)系;

3、參與過數(shù)據(jù)模型的設(shè)計與開發(fā);

4、深入理解數(shù)據(jù)清洗,標(biāo)準(zhǔn)化,轉(zhuǎn)換,匹配,數(shù)據(jù)質(zhì)量、安全管理的原理和業(yè)務(wù)流程;

5、參與過數(shù)據(jù)ETL開發(fā)與設(shè)計;

6、熟練運(yùn)用主流DBMS,nosql數(shù)據(jù)庫。

篇3:大數(shù)據(jù)系統(tǒng)架構(gòu)師崗位職責(zé)大數(shù)據(jù)系統(tǒng)架構(gòu)師職責(zé)任職要求

大數(shù)據(jù)系統(tǒng)架構(gòu)師崗位職責(zé)

職責(zé)描述:

1.負(fù)責(zé)客戶業(yè)務(wù)需求、數(shù)據(jù)分析需求的調(diào)研、收集與分析;

2.負(fù)責(zé)Kyligence大數(shù)據(jù)平臺整體架構(gòu)和數(shù)據(jù)架構(gòu)設(shè)計,根據(jù)具體業(yè)務(wù)需求和產(chǎn)品對數(shù)據(jù)模型進(jìn)行統(tǒng)一分析和規(guī)劃;

3.負(fù)責(zé)技術(shù)設(shè)計及技術(shù)實現(xiàn)規(guī)范編制,指導(dǎo)開發(fā)團(tuán)隊進(jìn)行項目設(shè)計、項目實現(xiàn)及技術(shù)匯報;

4.負(fù)責(zé)項目重難點模塊的功能設(shè)計和難點攻堅;

5.參與大數(shù)據(jù)平臺的應(yīng)用設(shè)計、開發(fā)、測試及優(yōu)化工作。

任職要求:

1.計算機(jī)相關(guān)專業(yè),本科及以上學(xué)歷;

2.有5年以上工作經(jīng)驗,3年以上數(shù)據(jù)倉庫架構(gòu)和大數(shù)據(jù)系統(tǒng)設(shè)計經(jīng)驗;

3.精通Hadoop、Hive、HBase原理及優(yōu)化,熟悉大數(shù)據(jù)生態(tài)技術(shù)圈,如Storm、Spark、Flume、Sqoop、Kafka、Zookeeper、ES等,有大規(guī)模集群架構(gòu)設(shè)計、開發(fā)及管理經(jīng)驗;

4.熟練使用SQL語言,掌握Oracle、DB2、GP、MySQL等至少兩種數(shù)據(jù)庫系統(tǒng)的使用,有較好的SQL性能調(diào)優(yōu)經(jīng)驗;

5.至少熟悉Java,Scala,Python,Shell等編程語言中的2種;

6.熟悉數(shù)據(jù)治理及應(yīng)用,元數(shù)據(jù)管理的設(shè)計與應(yīng)用;

7.熟悉數(shù)據(jù)倉庫模型的設(shè)計,分層設(shè)計原理,并結(jié)合大數(shù)據(jù)技術(shù)組建解決模型應(yīng)用的問題;

8.優(yōu)秀的分析和解決問題的能力,對挑戰(zhàn)性問題充滿激情;

9.具備良好的文檔撰寫能力和技術(shù)團(tuán)隊管理能力;

10.具備良好的團(tuán)隊合作精神,較強(qiáng)的溝通能力,具備良好的技術(shù)領(lǐng)導(dǎo)能力;

11.有Hive數(shù)據(jù)倉庫或者ApacheKylin的開發(fā)經(jīng)驗者優(yōu)先考慮;