大數據研發高級工程師lenovo聯想(北京)有限公司,lenovo,ThinkWorld俱樂部,中國數字醫療網,樂安全,聯想,聯想服務,聯想集團,聯想崗位職責:

1、基于海量數據進行數據挖掘、數據分析;

2、根據實際場景進行業務邏輯開發,優化離線/實時大數據計算任務的性能;

任職要求:

1.計算機、通信、信息安全或相關專業本科及以上學歷;

2.精通Java語言開發,熟悉Spring,springMVC,MyBatis等流行開源框架;

3.熟悉常用大數據開源組件,對Hadoop/Hive/Spark/HBase中的一項或多項有深入研究,至少1個以上大型成熟項目的經驗,2年以上的大數據產品開發經驗;

4.熟練使用linux和MySQL,具有數據庫設計及優化能力;

5.清晰的邏輯分析和表達能力,熱愛技術,樂于分享,對行業和技術的發展有自己的見解;

篇2:數據倉庫研發工程師崗位職責

搜狗金融-數據倉庫研發工程師-北京-02173(MJ001926)搜狗北京搜狗科技發展有限公司,北京搜狗科技,搜狗,搜狗科技,搜狗翻譯,搜狗詞典,搜狗崗位職責:

1、數據倉庫、數據集市的數據模型設計

2、數據倉庫ETL規則設計和開發

3、利用HQL進行數據清洗,根據應用場景建立數據集市。

4、數據倉庫數據導入,建表,日常任務跑批,日志監控。

5、數據倉庫需求調研和需求分析

任職條件:

1、熟悉python,熟練使用shell編程解決數據清洗;

2、熟練使用Hadoop、Hive、Sqoop,熟練使用hiveSQL并有一定編寫map/reduce開發經驗;

3、熟悉數據倉庫建模理論,了解數據倉庫數據分層架構,精通3NF和多維數據模型設計;

4、具備大中型數據倉庫架構設計、模型設計、ETL設計的相關經驗;

5、具備海量數據處理、有性能調優經、金融、電商、電信、互聯網行業數據模型經驗者優先

這是一款定位于服務平臺互聯網用戶的金融產品,由搜狗公司內部孵化,深度挖掘搜狗在互聯網端的用戶規模優勢以及多年的大數據能力積累。在當下大熱的互聯網金融領域,搜狗將發揮用戶服務和智能算法優勢,并結合平臺的綜合運營實力。

篇3:數據研發工程師崗位職責

數據研發工程師投中信息上海投中信息咨詢股份有限公司,投中信息職責描述:

1.負責數據源調研、入庫、開發的全流程工作(數據采集、清洗、匯總、集成等),并保證數據質量;

2.有較強的自學能力,能夠根據需要學習相關業務和技術知識,并能靈活運用;

3.負責對公司平臺的數據進行整理、挖掘及分析工作;

4.基于公司現有產品,提出可擴展,高性能,高可用性設計方案;

任職要求:

1.熟練掌握Java編程語言,熟悉Python腳本語言,并靈活運用到實際工作中及解決技術問題;

2.熟悉Hadoop+Spark大數據處理工具和技術,有兩年以上的實際大數據處理經驗;

3.熟練掌握一至兩種開源ETL工具軟件;

4.熟悉常見機器學習算法(如邏輯回歸、SVM、神經網絡、決策樹、貝葉斯等);

5.對機器學習/深度學習有興趣,并具有一定的理解和研究,熟悉Tensorflow、Torch等常見框架;有實際項目開發經驗者優先;

6.善于分析和解決問題,富有想象力和學習能力,良好的團隊合作精神;

7.責任心強,工作踏實,團隊協作精神,具備快速解決問題的能力。