手機應用爬蟲工程師職位描述與崗位職責任職要求
職位描述:
*負責設計和開發分布式網絡爬蟲系統
*應用多種技術對各平臺進行數據采集
*設計數據采集策略,提升數據采集效率及質量
*與各行業分析師溝通,分析項目的可行性和討論抓取方案。
*兩年以上爬蟲開發相關經驗,本科及以上學歷,計算機相關專業為佳
*熟練掌握C#或Java開發語言為佳
*了解TCP/IP,HTTP及相關網絡協議
*熟悉JS/HTML/XPATH/Json/正則表達式等網頁相關技術
*熟悉分布式、多線程、緩存、消息隊列等互聯網技術
*熟悉手機應用的數據抓取,手機app開發經驗,加/脫殼經驗為佳
*良好的溝通技能,注重細節,抗壓性強
*良好的英語溝通技能為佳
篇2:網絡爬蟲崗位職責網絡爬蟲職責任職要求
網絡爬蟲崗位職責
工作內容:負責小程序搜索爬蟲系統的建設,包括小程序爬蟲策略的開發,分布式爬蟲系統的建設,數據分析及處理等,為小程序搜索提供豐富優質的基礎數據。
任職要求:
職位要求:
具備良好的計算機基礎,熟悉http協議,具備良好的基礎前端知識;
有過良好的高并發系統的后臺開發經驗;
具備一定的數據處理/分析經驗,熟悉hadoop、MapReduce、Spark等并行計算框架;
了解小程序的基礎框架,有實際開發經驗更優;
掌握C/C++、Python等一門或多門語言,有nodejs開發經驗更優;
如果您還具備以下技能,我們會優先考慮:
具備網絡爬蟲系統的開發經驗,有反爬蟲實踐經驗;
具備機器學習框架的開發使用經驗;
熟悉傳統搜索引擎的SEO規則。
篇3:手機應用爬蟲工程師職位描述與崗位職責任職要求
職位描述:
*負責設計和開發分布式網絡爬蟲系統
*應用多種技術對各平臺進行數據采集
*設計數據采集策略,提升數據采集效率及質量
*與各行業分析師溝通,分析項目的可行性和討論抓取方案。
*兩年以上爬蟲開發相關經驗,本科及以上學歷,計算機相關專業為佳
*熟練掌握C#或Java開發語言為佳
*了解TCP/IP,HTTP及相關網絡協議
*熟悉JS/HTML/XPATH/Json/正則表達式等網頁相關技術
*熟悉分布式、多線程、緩存、消息隊列等互聯網技術
*熟悉手機應用的數據抓取,手機app開發經驗,加/脫殼經驗為佳
*良好的溝通技能,注重細節,抗壓性強
*良好的英語溝通技能為佳