職位描述：

工作職責(zé)：

1、負(fù)責(zé)視頻爬蟲(chóng)的核心技術(shù)研發(fā)

2、負(fù)責(zé)構(gòu)建和優(yōu)化推薦離線數(shù)據(jù)流，有機(jī)會(huì)參與推薦算法策略

3、基于算法挖掘和分析頭條作者、用戶每天產(chǎn)生的海量數(shù)據(jù)，輔助產(chǎn)品策略

任職要求：

1、具備強(qiáng)悍的編碼能力

2、有扎實(shí)的數(shù)據(jù)結(jié)構(gòu)和算法功底

3、工作認(rèn)真細(xì)致踏實(shí)，有較強(qiáng)的學(xué)習(xí)能力

4、熟悉linux開(kāi)發(fā)環(huán)境，熟悉C++和python語(yǔ)言的優(yōu)先

5、良好的團(tuán)隊(duì)合作精神,較強(qiáng)的溝通能力

篇2:抓取工程師視頻職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、負(fù)責(zé)視頻爬蟲(chóng)的核心技術(shù)研發(fā)

2、負(fù)責(zé)構(gòu)建和優(yōu)化推薦離線數(shù)據(jù)流，有機(jī)會(huì)參與推薦算法策略

3、基于算法挖掘和分析頭條作者、用戶每天產(chǎn)生的海量數(shù)據(jù)，輔助產(chǎn)品策略

任職要求：

1、具備強(qiáng)悍的編碼能力

2、有扎實(shí)的數(shù)據(jù)結(jié)構(gòu)和算法功底

3、工作認(rèn)真細(xì)致踏實(shí)，有較強(qiáng)的學(xué)習(xí)能力

4、熟悉linux開(kāi)發(fā)環(huán)境，熟悉C++和python語(yǔ)言的優(yōu)先

5、良好的團(tuán)隊(duì)合作精神,較強(qiáng)的溝通能力

篇3:數(shù)據(jù)抓取資深工程師職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、負(fù)責(zé)今日頭條、西瓜視頻、TopBuzz、BuzzVideo等產(chǎn)品的全球內(nèi)容接入，通過(guò)算法智能解析各語(yǔ)種頁(yè)面結(jié)構(gòu)，自適應(yīng)提取頁(yè)面關(guān)鍵信息

2、負(fù)責(zé)全網(wǎng)圖文、長(zhǎng)短視頻、SNS內(nèi)容監(jiān)控，對(duì)海量的站內(nèi)外發(fā)文、用戶關(guān)系分析挖掘；每日處理上億條數(shù)據(jù)，提供幾十億內(nèi)容在線服務(wù)

3、負(fù)責(zé)通用垂直抓取平臺(tái)建設(shè)，服務(wù)頭條、抖音等所有業(yè)務(wù)團(tuán)隊(duì)，快速解決各種不同的抓取訴求，提供數(shù)據(jù)和平臺(tái)支持

4、負(fù)責(zé)項(xiàng)目整體架構(gòu)設(shè)計(jì)與優(yōu)化，主導(dǎo)代碼開(kāi)發(fā)測(cè)試，并積極推動(dòng)上線；負(fù)責(zé)初、中級(jí)工程師的培養(yǎng)

任職要求：

1、具備強(qiáng)悍的編碼能力，有扎實(shí)的數(shù)據(jù)結(jié)構(gòu)和算法功底

2、精通Python、PHP、C++、Java、Golang中的至少一門語(yǔ)言

3、理解http、計(jì)算機(jī)網(wǎng)絡(luò)，熟悉HTML、DOM、XPath等

4、責(zé)任心強(qiáng)，積極主動(dòng)，有良好的溝通能力和團(tuán)隊(duì)合作能力

5、工作認(rèn)真細(xì)致踏實(shí)，較強(qiáng)的學(xué)習(xí)能力、分析解決問(wèn)題能力

6、有很好的產(chǎn)品意識(shí)，對(duì)業(yè)務(wù)流程有良好的抽象和總結(jié)能力