大數(shù)據(jù)工程師一直是互聯(lián)網(wǎng)行業(yè)委托獵頭招聘比較熱門的崗位，這個(gè)崗位人才非常多，但客戶個(gè)性化的要求，絕大多數(shù)人才又不太滿足，所以需要獵頭針對(duì)性去獵聘或從競(jìng)爭(zhēng)對(duì)手那里尋找。大數(shù)據(jù)工程師是干嘛的？高邦互聯(lián)網(wǎng)獵頭和大家分享一下。
崗位職責(zé):
1.負(fù)責(zé)爬蟲架構(gòu)設(shè)計(jì)和研發(fā)；
2.負(fù)責(zé)爬蟲核心搜索策略、算法、數(shù)據(jù)聚類、重組的設(shè)計(jì)與開發(fā)；
3.負(fù)責(zé)網(wǎng)絡(luò)爬蟲或數(shù)據(jù)采集軟件的優(yōu)化改進(jìn)以及采集規(guī)則編寫；
4.解決封賬號(hào)、封IP等采集難點(diǎn)攻克；
5.確保所負(fù)責(zé)的站點(diǎn)按周期采集及時(shí)，全面。
