崗位職責(zé):
1、參與公司數(shù)據(jù)采集與分析項(xiàng)目工作;
2、參與數(shù)據(jù)采集與分析代碼編寫(xiě)、單元測(cè)試和bug修復(fù)工作;
3、根據(jù)產(chǎn)品和項(xiàng)目情況,優(yōu)化及維護(hù)代碼;
4、根據(jù)產(chǎn)品開(kāi)發(fā)規(guī)范,完成相關(guān)技術(shù)文檔編寫(xiě)。
任職要求:
1、大學(xué)本科及以上學(xué)歷,計(jì)算機(jī)或相關(guān)專業(yè);
2、2-5年的爬蟲(chóng)項(xiàng)目經(jīng)驗(yàn);
3、參與爬蟲(chóng)項(xiàng)目的構(gòu)架設(shè)計(jì)、研發(fā)、編程工作、改進(jìn)和提升爬蟲(chóng)效率;
4、設(shè)計(jì)爬蟲(chóng)策略和防屏蔽規(guī)則、提升網(wǎng)頁(yè)抓取和效率和質(zhì)量;
5、負(fù)責(zé)后臺(tái)爬蟲(chóng)數(shù)據(jù)的分布式儲(chǔ)存設(shè)計(jì)及代碼實(shí)現(xiàn);
6、負(fù)責(zé)網(wǎng)頁(yè)采集任務(wù)的分析及采集方案設(shè)計(jì);
7、負(fù)責(zé)分布式爬蟲(chóng)策略持續(xù)優(yōu)化。
職位類別:
Python開(kāi)發(fā)工程師
舉報(bào)