崗位職責(zé):
1、參與公司數(shù)據(jù)采集與分析項目工作;
2、參與數(shù)據(jù)采集與分析代碼編寫、單元測試和bug修復(fù)工作;
3、根據(jù)產(chǎn)品和項目情況,優(yōu)化及維護代碼;
4、根據(jù)產(chǎn)品開發(fā)規(guī)范,完成相關(guān)技術(shù)文檔編寫。
任職要求:
1、大學(xué)本科及以上學(xué)歷,計算機或相關(guān)專業(yè);
2、2-5年的爬蟲項目經(jīng)驗;
3、參與爬蟲項目的構(gòu)架設(shè)計、研發(fā)、編程工作、改進和提升爬蟲效率;
4、設(shè)計爬蟲策略和防屏蔽規(guī)則、提升網(wǎng)頁抓取和效率和質(zhì)量;
5、負責(zé)后臺爬蟲數(shù)據(jù)的分布式儲存設(shè)計及代碼實現(xiàn);
6、負責(zé)網(wǎng)頁采集任務(wù)的分析及采集方案設(shè)計;
7、負責(zé)分布式爬蟲策略持續(xù)優(yōu)化。
1、參與公司數(shù)據(jù)采集與分析項目工作;
2、參與數(shù)據(jù)采集與分析代碼編寫、單元測試和bug修復(fù)工作;
3、根據(jù)產(chǎn)品和項目情況,優(yōu)化及維護代碼;
4、根據(jù)產(chǎn)品開發(fā)規(guī)范,完成相關(guān)技術(shù)文檔編寫。
任職要求:
1、大學(xué)本科及以上學(xué)歷,計算機或相關(guān)專業(yè);
2、2-5年的爬蟲項目經(jīng)驗;
3、參與爬蟲項目的構(gòu)架設(shè)計、研發(fā)、編程工作、改進和提升爬蟲效率;
4、設(shè)計爬蟲策略和防屏蔽規(guī)則、提升網(wǎng)頁抓取和效率和質(zhì)量;
5、負責(zé)后臺爬蟲數(shù)據(jù)的分布式儲存設(shè)計及代碼實現(xiàn);
6、負責(zé)網(wǎng)頁采集任務(wù)的分析及采集方案設(shè)計;
7、負責(zé)分布式爬蟲策略持續(xù)優(yōu)化。
職位類別: Python開發(fā)工程師
舉報
爬蟲開發(fā)工程師職業(yè)大全:
溫馨提示
- 公司規(guī)模:50 - 99人
- 公司性質(zhì):民營企業(yè)
- 所屬行業(yè):房地產(chǎn)、建筑、路橋、監(jiān)理、造價、裝飾、安裝、鋼結(jié)構(gòu)、建筑消防、通信、物業(yè)等
- 所在地區(qū):廣東-深圳市
- 聯(lián)系人:趙小姐
- 手機:會員登錄后才可查看
- 郵箱:會員登錄后才可查看
- 郵政編碼:
工作地址
- 地址:廣東省深圳市龍華區(qū)龍華街道清華社區(qū)港之龍商務(wù)中心C座1008