999视频在线免费观看,国产精品一二二区,亚洲国产香蕉视频,中文字幕有码在线视频,亚洲日本另类,中国三级黄色大片,成人中文字幕在线观看

崗位職責(zé)：

1、參與負(fù)責(zé)公司數(shù)據(jù)采集需求的實現(xiàn)。

2、優(yōu)化公司現(xiàn)有采集系統(tǒng)，不斷提升可維護(hù)性、智能性。

3、負(fù)責(zé)公司部分現(xiàn)有采集程序的維護(hù)。

任職要求：

1、本科及以上計算機相關(guān)專業(yè)背景，2年及以上數(shù)據(jù)爬取及大規(guī)模爬蟲開發(fā)相關(guān)工作經(jīng)驗。

2、熟練掌握J(rèn)ava、python語言。

3、熟悉scrapy，javascript，有過一定的實際使用經(jīng)驗。

4、熟悉中間件redis、mysql以及mongodb。

5、具有設(shè)計和開發(fā)分布式網(wǎng)絡(luò)爬蟲系統(tǒng)，進(jìn)行多平臺信息的抓取和分析的經(jīng)驗。

6、能設(shè)計爬蟲策略和防屏蔽規(guī)則，提升網(wǎng)頁和APP數(shù)據(jù)抓取的效率和質(zhì)量，有App反編譯經(jīng)驗者優(yōu)先；

7、能獨立解決實際開發(fā)過程碰到的各類問題，能參與制定反爬安全策略。