999视频在线免费观看,国产精品一二二区,亚洲国产香蕉视频,中文字幕有码在线视频,亚洲日本另类,中国三级黄色大片,成人中文字幕在线观看

崗位職責(zé)： 1.參與爬蟲項(xiàng)目的架構(gòu)設(shè)計(jì)、研發(fā)、編程工作，改進(jìn)和提升爬蟲效率； 2.負(fù)責(zé)爬蟲數(shù)據(jù)的分布式存儲(chǔ)設(shè)計(jì)及代碼實(shí)現(xiàn)； 3.負(fù)責(zé)網(wǎng)頁信息抽取、清洗、消重和結(jié)構(gòu)化處理等工作； 4.解決各類反爬問題，如字體加密、JS混淆、驗(yàn)證碼、APP抓包和逆向工程; 5.對(duì)爬蟲數(shù)據(jù)進(jìn)行數(shù)據(jù)處理、分析及匹配。 任職要求： 1.計(jì)算機(jī)相關(guān)專業(yè)，有三年以上 Python 開發(fā)經(jīng)驗(yàn)，熟練 Python 語言； 2.熟練掌握selenium、html、js、css、xpath、正則表達(dá)式等數(shù)據(jù)采集與提取工具； 3.精通常見的反爬蟲技術(shù)如字體加密、js混淆、滑塊驗(yàn)證、點(diǎn)選驗(yàn)證、app逆向等； 4.精通scrapy爬蟲框架，對(duì)分布式爬蟲、海量數(shù)據(jù)采集有深刻理解; 5.熟悉 Django 、Flask等web框架，以及自動(dòng)化開發(fā)經(jīng)驗(yàn)者優(yōu)先考慮； 6.能熟練使用Linux、Mongo、ES、Redis、kafka等技術(shù)優(yōu)先考慮； 7.有激情和責(zé)任心，積極主動(dòng)，具有良好的團(tuán)隊(duì)協(xié)作、對(duì)外溝通能力，有良好的自學(xué)能力。提供 Github 或者博客地址，有開源項(xiàng)目貢獻(xiàn)者優(yōu)先考慮