上海
應屆畢業(yè)生
學歷不限
2026-01-10 03:48:29
1335人關注
職位描述
該職位還未進行加V認證，請仔細了解后再進行投遞！
【崗位職責】
1.參與爬蟲項目的架構設計、研發(fā)、編程工作，改進和提升爬蟲效率；
2.負責爬蟲數(shù)據(jù)的分布式存儲設計及代碼實現(xiàn)；
3.負責網(wǎng)頁信息抽取、清洗、消重和結構化處理等工作；
4.解決各類反爬問題，如字體加密、JS混淆、驗證碼、APP抓包和逆向工程;
5.對爬蟲數(shù)據(jù)進行數(shù)據(jù)處理、分析及匹配。
【任職要求】
1.計算機相關專業(yè)，有三年以上 Python 開發(fā)經(jīng)驗，熟練 Python 語言；
2.熟練掌握selenium、html、js、css、xpath、正則表達式等數(shù)據(jù)采集與提取工具；
3.精通常見的反爬蟲技術如字體加密、js混淆、滑塊驗證、點選驗證、app逆向等；
4.精通scrapy爬蟲框架，對分布式爬蟲、海量數(shù)據(jù)采集有深刻理解;
5.熟悉 Django 、Flask等web框架，以及自動化開發(fā)經(jīng)驗者優(yōu)先考慮；
6.能熟練使用Linux、Mongo、ES、Redis、kafka等技術優(yōu)先考慮；
7.有激情和責任心，積極主動，具有良好的團隊協(xié)作、對外溝通能力，有良好的自學能力。提供 Github 或者博客地址，有開源項目貢獻者優(yōu)先考慮
注：聯(lián)系我時，請說是在江蘇人才網(wǎng)上看到的。
工作地點
地址：上海浦東新區(qū)上海浦東新區(qū)浦江2162浦東南路2162號3樓C座
??
點擊查看地圖
詳細位置，可以參考上方地址信息
求職提示：用人單位發(fā)布虛假招聘信息，或以任何名義向求職者收取財物（如體檢費、置裝費、押金、服裝費、培訓費、身份證、畢業(yè)證等），均涉嫌違法，請求職者務必提高警惕。
