日本一区二区无卡高清视频_gogo欧美裸体艺术大胆_又爽又黄无遮挡高潮视频网站_热99re久久精品天堂

崗位職責(zé)：
1.參與爬蟲項目的架構(gòu)設(shè)計、研發(fā)、編程工作，改進(jìn)和提升爬蟲效率；
2.負(fù)責(zé)爬蟲數(shù)據(jù)的分布式存儲設(shè)計及代碼實(shí)現(xiàn)；
3.負(fù)責(zé)網(wǎng)頁信息抽取、清洗、消重和結(jié)構(gòu)化處理等工作；
4.解決各類反爬問題，如字體加密、JS混淆、驗證碼、APP抓包和逆向工程;
5.對爬蟲數(shù)據(jù)進(jìn)行數(shù)據(jù)處理、分析及匹配。

任職要求：
1.計算機(jī)相關(guān)專業(yè)，有三年以上 Python 開發(fā)經(jīng)驗，熟練 Python 語言；
2.熟練掌握selenium、html、js、css、xpath、正則表達(dá)式等數(shù)據(jù)采集與提取工具；
3.精通常見的反爬蟲技術(shù)如字體加密、js混淆、滑塊驗證、點(diǎn)選驗證、app逆向等；
4.精通scrapy爬蟲框架，對分布式爬蟲、海量數(shù)據(jù)采集有深刻理解;
5.熟悉 Django 、Flask等web框架，以及自動化開發(fā)經(jīng)驗者優(yōu)先考慮；
6.能熟練使用Linux、Mongo、ES、Redis、kafka等技術(shù)優(yōu)先考慮；
7.有激情和責(zé)任心，積極主動，具有良好的團(tuán)隊協(xié)作、對外溝通能力，有良好的自學(xué)能力。提供 Github 或者博客地址，有開源項目貢獻(xiàn)者優(yōu)先考慮