日本一区二区无卡高清视频_gogo欧美裸体艺术大胆_又爽又黄无遮挡高潮视频网站_热99re久久精品天堂

【崗位職責(zé)】 1.參與爬蟲(chóng)項(xiàng)目的架構(gòu)設(shè)計(jì)、研發(fā)、編程工作，改進(jìn)和提升爬蟲(chóng)效率； 2.負(fù)責(zé)爬蟲(chóng)數(shù)據(jù)的分布式存儲(chǔ)設(shè)計(jì)及代碼實(shí)現(xiàn)； 3.負(fù)責(zé)網(wǎng)頁(yè)信息抽取、清洗、消重和結(jié)構(gòu)化處理等工作； 4.解決各類(lèi)反爬問(wèn)題，如字體加密、JS混淆、驗(yàn)證碼、APP抓包和逆向工程; 5.對(duì)爬蟲(chóng)數(shù)據(jù)進(jìn)行數(shù)據(jù)處理、分析及匹配。 【任職要求】 1.計(jì)算機(jī)相關(guān)專業(yè)，有三年以上 Python 開(kāi)發(fā)經(jīng)驗(yàn)，熟練 Python 語(yǔ)言； 2.熟練掌握selenium、html、js、css、xpath、正則表達(dá)式等數(shù)據(jù)采集與提取工具； 3.精通常見(jiàn)的反爬蟲(chóng)技術(shù)如字體加密、js混淆、滑塊驗(yàn)證、點(diǎn)選驗(yàn)證、app逆向等； 4.精通scrapy爬蟲(chóng)框架，對(duì)分布式爬蟲(chóng)、海量數(shù)據(jù)采集有深刻理解; 5.熟悉 Django 、Flask等web框架，以及自動(dòng)化開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先考慮； 6.能熟練使用Linux、Mongo、ES、Redis、kafka等技術(shù)優(yōu)先考慮； 7.有激情和責(zé)任心，積極主動(dòng)，具有良好的團(tuán)隊(duì)協(xié)作、對(duì)外溝通能力，有良好的自學(xué)能力。提供 Github 或者博客地址，有開(kāi)源項(xiàng)目貢獻(xiàn)者優(yōu)先考慮