職位描述
該職位還未進(jìn)行加V認(rèn)證,請仔細(xì)了解后再進(jìn)行投遞!
崗位職責(zé):
1. 負(fù)責(zé)采集公開數(shù)據(jù),一些相關(guān)信息的提取,優(yōu)化爬蟲策略,進(jìn)行多平臺(tái)信息的抓取和分析
2. 設(shè)計(jì)爬蟲策略和防屏蔽規(guī)則,完成對復(fù)雜網(wǎng)站的信息抓取
3. 參與業(yè)務(wù)功能需求探討,數(shù)據(jù)分析處理落地,并提供后端接口
4.優(yōu)先考慮會(huì)逆向手段來突破一些反爬措施,包括但不限于cookie信息認(rèn)證,參數(shù)加密,響應(yīng)數(shù)據(jù)加密等等
任職資格:
1. 熟悉 web抓取原理及技術(shù),熟悉常用的爬蟲網(wǎng)絡(luò)框架及重要組件;
2. 熟悉 Python編程語言,熟練掌握 MySQL、Redis、MongoDB等數(shù)據(jù)庫的使用
3. 了解常見的反爬機(jī)制,能夠破解常見的反爬機(jī)制,有對常見的驗(yàn)證碼的逆向經(jīng)驗(yàn)
4. 了解抓包調(diào)試技巧,突破抓包驗(yàn)證
5. 具備優(yōu)秀的邏輯思維能力,對解決挑戰(zhàn)性問題充滿熱情,善于分析問題解決問題
工作地點(diǎn)
地址:福州鼓樓區(qū)福州-鼓樓區(qū)福州軟件園C區(qū)


職位發(fā)布者
程主管HR
福州安博榕信息科技有限公司

-
通信/電信/網(wǎng)絡(luò)設(shè)備/增值服務(wù)
-
200-499人
-
股份制企業(yè)
-
808
相似職位
-
包裝領(lǐng)班 面議浦口區(qū) 應(yīng)屆畢業(yè)生 不限南京健友生化制藥股份有限公司
-
藥物制劑研究員 面議浦口區(qū) 應(yīng)屆畢業(yè)生 不限江蘇威凱爾醫(yī)藥科技有限公司
-
人事經(jīng)理 8000元以上浦口區(qū) 應(yīng)屆畢業(yè)生 不限江蘇中研創(chuàng)星材料科技有限公司
-
[24屆]產(chǎn)品工程師 12000-14000元浦口區(qū) 應(yīng)屆畢業(yè)生 碩士臺(tái)積電(南京)有限公司
-
盾構(gòu)技術(shù)中心副主任,科研開發(fā)工程師 12000-17000元浦口區(qū) 應(yīng)屆畢業(yè)生 碩士中鐵十四局集團(tuán)大盾構(gòu)工程有限公司
-
施工員(帶C證) 面議浦口區(qū) 應(yīng)屆畢業(yè)生 不限江蘇東道交通科技集團(tuán)有限公司