026170-數(shù)據(jù)工程師(比價(jià)搜索)
12000-24000元
應(yīng)屆畢業(yè)生
本科



- 全勤獎(jiǎng)
- 節(jié)日福利
- 不加班
- 周末雙休
職位描述
該職位還未進(jìn)行加V認(rèn)證,請(qǐng)仔細(xì)了解后再進(jìn)行投遞!
工作職責(zé):
1、負(fù)責(zé)數(shù)據(jù)爬蟲系統(tǒng)的設(shè)計(jì)和開發(fā)工作,能應(yīng)對(duì)各種網(wǎng)站的反爬機(jī)制,順利爬取數(shù)據(jù);
2、負(fù)責(zé)數(shù)據(jù)爬取、解析、清洗、入庫(kù)等工作;
3、幫助團(tuán)隊(duì)解決各種爬蟲技術(shù)問題,提升海量數(shù)據(jù)系統(tǒng)的抓取效果與性能。
任職資格:
1、本科及以上學(xué)歷,熟練使用python,并掌握常用的信息抽取工具,如正則表達(dá)式、Xpath等;
2、熟悉JavaScript、html、css、并能夠通過調(diào)試網(wǎng)頁(yè)代碼搜索請(qǐng)求地址并進(jìn)行模擬;
3、熟悉常用反爬機(jī)制并能夠進(jìn)行破解;
4、熟悉常用的IP代理訪問方式;
5、熟悉多線程、網(wǎng)絡(luò)編程以及分布式爬蟲架構(gòu)開發(fā)場(chǎng)景;
6、了解大數(shù)據(jù)技術(shù)如hadoop、spark等。
工作地點(diǎn)
地址:深圳福田區(qū)深圳平安金融中心


職位發(fā)布者
HR
中國(guó)平安人壽保險(xiǎn)股份有限公司

-
保險(xiǎn)
-
200-499人
-
股份制企業(yè)
-
福田中心區(qū)福華路星河發(fā)展中心
相似職位
-
采購(gòu)內(nèi)勤文員 面議浦口區(qū) 應(yīng)屆畢業(yè)生 不限南京交韻汽車科技有限公司
-
市場(chǎng)廣培生 10000-15000元浦口區(qū) 應(yīng)屆畢業(yè)生 本科中國(guó)平安人壽保險(xiǎn)股份有限公司江蘇分公司
-
施工員 5000-8000元浦口區(qū) 應(yīng)屆畢業(yè)生 大專江蘇東道交通科技集團(tuán)有限公司
-
客戶開發(fā)專員 面議浦口區(qū) 應(yīng)屆畢業(yè)生 不限焦點(diǎn)教育科技有限公司
-
資深售前工程師/顧問(自控方向) 15000-25000元浦口區(qū) 應(yīng)屆畢業(yè)生 本科南京亞派科技股份有限公司
-
海外技術(shù)支持(科研服務(wù)) 12000-18000元浦口區(qū) 應(yīng)屆畢業(yè)生 碩士上海派森諾生物科技股份有限公司