崗位職責(zé):1、設(shè)計(jì)和開發(fā)網(wǎng)絡(luò)爬蟲算法,從多平臺采集數(shù)據(jù)并整理入庫;2、維護(hù)爬蟲程序與數(shù)據(jù)接口,規(guī)避反爬措施,提升數(shù)據(jù)抓取的效率和質(zhì)量;3、獨(dú)立解決爬蟲開發(fā)和維護(hù)過程中的各類問題;4、配合團(tuán)隊(duì)完成其他相關(guān)工作任務(wù)。?任職要求:1、全日制統(tǒng)招本科以上學(xué)歷,1年以上的爬蟲程序設(shè)計(jì)與開發(fā)經(jīng)驗(yàn);2、具有良好的Python基礎(chǔ)和編碼風(fēng)格,熟悉正則表達(dá)式、有Python多線程、多進(jìn)程編程經(jīng)驗(yàn);3、能夠使用Scrapy、PySpider、?urllib、BS、Request等開發(fā)爬蟲算法,處理登錄、驗(yàn)證、cookie等;4、熟悉常用的數(shù)據(jù)庫SQL、MYSQL,了解MOngodb優(yōu)先;5、具有較強(qiáng)的學(xué)習(xí)能力、良好的溝通、團(tuán)隊(duì)協(xié)作和計(jì)劃能力,能夠獨(dú)立解決技術(shù)問題;????????????????????????????????????????????????6、有過APP爬取經(jīng)驗(yàn)的優(yōu)先。