崗位職責(zé):1、負(fù)責(zé)設(shè)計(jì)和開(kāi)發(fā)分布式網(wǎng)絡(luò)爬蟲(chóng)系統(tǒng),進(jìn)行多平臺(tái)信息的抓取和分析工作;2、對(duì)相關(guān)爬蟲(chóng)項(xiàng)目進(jìn)行深度封裝和優(yōu)化,以便能夠應(yīng)付不定時(shí)的網(wǎng)站變化;3、搭建數(shù)據(jù)分析和數(shù)據(jù)管理平臺(tái),以便進(jìn)行數(shù)據(jù)分析;任職要求:1、計(jì)算機(jī)、信息技術(shù)或相關(guān)專(zhuān)業(yè)專(zhuān)科或以上學(xué)歷;??2、精通Python語(yǔ)言開(kāi)發(fā),有Python項(xiàng)目開(kāi)發(fā)經(jīng)驗(yàn),能夠獨(dú)立分析解決問(wèn)題3、熟悉爬蟲(chóng)技術(shù),熟悉基礎(chǔ)的網(wǎng)絡(luò)通信協(xié)議,有Django框架1年開(kāi)發(fā)經(jīng)歷;4、熟悉SQL語(yǔ)言,并有實(shí)際應(yīng)用和開(kāi)發(fā)經(jīng)驗(yàn);?5、具有數(shù)據(jù)處理經(jīng)驗(yàn)的優(yōu)先;?6、熟悉各種Python的爬蟲(chóng)技術(shù)和框架,如:urllib\selenium\scrapy\pyspyder等7、熟悉各種網(wǎng)頁(yè)源代碼解析工具,如:正則\BeautifulSoup\xpath等