崗位職責(zé)
1、負(fù)責(zé)各類(lèi)電商平臺(tái)和app端數(shù)據(jù)抓取和平臺(tái)搭建;
2、負(fù)責(zé)對(duì)爬取數(shù)據(jù)進(jìn)行分類(lèi)和解析;
3、負(fù)責(zé)開(kāi)發(fā)高性能抓取架構(gòu),支持業(yè)務(wù)發(fā)展;
4、負(fù)責(zé)爬蟲(chóng)技術(shù)公關(guān)和平臺(tái)運(yùn)維相關(guān)工作;
任職要求
1、本科及以上學(xué)歷,三年及以上相關(guān)工作經(jīng)驗(yàn);
2、熟悉linux平臺(tái),熟練掌握java/shell/http協(xié)議,熟悉HTML、DOM、XPath,掌握git、maven、svn等工具和實(shí)踐,注重工程規(guī)范;
3、熟悉app端數(shù)據(jù)抓?。ㄓ心嫦?、脫殼等經(jīng)驗(yàn)),掌握Apktool、dex2jar、JD-GUI等工具,抓取過(guò)主流電商平臺(tái)和主流app軟件;
4、至少1年的分布式爬蟲(chóng)開(kāi)發(fā)經(jīng)驗(yàn),熟悉瀏覽器內(nèi)核,有cef、webkit開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先;
5、有安卓/iOS相關(guān)開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先;
6、性格開(kāi)朗、善于溝通,有良好的自我驅(qū)動(dòng)學(xué)習(xí)能力,注重效率和團(tuán)隊(duì)意識(shí),有團(tuán)隊(duì)管理經(jīng)驗(yàn)優(yōu)先;