崗位職責:
1、負責OTT平臺聚合內容的采集工作,如媒資數(shù)據(jù)等;
2、參與線上SaaS平臺的運營工作;
3、領導安排的其他工作。
崗位要求:
1、計算機相關專業(yè),2年以上相關工作經(jīng)驗優(yōu)先;
2、有爬蟲開發(fā)接口經(jīng)歷,掌握各種爬蟲技巧優(yōu)先,熟悉爬蟲抓取原理,熟悉反爬策略;
3、熟悉行為驗證碼識別、模擬登陸、數(shù)據(jù)清洗、去重、入庫等;
4、設計爬蟲策略和防屏蔽規(guī)則,提升網(wǎng)頁抓取的效率和質量;
5、能夠獨立解決實際開發(fā)過程中碰到的各類問題;
6、熟練掌握Python和Java、JavaScript語言基礎,熟悉Java開發(fā)架構優(yōu)先;
7、熟悉HTML、XPath、正則表達式、AJAX、HTTP協(xié)議等;
8、熟悉Scrapy、WebMagic、Flask、SpringBoot等框架;
9、熟悉關系型數(shù)據(jù)庫,非關系型數(shù)據(jù)庫、緩存數(shù)據(jù)庫(Redis/Memcached);
10、有良好的邏輯思維能力、溝通能力、學習能力、團隊合作精神。