崗位名稱：大數(shù)據(jù)開發(fā)工程師崗位職責(zé)：1、負(fù)責(zé)數(shù)據(jù)倉庫和大數(shù)據(jù)處理模塊的架構(gòu)設(shè)計和開發(fā)；2、負(fù)責(zé)基于Spark技術(shù)的分布式計算框架開發(fā)、處理、分析、統(tǒng)計、挖掘工作；3、負(fù)責(zé)業(yè)務(wù)需求的需求理解、數(shù)據(jù)開發(fā)，提供面向業(yè)務(wù)的數(shù)據(jù)服務(wù)；4、領(lǐng)導(dǎo)交代的其它事務(wù)。任職要求：1、計算機相關(guān)專業(yè)本科及以上學(xué)歷；2、三年以上工作經(jīng)驗，兩年以上大數(shù)據(jù)研發(fā)經(jīng)驗；3、至少熟悉Java、Python、Scala或Linux?Shell之中的兩種語言；4、熟悉常用的大數(shù)據(jù)分析框架，如hive、spark、flink、Impala等，并熟悉運行原理；5、熟悉hadoop集群及其周邊生態(tài)技術(shù)(YARN/Zookeeper/Flume/Kafka/RabbitMQ)，對其部署和配置要熟練；6、熟悉網(wǎng)頁抓取原理及技術(shù)，具有爬蟲開發(fā)經(jīng)驗者優(yōu)先；7、理解數(shù)據(jù)倉庫相關(guān)技術(shù)，具有數(shù)據(jù)倉庫理論和實踐經(jīng)驗者優(yōu)先；8、參與過大數(shù)據(jù)及BI項目的設(shè)計與開發(fā)者優(yōu)先。
