崗位職責(zé):1.?負責(zé)設(shè)計,開發(fā),管理大數(shù)據(jù)平臺。2.?負責(zé)基于Hadoop,Spark等技術(shù)實時離線對數(shù)據(jù)進行抽取、清洗、轉(zhuǎn)化。3.?負責(zé)基于Hbase,Hive框架處理各類業(yè)務(wù)統(tǒng)計,輸出報表。4.?負責(zé)基于Flume,Kafka平臺進行數(shù)據(jù)采集分發(fā)。任職要求:1、?計算機、統(tǒng)計學(xué)、數(shù)學(xué)或相關(guān)專業(yè)畢業(yè),本科以上學(xué)歷,五年以上工作經(jīng)驗,兩年以上大數(shù)據(jù)開發(fā)經(jīng)驗;2、?具有交通海量數(shù)據(jù)挖掘、分析相關(guān)項目實施的工作經(jīng)驗優(yōu)先;3、?熟悉大數(shù)據(jù)平臺Hadoop、Hive部署及調(diào)優(yōu),具備一定架構(gòu)能力;4、?熟悉Flume、Spark、Kafka、ES等主流大數(shù)據(jù)開源技術(shù)的原理,并有一定的使用經(jīng)驗;5、?對關(guān)系型數(shù)據(jù)庫能夠熟練操作,數(shù)據(jù)庫設(shè)計、管理與優(yōu)化,熟練MySQL主從調(diào)優(yōu),集群架構(gòu);6、?具備良好的邏輯分析能力、組織溝通能力,富有創(chuàng)新精神,充滿激情,樂于接受挑戰(zhàn)。7、?有較強的邏輯思維能力、責(zé)任心強、團隊協(xié)作意識強,良好的溝通能力與表達能力,能承擔(dān)工作壓力,主動性強,富有創(chuàng)新精神,充滿激情,樂于接受挑戰(zhàn);????????????????????????????8、?因公司項目需要,能接受適量出差。