1.參與公司大數(shù)據(jù)方向的數(shù)據(jù)處理架構和模型設計,結合公司實際業(yè)務情況進行技術選型與迭代;
2.協(xié)助制定完成業(yè)務數(shù)據(jù)ETL流程及規(guī)范,并確保數(shù)據(jù)質量;
3.負責數(shù)據(jù)處理,協(xié)助團隊解決開發(fā)過程中的技術難題;
4.參與數(shù)據(jù)平臺產(chǎn)品的整體評估、設計、架構及關鍵模塊的研發(fā);
5.協(xié)助制定數(shù)據(jù)開發(fā)、主數(shù)據(jù)、數(shù)據(jù)質量、數(shù)據(jù)服務等規(guī)范;
6.完成上級領導臨時交辦任務。
任職要求:
1.統(tǒng)招全日制本科以上學歷。計算機、電子、通信、應用數(shù)學或其他相關專業(yè);
2.3年以上大數(shù)據(jù)開發(fā)的經(jīng)驗;
3.具有海量數(shù)據(jù)建模實踐經(jīng)驗,有DW/BI架構體系建設經(jīng)驗;
4.精通SQL和Mapreduce、Spark、flink處理方法;
5.對大數(shù)據(jù)體系有深入認識,熟悉Kafka、Hadoop、Hive、HBase、Spark、Storm、?greenplum、ES、Redis等大數(shù)據(jù)技術并能設計相關數(shù)據(jù)模型;
6.對Hbase、mongo應用場景及性能調優(yōu)熟悉;
7.很強的學習、分析和解決問題能力,可以迅速掌握業(yè)務邏輯并轉化為技術方案;
8.熟練Python,java等至少一門語言;
9.擁有獨立解決問題的能力。