1)參與教育體系相關(guān)大數(shù)據(jù)產(chǎn)品的設(shè)計(jì)和研發(fā)工作,大數(shù)據(jù)平臺(tái)的架構(gòu)設(shè)計(jì)、技術(shù)選型、搭建、開(kāi)發(fā)、管理、監(jiān)控和性能調(diào)優(yōu);模塊包括但?不限于大數(shù)據(jù)采集、數(shù)據(jù)加工、清洗、ETL調(diào)度框架、存儲(chǔ)、查詢、機(jī)器學(xué)習(xí)框架;
2)支撐數(shù)據(jù)應(yīng)用、數(shù)據(jù)存儲(chǔ)、查詢引擎、實(shí)時(shí)計(jì)算、數(shù)據(jù)同步等模塊的核心部分代碼編寫(xiě);
3)研究大數(shù)據(jù)前沿技術(shù),提升系統(tǒng)的運(yùn)維效率;
技術(shù)要求:
1)三年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn),計(jì)算機(jī)或數(shù)學(xué)相關(guān)專業(yè),本科及以上學(xué)歷
2)精通java,scala,python中至少一門(mén)語(yǔ)言;
3)精通Hadoop、HBase、Hive、Spark、kafka、ES等大數(shù)據(jù)相關(guān)技術(shù),具有以上技術(shù)的大數(shù)據(jù)平臺(tái)項(xiàng)目開(kāi)發(fā)及實(shí)施經(jīng)驗(yàn)
4)能夠獨(dú)立構(gòu)建數(shù)據(jù)平臺(tái)的后端系統(tǒng)
5)熟悉相關(guān)的數(shù)據(jù)挖掘模型與分析方法;
6)具有海量數(shù)據(jù)處理、數(shù)據(jù)挖掘、數(shù)據(jù)分析相關(guān)項(xiàng)目的工作經(jīng)驗(yàn)者優(yōu)先
7)有較強(qiáng)的邏輯思維能力,良好的代碼書(shū)寫(xiě)規(guī)范
8)良好的溝通能力、業(yè)務(wù)需求分解能力,能夠和業(yè)務(wù)人員有效進(jìn)行需求及技術(shù)溝通交流