崗位職責(zé):
1、負(fù)責(zé)系統(tǒng)的實(shí)時(shí)數(shù)據(jù)處理架構(gòu)設(shè)計(jì)、核心代碼開發(fā)等任務(wù);
2、負(fù)責(zé)實(shí)時(shí)數(shù)據(jù)處理系統(tǒng)的架構(gòu)評審,代碼評審,上線評審;
3、根據(jù)項(xiàng)目要求編寫相關(guān)技術(shù)文檔;
4、參與軟件需求、設(shè)計(jì)、審核和評審;
5、參與大數(shù)據(jù)平臺(tái)的搭建,完成系統(tǒng)調(diào)試、集成與實(shí)施;
6、培訓(xùn)和指導(dǎo)初級和中級工程師;
7、完成領(lǐng)導(dǎo)交代的其他任務(wù);
任職資格:
1、本科及以上計(jì)算機(jī)、數(shù)學(xué)相關(guān)專業(yè)畢業(yè);
2、具有5年以上相關(guān)工作經(jīng)驗(yàn);
3、精通實(shí)時(shí)數(shù)據(jù)處理流程,掌握實(shí)時(shí)數(shù)據(jù)處理常用技術(shù)工具,包括Storm、SparkStreaming等
4、掌握常見數(shù)據(jù)流接入工具,包括Flume、kafka等;
5、熟練掌握基本的Linux操作系統(tǒng)和某種腳本語言編程(如Shell等);
6、掌握一種或以上實(shí)時(shí)處理語言,如JAVA、SCALA、PYTHON等;
7、有1年以上實(shí)際大規(guī)模實(shí)時(shí)數(shù)據(jù)處理經(jīng)驗(yàn);
8、熟悉大容量、高性能的數(shù)據(jù)庫系統(tǒng),如HBASE、REDIS等;