崗位職責(zé):
1.?負(fù)責(zé)維護(hù)管理現(xiàn)有hadoop集群,并優(yōu)化底層架構(gòu);
2.?負(fù)責(zé)hadoop平臺上的MapReduce、hive、hbase應(yīng)用維護(hù)與管理;
3.?編寫基礎(chǔ)、通用的MapReduce、hive、hbase數(shù)據(jù)處理組件;
4.?負(fù)責(zé)把hadoop分析結(jié)果導(dǎo)入到數(shù)據(jù)庫中,并為bi提供分析數(shù)據(jù);
5.?負(fù)責(zé)指導(dǎo)其他軟件工程師基于hadoop的MapReduce、hive、hbase應(yīng)用開發(fā)。
任職要求:
1.?大學(xué)本科及以上學(xué)歷,數(shù)學(xué)、計算機、統(tǒng)計學(xué)等相關(guān)專業(yè);
2.?有Hadoop、MapReduce項目經(jīng)驗者優(yōu)先,有傳統(tǒng)數(shù)據(jù)倉庫開發(fā)實踐經(jīng)驗者優(yōu)先;
3.?熟悉linux開發(fā)環(huán)境;熟練掌握python、shell、perl中的一種;熟練掌握java開發(fā);
4.?有hadoop集群部署、運維、開發(fā)經(jīng)驗;
5.?熟悉mapreduce、hive,hbase,(flume,kafka優(yōu)先考慮);
6.?有hadoop調(diào)優(yōu)、統(tǒng)計學(xué)知識的優(yōu)先考慮。