工作職責(zé)·
l?負(fù)責(zé)大數(shù)據(jù)平臺(tái)的性能調(diào)優(yōu),控制架構(gòu)質(zhì)量,解決項(xiàng)目技術(shù)難題;
l?對(duì)研發(fā)項(xiàng)目和任務(wù)需求進(jìn)行評(píng)估和方案設(shè)計(jì)、配合Leader完成開發(fā)工作。
l?實(shí)現(xiàn)大數(shù)據(jù)平臺(tái)開發(fā)、多業(yè)務(wù)系統(tǒng)數(shù)據(jù)接入、數(shù)據(jù)挖掘分析及數(shù)據(jù)可視化的架構(gòu)設(shè)計(jì)與能力,支持解決方案實(shí)施。
l?完成技術(shù)驗(yàn)證,核心技術(shù)攻關(guān),解決開發(fā)過程中技術(shù)難題。
l?研究大數(shù)據(jù)和算法前沿技術(shù),對(duì)大數(shù)據(jù)算法平臺(tái)迭代式進(jìn)行分析及優(yōu)化,不斷提升算法平臺(tái)的架構(gòu)、性能、數(shù)據(jù)處理,以及其上的算法開發(fā)的能力。
任職資格說明·
l?具有3年及以上大數(shù)據(jù)架構(gòu)設(shè)計(jì)和開發(fā)經(jīng)驗(yàn);溝通能力強(qiáng);本科及以上學(xué)歷。
l?熟悉整個(gè)大數(shù)據(jù)的完整處理流程,包括數(shù)據(jù)的采集、清洗、預(yù)處理、存儲(chǔ)、分析挖據(jù)、數(shù)據(jù)可視化;
l?熟悉Hadoop相關(guān)各種開源項(xiàng)目,掌握Hive、Spark、Streaming、Kafka、impala、kudu等數(shù)據(jù)處理核心組件;對(duì)HDFS、M/R、Yarn的原理有深入了解,掌握系統(tǒng)優(yōu)化方法。
l?熟悉Java/Python/Scala等一種或多種語言,熟悉Linux平臺(tái)。
l?具有銀行、金融領(lǐng)域相關(guān)大數(shù)據(jù)系統(tǒng)構(gòu)建經(jīng)驗(yàn)者優(yōu)先。