崗位職責(zé)

1、 負(fù)責(zé)大數(shù)據(jù)應(yīng)用平臺(tái)底層框架的整體架構(gòu)設(shè)計(jì)
2、搭建分布式的海量數(shù)據(jù)處理平臺(tái)，提取關(guān)鍵特征，建立數(shù)據(jù)模型，提升數(shù)據(jù)質(zhì)量；
3、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目的開發(fā)、維護(hù)工作
4、負(fù)責(zé)大數(shù)據(jù)平臺(tái)各組件的性能優(yōu)化工作

崗位要求

1、熟悉Hadoop、Spark、ElasticSearch、Kafka等框架組件，深刻理解分布式數(shù)據(jù)處理技術(shù)原理
2、熟練掌握J(rèn)ava、Scala；具有Spark數(shù)據(jù)離線或?qū)崟r(shí)計(jì)算的相關(guān)經(jīng)驗(yàn)
3、熟悉Linux系統(tǒng)，了解Shell腳本語言
4、具有較強(qiáng)的學(xué)習(xí)能力，有團(tuán)隊(duì)觀念，能獨(dú)立解決問題
5、具有以下經(jīng)驗(yàn)者優(yōu)先：
1）有海量數(shù)據(jù)存儲(chǔ)及分析處理項(xiàng)目經(jīng)驗(yàn)者
2）具有數(shù)理統(tǒng)計(jì)、機(jī)器學(xué)習(xí)、自然語言處理背景知識(shí)及算法者