崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉車和大數(shù)據(jù)平臺(tái)的設(shè)計(jì)與研發(fā);
2、負(fù)責(zé)數(shù)據(jù)可視化平臺(tái)開發(fā),進(jìn)行圖表、數(shù)據(jù)透視表及分析報(bào)告的開發(fā);
3、負(fù)責(zé)Hadoop. Spark. HBase、 Hive、 Impala等大數(shù)據(jù)集群的部署及性能優(yōu)化,進(jìn)行分布式多結(jié)點(diǎn)群集系統(tǒng)建設(shè)和優(yōu)化工作;
4、負(fù)責(zé)數(shù)據(jù)挖掘算法的設(shè)計(jì)及對(duì)海量數(shù)據(jù)進(jìn)行挖掘分析;
5、參與業(yè)務(wù)數(shù)據(jù)、生產(chǎn)日志的抽取、轉(zhuǎn)儲(chǔ)、檢索等相關(guān)工作;
6、根據(jù)大數(shù)據(jù)前沿技術(shù)的發(fā)展,將合適的技術(shù)方案適時(shí)引入業(yè)務(wù)場(chǎng)景;
任職資格:
1、全日制本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè);
2、2年及以上大數(shù)據(jù)開發(fā)經(jīng)驗(yàn);
3、熟悉Hadoop、Spark或storm等分布式系統(tǒng)的工作原理,具備較強(qiáng)的架構(gòu)、性能優(yōu)化能力;
4、熟練掌握MySQL、Oracle等數(shù)據(jù)庫技術(shù);
5、熟練掌握Linux操作系統(tǒng),了解shell等腳本編程;
6、熟悉Java, Python, SQL, Hive, 等開發(fā)語言,有使用Matlab, 引入算法、模型等,進(jìn)行數(shù)據(jù)分析挖掘的經(jīng)驗(yàn)優(yōu)先;
7、具有良好的團(tuán)隊(duì)協(xié)作和溝通能力;