崗位職責:
1.負責公司整個數(shù)據(jù)中臺的規(guī)劃、實施、演進工作;能用大數(shù)據(jù)思維設計解決方案;
2.負責公司數(shù)據(jù)中臺(數(shù)據(jù)倉庫/數(shù)據(jù)集市)的設計和開發(fā)制定數(shù)據(jù)架構規(guī)范,進行核心代碼編寫,指導團隊落地;
3.負責數(shù)據(jù)中臺項目實施指導,精通ETL架構設計、元數(shù)據(jù)、數(shù)據(jù)規(guī)范的建設和管理,梳理數(shù)據(jù)資產(chǎn),提高業(yè)務系統(tǒng)的數(shù)據(jù)質量;
4.負責公司數(shù)據(jù)安全管理,建立數(shù)據(jù)安全規(guī)范,進行數(shù)據(jù)安全檢查與審核;
5.研究數(shù)據(jù)模型和計算框架的創(chuàng)新與落地,包括:大規(guī)模數(shù)據(jù)實時化、數(shù)據(jù)模型規(guī)范化等方面參與制定并實踐團隊的技術發(fā)展路線;
建立良好的公司內外的業(yè)界技術影響力;參與培養(yǎng)未來數(shù)據(jù)人才;有效輔導團隊,提升數(shù)據(jù)研發(fā)能力。
任職資格:
1.本科以上學歷,5年以上開發(fā)經(jīng)驗,其中3年以上數(shù)據(jù)架構或相關工作經(jīng)驗;
2.深刻了解Hadoop生態(tài)圈技術體系,對離線計算、內存計算和流式計算均有深刻理解,如Hadoop、hive、Spark、Flink、Kafka、presto等,有開源二次開發(fā)經(jīng)驗者優(yōu)先,有過大規(guī)模交易實時計算經(jīng)驗者優(yōu)先;
3.精通實時數(shù)據(jù)倉庫設計,深刻理解MR運行原理和機制,能進行任務執(zhí)行效率的優(yōu)化,熟悉開源數(shù)據(jù)交換工具如sqoop,streamset,kettle等;
4.熟悉elasticsearch、Lucene、Solr、Kylin、Phoenix、Alluxio等相關技術;
5.性格積極樂觀,誠信,能自我驅動,有較強的語言表達能力;具備強烈的進取心、求知欲及團隊合作精神;具有良好的溝通、團隊協(xié)作、計劃和創(chuàng)新的能力;
6、滿足以下一個或多個條件者優(yōu)先
a) 熟悉至少一種主流深度學習算法框架 包括但不限于Caffe Tensorflow Theano Keras等;
b) 熟悉機器學習的主流常用算法,包括但不限于R(caret)、python(Scikit-learn)、spark-ml等;
c) 熟悉hadoop和spark等大數(shù)據(jù)技術和處理框架;
d) 熟悉交通行業(yè)業(yè)務者優(yōu)先。
e) 熟悉數(shù)據(jù)挖掘和建模流程,有相關行業(yè)數(shù)據(jù)挖掘分析的經(jīng)驗者優(yōu)先;