崗位職責(zé):
1.負(fù)責(zé)公司整個數(shù)據(jù)中臺的規(guī)劃、實(shí)施、演進(jìn)工作;能用大數(shù)據(jù)思維設(shè)計(jì)解決方案;
2.負(fù)責(zé)公司數(shù)據(jù)中臺(數(shù)據(jù)倉庫/數(shù)據(jù)集市)的設(shè)計(jì)和開發(fā)制定數(shù)據(jù)架構(gòu)規(guī)范,進(jìn)行核心代碼編寫,指導(dǎo)團(tuán)隊(duì)落地;
3.負(fù)責(zé)數(shù)據(jù)中臺項(xiàng)目實(shí)施指導(dǎo),精通ETL架構(gòu)設(shè)計(jì)、元數(shù)據(jù)、數(shù)據(jù)規(guī)范的建設(shè)和管理,梳理數(shù)據(jù)資產(chǎn),提高業(yè)務(wù)系統(tǒng)的數(shù)據(jù)質(zhì)量;
4.負(fù)責(zé)公司數(shù)據(jù)安全管理,建立數(shù)據(jù)安全規(guī)范,進(jìn)行數(shù)據(jù)安全檢查與審核;
5.研究數(shù)據(jù)模型和計(jì)算框架的創(chuàng)新與落地,包括:大規(guī)模數(shù)據(jù)實(shí)時化、數(shù)據(jù)模型規(guī)范化等方面參與制定并實(shí)踐團(tuán)隊(duì)的技術(shù)發(fā)展路線;
建立良好的公司內(nèi)外的業(yè)界技術(shù)影響力;參與培養(yǎng)未來數(shù)據(jù)人才;有效輔導(dǎo)團(tuán)隊(duì),提升數(shù)據(jù)研發(fā)能力。
任職資格:
1.本科以上學(xué)歷,5年以上開發(fā)經(jīng)驗(yàn),其中3年以上數(shù)據(jù)架構(gòu)或相關(guān)工作經(jīng)驗(yàn);
2.深刻了解Hadoop生態(tài)圈技術(shù)體系,對離線計(jì)算、內(nèi)存計(jì)算和流式計(jì)算均有深刻理解,如Hadoop、hive、Spark、Flink、Kafka、presto等,有開源二次開發(fā)經(jīng)驗(yàn)者優(yōu)先,有過大規(guī)模交易實(shí)時計(jì)算經(jīng)驗(yàn)者優(yōu)先;
3.精通實(shí)時數(shù)據(jù)倉庫設(shè)計(jì),深刻理解MR運(yùn)行原理和機(jī)制,能進(jìn)行任務(wù)執(zhí)行效率的優(yōu)化,熟悉開源數(shù)據(jù)交換工具如sqoop,streamset,kettle等;
4.熟悉elasticsearch、Lucene、Solr、Kylin、Phoenix、Alluxio等相關(guān)技術(shù);
5.性格積極樂觀,誠信,能自我驅(qū)動,有較強(qiáng)的語言表達(dá)能力;具備強(qiáng)烈的進(jìn)取心、求知欲及團(tuán)隊(duì)合作精神;具有良好的溝通、團(tuán)隊(duì)協(xié)作、計(jì)劃和創(chuàng)新的能力;
6、滿足以下一個或多個條件者優(yōu)先
a) 熟悉至少一種主流深度學(xué)習(xí)算法框架 包括但不限于Caffe Tensorflow Theano Keras等;
b) 熟悉機(jī)器學(xué)習(xí)的主流常用算法,包括但不限于R(caret)、python(Scikit-learn)、spark-ml等;
c) 熟悉hadoop和spark等大數(shù)據(jù)技術(shù)和處理框架;
d) 熟悉交通行業(yè)業(yè)務(wù)者優(yōu)先。
e) 熟悉數(shù)據(jù)挖掘和建模流程,有相關(guān)行業(yè)數(shù)據(jù)挖掘分析的經(jīng)驗(yàn)者優(yōu)先;