崗位職責:
1、負責數(shù)據(jù)倉車和大數(shù)據(jù)平臺的設計與研發(fā);
2、負責數(shù)據(jù)可視化平臺開發(fā),進行圖表、數(shù)據(jù)透視表及分析報告的開發(fā);
3、負責Hadoop. Spark. HBase、 Hive、 Impala等大數(shù)據(jù)集群的部署及性能優(yōu)化,進行分布式多結點群集系統(tǒng)建設和優(yōu)化工作;
4、負責數(shù)據(jù)挖掘算法的設計及對海量數(shù)據(jù)進行挖掘分析;
5、參與業(yè)務數(shù)據(jù)、生產(chǎn)日志的抽取、轉儲、檢索等相關工作;
6、根據(jù)大數(shù)據(jù)前沿技術的發(fā)展,將合適的技術方案適時引入業(yè)務場景;
任職資格:
1、全日制本科及以上學歷,計算機相關專業(yè);
2、2年及以上大數(shù)據(jù)開發(fā)經(jīng)驗;
3、熟悉Hadoop、Spark或storm等分布式系統(tǒng)的工作原理,具備較強的架構、性能優(yōu)化能力;
4、熟練掌握MySQL、Oracle等數(shù)據(jù)庫技術;
5、熟練掌握Linux操作系統(tǒng),了解shell等腳本編程;
6、熟悉Java, Python, SQL, Hive, 等開發(fā)語言,有使用Matlab, 引入算法、模型等,進行數(shù)據(jù)分析挖掘的經(jīng)驗優(yōu)先;
7、具有良好的團隊協(xié)作和溝通能力;