崗位職責:
1、負責基于Hadoop/Hbase的存儲平臺架構(gòu)設(shè)計和優(yōu)化;
2、負責整體提升Hadoop/Hbase集群的高可用性、高性能、高擴展特性;
3、根據(jù)業(yè)務(wù)需求,提出最優(yōu)的技術(shù)解決方案;分解詳細的開發(fā)任務(wù),能配合其他項目制定開發(fā)計劃、開發(fā)文檔、開發(fā)流程圖;
4、負責帶領(lǐng)項目及培訓團隊,指導技術(shù)團隊完成數(shù)據(jù)規(guī)則的定義、數(shù)據(jù)模型的建立、數(shù)據(jù)清洗、數(shù)據(jù)遷移等工作;
5、負責數(shù)據(jù)架構(gòu)的規(guī)劃,并制定實施標準和規(guī)范,確保得到有效的執(zhí)行,同時保障數(shù)據(jù)以及文檔的質(zhì)量達到預定的標準。
崗位要求:
1、 全日制本科及以上學歷,計算機、數(shù)學、統(tǒng)計學等相關(guān)專業(yè);
2、 5年以上數(shù)據(jù)挖掘工作經(jīng)驗,至少有1-2個大數(shù)據(jù)挖掘項目的成功案例;
3、 精通分布式計算原理,有海量數(shù)據(jù)處理和分布式算法調(diào)優(yōu)能力,包括Hadoop相關(guān)組件或?Spark;
4、 熟練掌握數(shù)據(jù)挖掘和機器學習基本算法,包括:回歸分析、決策樹、SVM、協(xié)同過濾、聚類、神經(jīng)網(wǎng)絡(luò)、深度學習等;
5、 精通數(shù)據(jù)挖掘相關(guān)工具,如:R、python、java、C/C++、matlab等;
6、 精通數(shù)據(jù)庫,如:MySQL或Oracle等,精通SQL語言;
7、 具備很強的自我驅(qū)動力和學習能力;
8、 邏輯思維能力強,具備較強的溝通能力,有團隊合作精神;
9、 有互聯(lián)網(wǎng)或車聯(lián)網(wǎng)行業(yè)經(jīng)驗優(yōu)先。