1、負責(zé)大數(shù)據(jù)平臺等產(chǎn)品的架構(gòu)建設(shè)、研發(fā)和持續(xù)優(yōu)化;
2、和業(yè)務(wù)團隊配合解決在業(yè)務(wù)發(fā)展中遇到的產(chǎn)品和平臺架構(gòu)問題;
3、具體領(lǐng)域包括但不限于推薦算法開發(fā)、分布式存儲、大規(guī)模分布式計算、實時計算、跨平臺資源調(diào)度、大規(guī)模分布式算法平臺等;
4、結(jié)合公司實際業(yè)務(wù)進行深度數(shù)據(jù)分析挖掘,為決策提供支持。
任職要求:
1、本科及以上學(xué)歷,熟練Hadoop、Spark、Storm等主流大數(shù)據(jù)平臺的核心框架,深入掌握如何編寫MapReduce的作業(yè)及作業(yè)流的管理完成對數(shù)據(jù)的計算,并能夠使用Hadoop提供的通用算法;
2、熟練掌握Hadoop整個生態(tài)系統(tǒng)的組件如:?Yarn,HBase、Hive、Pig等重要組件;
3、項目過程中,實現(xiàn)過海量文本數(shù)據(jù)的挖掘、分析項目優(yōu)先;
4、具備數(shù)字政府相關(guān)架構(gòu)設(shè)計的優(yōu)先;
????????????????????????????????????????
5、熟練掌握Oracle、MySql、Redis等主流數(shù)據(jù)庫,熟悉基于J2EE的WEB架構(gòu)設(shè)計。
此崗位工作地點:深圳或武漢