技能要求:
數(shù)據(jù)挖掘,數(shù)據(jù)分析
工作內(nèi)容:
負(fù)責(zé)基于Hadoop生態(tài)系統(tǒng)進(jìn)行大數(shù)據(jù)平臺(tái)建設(shè)
根據(jù)項(xiàng)目需求,能進(jìn)行大數(shù)據(jù)系統(tǒng)框架和核心模塊的詳細(xì)設(shè)計(jì)和開發(fā)
負(fù)責(zé)數(shù)據(jù)采集和存儲(chǔ)處理
負(fù)責(zé)系統(tǒng)性能改進(jìn)與調(diào)優(yōu)
任職條件:
三年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗(yàn),精通Java和相關(guān)設(shè)計(jì)框架;
熟悉大數(shù)據(jù)生態(tài)技術(shù),有Hadoop/Hive/HBase/ELK/Spark/Flink/Kafka/MongoDB等項(xiàng)目的實(shí)際開發(fā)、調(diào)優(yōu)、運(yùn)維經(jīng)驗(yàn);
熟悉各類數(shù)據(jù)采集、存儲(chǔ)和處理方法和工具,可高效進(jìn)行數(shù)據(jù)處理
了解數(shù)據(jù)倉庫和ETL相關(guān)知識(shí),有數(shù)倉搭建和使用經(jīng)驗(yàn)者優(yōu)先
有交通行業(yè)開發(fā)背景者優(yōu)先考慮