崗位職責(zé):
????1.負(fù)責(zé)日常功能開(kāi)發(fā),參與公司核心競(jìng)爭(zhēng)力產(chǎn)品的研發(fā);2.負(fù)責(zé)基于Hadoop/Hive/Spark技術(shù)的海量數(shù)據(jù)的處理、分析、統(tǒng)計(jì)工作;3.基于Spark/Hadoop框架的數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì),開(kāi)發(fā),維護(hù);4.根據(jù)需求使用Spark?Streaming和Spark?SQL進(jìn)行數(shù)據(jù)處理、查詢、統(tǒng)計(jì)等工作。?任職要求:1.本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè),五年以上工作經(jīng)驗(yàn),三年以上大數(shù)據(jù)編程經(jīng)驗(yàn),熟悉Hadoop/Hive/Spark生態(tài)系統(tǒng)組件的使用;2.熟悉Scala/Java語(yǔ)言;熟悉Spark調(diào)優(yōu),對(duì)Spark?On?YARN、Spark?StandAlone模式均有使用及優(yōu)化經(jīng)驗(yàn);3.有海量在線、離線數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)和開(kāi)發(fā)經(jīng)驗(yàn)。4.熟悉Apache?Flume、Kafka、Spark?Streaming其一優(yōu)先;5.抗壓能力強(qiáng)、團(tuán)隊(duì)意識(shí)強(qiáng),具備獨(dú)立發(fā)現(xiàn)問(wèn)題解決問(wèn)題的能力。