1、負(fù)責(zé)集團(tuán)基于大數(shù)據(jù)技術(shù)的數(shù)據(jù)平臺(tái)開(kāi)發(fā)、數(shù)倉(cāng)建設(shè)、數(shù)據(jù)治理、數(shù)據(jù)統(tǒng)計(jì)分析等開(kāi)發(fā)工作;
?2、負(fù)責(zé)數(shù)據(jù)挖掘領(lǐng)域的數(shù)據(jù)分析研究,與算法工程師協(xié)作共同負(fù)責(zé)數(shù)據(jù)挖掘算法的研究與實(shí)現(xiàn),特定場(chǎng)景的數(shù)據(jù)挖掘模型的需求分析、建模及實(shí)驗(yàn)優(yōu)化工作;
?3、研究前沿技術(shù),了解項(xiàng)目需求,制定解決方案,解決實(shí)際應(yīng)用場(chǎng)景中的業(yè)務(wù)問(wèn)題,優(yōu)化離線/實(shí)時(shí)大數(shù)據(jù)計(jì)算任務(wù)的性能。
??
?任職要求:
?1、本科及以上學(xué)歷,計(jì)算機(jī)、軟件技術(shù)、數(shù)據(jù)挖掘、統(tǒng)計(jì)學(xué)、應(yīng)用數(shù)據(jù)等相關(guān)專(zhuān)業(yè);
?2、至少5年以上大數(shù)據(jù)開(kāi)發(fā)/數(shù)據(jù)存儲(chǔ)/數(shù)據(jù)平臺(tái)/分析挖掘相關(guān)經(jīng)驗(yàn);
?3、熟悉Linux操作系統(tǒng),掌握Shell/Python/Perl至少一種腳本語(yǔ)言;
?4、理解主流大數(shù)據(jù)處理架構(gòu)和相關(guān)技術(shù),會(huì)使用Hadoop、Spark等平臺(tái),Hive?、Impala?、Azkaban?、Kafka、Sqoop、?Flume、Zookeeper相關(guān)組件和開(kāi)源系統(tǒng);
?5、熟悉SQL語(yǔ)言,包括MySQL、PostgreSQL、Oracle等關(guān)系型數(shù)據(jù)庫(kù);Redis?、Kafka、MongoDB、HBase等NOSQL?數(shù)據(jù)庫(kù);熟悉Neo4j、ArangoDB等圖數(shù)據(jù)庫(kù);了解數(shù)據(jù)倉(cāng)庫(kù)技術(shù),能夠使用常用的ETL工具;
?6、熟悉Lucene、ElasticSearch等?檢索技術(shù);