崗位職責(zé):
1.?負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)海量數(shù)據(jù)抽取、數(shù)據(jù)清洗、數(shù)據(jù)轉(zhuǎn)化等數(shù)據(jù)處理相關(guān)工作。包括ETL處理、數(shù)據(jù)調(diào)度監(jiān)控管理等。
2.?負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)或交付產(chǎn)品的數(shù)據(jù)規(guī)劃、開(kāi)發(fā)等工作,協(xié)助項(xiàng)目經(jīng)理或產(chǎn)品經(jīng)理完成相關(guān)數(shù)據(jù)處理,保證數(shù)據(jù)質(zhì)量。
3.?負(fù)責(zé)交付項(xiàng)目或研發(fā)數(shù)據(jù)產(chǎn)品的的數(shù)據(jù)模型設(shè)計(jì)、主題設(shè)計(jì)。
任職要求:
1.?本科及以上學(xué)歷,扎實(shí)的計(jì)算機(jī)專業(yè)基本功;
2.?3年以上數(shù)據(jù)倉(cāng)庫(kù)或大數(shù)據(jù)平臺(tái)實(shí)際數(shù)據(jù)處理經(jīng)驗(yàn);
3.?精通SQL
3.?熟悉Hase、Hive、Mysql、MongoDB等主流開(kāi)源數(shù)據(jù)庫(kù)。
4.?2年以上?Java?開(kāi)發(fā)經(jīng)驗(yàn),精通?Java?及面向?qū)ο笤O(shè)計(jì)開(kāi)發(fā);
5.?有大數(shù)據(jù)分布式計(jì)算系統(tǒng)設(shè)計(jì)和開(kāi)發(fā)經(jīng)驗(yàn),熟悉flume、?kafka、storm、spark?streaming、flink等開(kāi)源軟件的優(yōu)先考慮;
6.有互聯(lián)網(wǎng)行業(yè)數(shù)據(jù)采集、特別是企業(yè)風(fēng)險(xiǎn)類信息采集工作經(jīng)驗(yàn)者優(yōu)先;?
7.熟悉金融行業(yè)、互聯(lián)網(wǎng)行業(yè)工作經(jīng)驗(yàn)者優(yōu)先
8.有大數(shù)據(jù)處理算法、自然語(yǔ)言處理算法經(jīng)驗(yàn)優(yōu)先。
先決條件:
熟悉數(shù)據(jù)倉(cāng)庫(kù)、計(jì)算機(jī)相關(guān)專業(yè)5年以上工作經(jīng)驗(yàn)。