崗位職責:
1、負責商業(yè)智能(BI)的大數(shù)據(jù)平臺和存儲平臺的設計和搭建工作,對接內(nèi)外部對大數(shù)據(jù)服務的需求;
2、負責建立數(shù)據(jù)模型,對數(shù)據(jù)進行采集、清洗、挖掘、優(yōu)化及統(tǒng)計;
3、負責數(shù)據(jù)基礎(chǔ)架構(gòu)、ETL系統(tǒng)、調(diào)度系統(tǒng)處理體系的升級和優(yōu)化,提升系統(tǒng)的穩(wěn)定性和效率;
任職要求:
1、大專以上學歷、有分布式系統(tǒng)、大數(shù)據(jù)相關(guān)工作經(jīng)驗;
2、擅長hadoop,了解相關(guān)技術(shù)(MapReduce,?Hive,?Spark,?Kafka,?Yarn,?Storm)、具備分布式數(shù)據(jù)存儲與計算平臺搭建/應用開發(fā)/運維?相關(guān)實踐經(jīng)驗;
3、精通或者熟悉數(shù)據(jù)庫設計,熟悉Oracle/MySQL/MySQL?集群等數(shù)據(jù)庫,熟悉NoSQL?者更佳;
4、了解數(shù)據(jù)倉庫開發(fā)流程,有數(shù)據(jù)倉庫(DW)/商業(yè)智能(BI)/數(shù)據(jù)統(tǒng)計/ETL?相關(guān)工作經(jīng)驗者優(yōu)先;
5、有日語基礎(chǔ)者優(yōu)先;