崗位職責:
1、負責大數(shù)據(jù)項目開發(fā),使用大數(shù)據(jù)組件進行開發(fā)、部署與代碼優(yōu)化;
2、設(shè)計與管理數(shù)據(jù)倉庫,并根據(jù)業(yè)務需求進行數(shù)據(jù)查詢分析與可視化;
3、理解業(yè)務流程,對關(guān)鍵商業(yè)指標進行計算,對業(yè)務數(shù)據(jù)進行探索分析;
4、使用機器學習算法進行數(shù)據(jù)建模,提升商家數(shù)據(jù)決策能力。
?
崗位要求:
1、本科及以上學歷,數(shù)理相關(guān)專業(yè),三年或以上數(shù)據(jù)開發(fā)經(jīng)驗;
2、熟練掌握Python語言開發(fā),熟悉Pandas,PySpark,Scikit-learn,Scipy,Statsmodels等多個數(shù)據(jù)分析庫;
3、熟練SQL語法和MySql等關(guān)系型數(shù)據(jù)庫使用,熟悉Redis等鍵值數(shù)據(jù)庫;
4、熟練使用多種大數(shù)據(jù)組件,包括但不限于Hive,HBase,Spark,ClickHouse,Kafka等;
5、了解數(shù)據(jù)倉庫建模理論、模型設(shè)計、ETL設(shè)計思路,具備OLAP查詢相關(guān)經(jīng)驗。
以下為加分項:
1、有機器學習算法項目(分類聚類、協(xié)同過濾、文本挖掘、時間序列預測等)經(jīng)驗,
???熟悉一種或多種機器學習工具(SparkML,Scikit-learn,TensorFlow,Pytorch)優(yōu)先;
2、有后端接口開發(fā)經(jīng)驗、對接口設(shè)計、GRPC通訊協(xié)議有一定理解;
3、有數(shù)據(jù)倉庫建模經(jīng)驗,對零售等業(yè)態(tài)數(shù)據(jù)倉庫有一定理解,或有電商BI背景優(yōu)先;
4、有推薦系統(tǒng)、用戶畫像、多維分析報表等開發(fā)經(jīng)驗優(yōu)先;
5、有Docker容器化部署,?CDH搭建與維護經(jīng)驗優(yōu)先。