崗位職責(zé):1、負(fù)責(zé)公司大數(shù)據(jù)平臺相關(guān)產(chǎn)品研發(fā)、負(fù)責(zé)平臺數(shù)據(jù)分析,使用數(shù)據(jù)挖掘、大數(shù)據(jù)分析等技術(shù)手段提供大數(shù)據(jù)技術(shù)支持;2、根據(jù)業(yè)務(wù)需求系統(tǒng)分析,提出技術(shù)研究及可行性報告,技術(shù)選型;3、根據(jù)業(yè)務(wù)需求設(shè)計高擴展性、高性能、安全穩(wěn)定的系統(tǒng)架構(gòu)和應(yīng)用架構(gòu);4、對業(yè)界領(lǐng)先的技術(shù)和平臺進行研究、測試,并且能夠應(yīng)用在實際環(huán)境中;5、運用機器學(xué)習(xí)、文本挖掘等技術(shù),在大型分布式平臺上提取關(guān)鍵特征,建立數(shù)據(jù)模型;6、發(fā)現(xiàn)數(shù)據(jù)間潛在聯(lián)系,指導(dǎo)數(shù)據(jù)挖掘業(yè)務(wù)的發(fā)展。任職要求:1、1年以上大數(shù)據(jù)實際項目開發(fā)經(jīng)驗,3年左右及以上工作經(jīng)驗;2、扎實的數(shù)據(jù)分析基礎(chǔ),具備需求分析能力,以及較強的邏輯分析和獨立解決問題能力;3、掌握MPP技術(shù)數(shù)據(jù)存儲方式與編程思想及常用設(shè)計模式和相關(guān)工具;4、熟悉hadoop的原理及使用,有一定的運維調(diào)優(yōu)經(jīng)驗;5、扎實的和SQL語言功底,熟練使用Oracle、MyCat、Db2等數(shù)據(jù)庫,具海量數(shù)據(jù)處理及數(shù)據(jù)庫設(shè)計和優(yōu)化經(jīng)驗;6、熟悉Linux/Unix平臺上的Perl、python、shell編程,熟悉常用腳本語言;7、有SparkSQL,SparkStreaming?實際使用經(jīng)驗,并能在較復(fù)雜的場景中使用;8、有大數(shù)據(jù)可視化分析、數(shù)據(jù)挖掘、數(shù)據(jù)治理項目或產(chǎn)品開發(fā)經(jīng)驗優(yōu)先;9、具備良好的學(xué)習(xí)能力、分析能力和解決問題的能力;10、有較強的溝通和理解能力,有良好的團隊協(xié)作精神。