職位描述:1、組建大數(shù)據(jù)營銷部團(tuán)隊并負(fù)責(zé)日常運(yùn)營管理,指導(dǎo)和培訓(xùn)工程師,不斷提升團(tuán)隊能力;2、負(fù)責(zé)公司的大數(shù)據(jù)平臺的總體架構(gòu)、設(shè)計和研發(fā)工作;3、帶領(lǐng)技術(shù)人員基于hadoop平臺進(jìn)行海量數(shù)據(jù)應(yīng)用系統(tǒng)開發(fā);;4、負(fù)責(zé)大數(shù)據(jù)集群的設(shè)計、搭建和維護(hù),建設(shè)高可用和穩(wěn)定性的方案;5、支持業(yè)務(wù)需求,深度參與業(yè)務(wù)系統(tǒng)的設(shè)計與實施,提供有前瞻性的技術(shù)解決方案;6、規(guī)劃平臺集群關(guān)鍵功能、架構(gòu)的設(shè)計,把控平臺的發(fā)展方向;7、負(fù)責(zé)架構(gòu)優(yōu)化及系統(tǒng)關(guān)鍵模塊的設(shè)計開發(fā),協(xié)助團(tuán)隊解決開發(fā)過程中的技術(shù)難題;8、負(fù)責(zé)結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的解析和清洗,海量數(shù)據(jù)查詢和報表展現(xiàn)。業(yè)務(wù)知識及技能要求:1.有組織管理經(jīng)驗者優(yōu)先;2.?熟悉hadoop相關(guān)各種開源項目,比如HDFS/Hive/Hbase等有實際應(yīng)用。(5年以上開發(fā)經(jīng)驗者優(yōu)先);3.兩年以上熟練編寫mapreduce代碼經(jīng)驗,有三年以上網(wǎng)絡(luò)日志分析、ETL經(jīng)驗。熟悉日志分析框架chukwa,flume,scribe者優(yōu)先;4.兩年以上海量數(shù)據(jù)存儲的安裝部署、優(yōu)化、二次開發(fā)經(jīng)驗,對大規(guī)模數(shù)據(jù)存儲、傳輸、處理等有豐富的經(jīng)驗;5.在數(shù)據(jù)挖掘、數(shù)據(jù)密集型處理、分布式計算、網(wǎng)格計算領(lǐng)域有深入理論基礎(chǔ);6.具有較強(qiáng)的文檔撰寫能力,較強(qiáng)的團(tuán)隊精神和合作精神,對工作有熱情,能承受壓力。