崗位職責(zé):1、負(fù)責(zé)公司大數(shù)據(jù)基礎(chǔ)平臺的規(guī)劃、部署、管理和優(yōu)化,保障平臺穩(wěn)定可靠高效運(yùn)行;2、負(fù)責(zé)Hadoop、HBase、Hive、Spark、Kafka等集群的維護(hù)、優(yōu)化工作;3、發(fā)現(xiàn)并解決性能瓶頸,支撐業(yè)務(wù)和數(shù)據(jù)量的快速增長;4、負(fù)責(zé)產(chǎn)品從原型設(shè)計到正式上線整個過程當(dāng)中技術(shù)架構(gòu)角度的持續(xù)優(yōu)化;5、開發(fā)大數(shù)據(jù)自動化運(yùn)維、監(jiān)控、故障處理工具,監(jiān)控所有基礎(chǔ)設(shè)施組件、應(yīng)用程序,提供緊急應(yīng)急措施。任職要求:1、計算機(jī)軟件或相關(guān)專業(yè),本科及以上學(xué)歷;2、3年以上Hadoop生態(tài)系統(tǒng)維護(hù)經(jīng)驗;3、熟悉Hadoop、HBase、Kafka、Hive、Spark等組件的工作原理,搭建、調(diào)優(yōu)和維護(hù)過spark、Hive、Storm、Kafka、Redis等服務(wù);4、熟悉Linux開發(fā)環(huán)境,熟練掌握J(rèn)ava/scala/python等任一編程語言,算法基礎(chǔ)扎實(shí),編碼能力優(yōu)秀;5、能夠閱讀開源組件源碼,手動編譯、安裝過patch、更改過組件源碼且應(yīng)用于生產(chǎn)環(huán)境者優(yōu)先;6、熟悉分布式系統(tǒng)設(shè)計范型,有大規(guī)模系統(tǒng)設(shè)計和工程實(shí)現(xiàn)者優(yōu)先。