崗位職責(zé)：1、負(fù)責(zé)公司大數(shù)據(jù)基礎(chǔ)平臺的規(guī)劃、部署、管理和優(yōu)化，保障平臺穩(wěn)定可靠高效運(yùn)行；2、負(fù)責(zé)Hadoop、HBase、Hive、Spark、Kafka等集群的維護(hù)、優(yōu)化工作；3、發(fā)現(xiàn)并解決性能瓶頸，支撐業(yè)務(wù)和數(shù)據(jù)量的快速增長；4、負(fù)責(zé)產(chǎn)品從原型設(shè)計到正式上線整個過程當(dāng)中技術(shù)架構(gòu)角度的持續(xù)優(yōu)化；5、開發(fā)大數(shù)據(jù)自動化運(yùn)維、監(jiān)控、故障處理工具，監(jiān)控所有基礎(chǔ)設(shè)施組件、應(yīng)用程序，提供緊急應(yīng)急措施。任職要求：1、計算機(jī)軟件或相關(guān)專業(yè)，本科及以上學(xué)歷；2、3年以上Hadoop生態(tài)系統(tǒng)維護(hù)經(jīng)驗；3、熟悉Hadoop、HBase、Kafka、Hive、Spark等組件的工作原理，搭建、調(diào)優(yōu)和維護(hù)過spark、Hive、Storm、Kafka、Redis等服務(wù)；4、熟悉Linux開發(fā)環(huán)境，熟練掌握J(rèn)ava/scala/python等任一編程語言，算法基礎(chǔ)扎實(shí)，編碼能力優(yōu)秀；5、能夠閱讀開源組件源碼，手動編譯、安裝過patch、更改過組件源碼且應(yīng)用于生產(chǎn)環(huán)境者優(yōu)先；6、熟悉分布式系統(tǒng)設(shè)計范型，有大規(guī)模系統(tǒng)設(shè)計和工程實(shí)現(xiàn)者優(yōu)先。
