職責(zé)描述:
1、負(fù)責(zé)大數(shù)據(jù)平臺Hadoop集群的業(yè)務(wù)運維工作,針對集群故障進行快速排查和修復(fù);
2、負(fù)責(zé)集群容量規(guī)劃和性能優(yōu)化,支撐業(yè)務(wù)和數(shù)據(jù)量的快速增長;
3、參與大數(shù)據(jù)基礎(chǔ)架構(gòu)的規(guī)劃、設(shè)計與實施工作;
4、跟進大數(shù)據(jù)技術(shù)研究的大方向,做新技術(shù)預(yù)研工作;
?
任職資格:
1、3年以上hadoop集群運維經(jīng)驗,熟練掌握Linux操作系統(tǒng),熟悉linux文件系統(tǒng),內(nèi)核,網(wǎng)絡(luò)等性能優(yōu)化;
2、熟悉HDFS、YARN、Hive、HBase、Spark、ES、Flink、Kafka等hadoop生態(tài)技術(shù)的體系結(jié)構(gòu)和運行原理;
3、具備具備大規(guī)模集群部署管理、很強的故障排查能力和調(diào)優(yōu)能力,能夠快速準(zhǔn)確的定位集群故障并給出切實可行的解決方案;
4、熟悉python/JAVA一種變成語言,有一定開發(fā)經(jīng)驗,熟悉使用ansible、salt等自動化運行工具;
5、具有較強的責(zé)任心和團隊精神,具有良好的溝通交流和快速學(xué)習(xí)能力。