工作職責(zé):
在線、離線、流處理等大數(shù)據(jù)應(yīng)用設(shè)計(jì)
結(jié)合業(yè)務(wù)流程建模、進(jìn)行數(shù)據(jù)統(tǒng)計(jì)分析場(chǎng)景的方案設(shè)計(jì)與架構(gòu)調(diào)優(yōu)
大數(shù)據(jù)平臺(tái)的搭建,系統(tǒng)調(diào)試、集成與實(shí)施
建立和維護(hù)大數(shù)據(jù)平臺(tái)技術(shù)標(biāo)準(zhǔn)規(guī)范
任職資格:
1、正規(guī)大學(xué)本科以上學(xué)歷,3年以上的大數(shù)據(jù)相關(guān)研發(fā)或者架構(gòu)經(jīng)驗(yàn)。
2、對(duì)海量數(shù)據(jù)傳輸、存儲(chǔ)、計(jì)算相關(guān)技術(shù)有深刻理解,精通大數(shù)據(jù)技術(shù)架構(gòu)開發(fā)、搭建、維護(hù)以及調(diào)優(yōu)
3、具備基于Hadoop分布式計(jì)算框架(HDFS、MR、Hive、Kafka、Spark、Flink等)的應(yīng)用架構(gòu)設(shè)計(jì)與運(yùn)維經(jīng)驗(yàn)
4、具備CDH或華為FusionInsight等大數(shù)據(jù)平臺(tái)實(shí)際項(xiàng)目經(jīng)驗(yàn)
5、熟悉Linux系統(tǒng),對(duì)Python或java語言有一定了解
6、了解logstash/flume、elasticsearch、HBase、OpenTSDB等大數(shù)據(jù)采集和存儲(chǔ)分析工具的優(yōu)先考慮
7、有較強(qiáng)的溝通、團(tuán)隊(duì)協(xié)作及學(xué)習(xí)能力。