崗位職責：
1、負責大數(shù)據(jù)平臺的架構(gòu)、研發(fā)和持續(xù)優(yōu)化；
2、解決基礎(chǔ)架構(gòu)項目中的關(guān)鍵架構(gòu)問題和技術(shù)難題，負責項目中關(guān)鍵技術(shù)難點的攻關(guān)；
3、參與大數(shù)據(jù)門戶、元數(shù)據(jù)管理平臺、數(shù)據(jù)質(zhì)量監(jiān)控平臺、可視化系統(tǒng)等系統(tǒng)的搭建和開發(fā)工作；
4、?具備良好的團隊合作精神，較強的溝通能力。
任職要求：
1、本科學歷，有至少5年的Java、scala或python編程經(jīng)驗，2年以上大數(shù)據(jù)大數(shù)據(jù)架構(gòu)開發(fā)相關(guān)工作經(jīng)驗；
2、精通spark和hadoop全棧開發(fā)，具備大數(shù)據(jù)平臺開發(fā)經(jīng)驗；使用hadoop及hadoop生態(tài)圈中的常用組件，如Spark、Hive、Kafka、Yarn、HBase、Presto等全部或者部分組件,精通其中3個以上優(yōu)先；
3、擁有實際的Hadoop/spark的項目經(jīng)驗，具有相關(guān)系統(tǒng)的調(diào)優(yōu)、運維、開發(fā)經(jīng)驗；
4、深刻理解hadoop/spark相關(guān)技術(shù)的原理和開發(fā)方法，熟練hadoop/spark平臺的搭建部署、調(diào)優(yōu)、故障診斷、運行維護的方法和工具；
5、對Linux操作系統(tǒng)熟練掌握，熟悉shell腳本編程；
6、具備一定的數(shù)據(jù)的分析和理解能力。
7、負責數(shù)據(jù)中臺內(nèi)數(shù)據(jù)服務(wù)中心、服務(wù)監(jiān)控、數(shù)據(jù)共享及數(shù)據(jù)治理平臺相關(guān)功能的開發(fā)及實施
8、做過建筑行業(yè)大數(shù)據(jù)軟件者優(yōu)先
