工作職責:
1.設計和實現(xiàn)實時運維數(shù)據(jù)流處理解決方案。
2.優(yōu)化流處理管道的性能和可靠性。
3.開發(fā)用于數(shù)據(jù)攝取、處理和輸出的服務和接口。
4.設計基于日志、監(jiān)控、資產(chǎn)數(shù)據(jù)、行情資訊等數(shù)據(jù)的智能運維產(chǎn)品。
5.監(jiān)控流處理系統(tǒng)的性能，實時解決數(shù)據(jù)流問題。
技能要求:
1.熟悉數(shù)據(jù)倉庫解決方案
2.有使用ETL工具（如Kettle、DataX或Informatica）的經(jīng)驗
3.熟悉大數(shù)據(jù)技術，如Hadoop、Spark的優(yōu)先
4.具備良好的編程能力，熟練使用Java、Scala、Python或其他相關語言
5.有數(shù)據(jù)可視化工具（如Tableau、Power?BI）經(jīng)驗
6.熟悉至少一種流處理框架，如Apache?Kafka?Streams、Apache?Flink或Apache?Storm
7.有使用Apache?Kafka、RabbitMQ或其他消息隊列系統(tǒng)的經(jīng)驗
8.有實際的大規(guī)模流處理系統(tǒng)設計和實施經(jīng)驗者優(yōu)先
9.有數(shù)據(jù)可視化工具（如Tableau、Power?BI）經(jīng)驗者優(yōu)先
10.本科，學信網(wǎng)可查，3年以上大數(shù)據(jù)開發(fā)經(jīng)驗
