Spark實時計算的開發平臺RCS——阿里流式分析實戰

Spark開發者會將自己的代碼完成開發並提交到yarn集羣,之後任務的監控、報警、性能優化等都依賴於開發者本身;爲spark開發者提供一套可以完成任務提交、數據接入、任務監控、任務報警、錯誤日誌查看的一體化實時計算的開發平臺realtime computing service。通過平臺可以: 1. 自助本地提交任務;jar包版本維護在hdfs上 2. 數據接入覆蓋主流中間件:kafka、metaq
相關文章
相關標籤/搜索