Spark Streaming 一文讀懂

Spark Streaming：流計算框架 以往，批處理和流計算被看做大數據系統的兩個方面。咱們經常能看到這樣的架構——以 Kafka、Storm 爲表明的流計算框架用於實時計算，而 Spark 或 MapReduce 則負責天天、每小時的數據批處理。在 ETL 等場合，這樣的設計經常致使一樣的計算邏輯被實現兩次，耗費人力不說，保證一致性也是個問題。架構 Spark Streaming 正是誕生於

>>阅读原文<<