Structured Streaming:從入門到精通(一)[ 曲折發展史]

Spark Streaming Spark Streaming針對實時數據流,提供了一套可擴展、高吞吐、可容錯的流式計算模型。Spark Streaming接收實時數據源的數據,切分成很多小的batches,然後被Spark Engine執行,產出同樣由很多小的batchs組成的結果流。本質上,這是一種micro-batch(微批處理)的方式處理 不足在於處理延時較高(無法優化到秒以下的數量級),
相關文章
相關標籤/搜索