Spark學習筆記(28)深入理解Spark 2.x中的Structured Streaming

本期內容: 1. 新型的Spark Streaming思維 2. Structured Streaming內幕 Spark 2.0 仍有bug,不適合於生成環境。只用於測試。 Spark 2.X提出了continuous application(連續的應用程序)的概念,非常重大。 如圖例所示,數據通過Kafka流進來,經過ETL, SS把數據看成一張表。一張沒有邊際的表、 Eventtime,事件
相關文章
相關標籤/搜索