Spark學習筆記:DStream基本工作原理

DStream基本工作原理 DStream是Spark Streaming提供的一種高級抽象,英文全稱爲Discretized Stream,中文翻譯爲離散流,它代表了一個持續不斷的數據流。DStream可以通過輸入數據源(比如從Flume、Kafka中)來創建,也可以通過對其他DStream應用高階函數(map,flatmap)來創建。 在內部實現上,DStream由一組時間序列上連續的RDD來
相關文章
相關標籤/搜索