Spark技術棧——SparkStreaming

SparkStreaming 1. SparkStreaming有哪幾種方式消費Kafka中的數據,它們之間的區別是什麼? 1.基於Receiver的方式 這種方式使用Receiver來獲取數據。Receiver是使用Kafka的高層次Consumer API來實現的。receiver從Kafka中獲取的數據都是存儲在Spark Executor的內存中的(如果突然數據暴增,大量batch堆積,很
相關文章
相關標籤/搜索