Spark對Kafka兩種連接方式的對比——Receiver和Direct

在知乎 Flink 取代 Spark Streaming 的實戰之路中,提到 因此下面對兩種方式進行詳細說明一下。 Receiver方式 Receiver:接收器模式是使用Kafka高級Consumer API實現的。與所有接收器一樣,從Kafka通過Receiver接收的數據存儲在Spark Executor的內存中,然後由Spark Streaming啓動的job來處理數據。然而默認配置下,這
相關文章
相關標籤/搜索