Spark Streaming 遇到 kafka

Spark Streaming 遇到 kafka 站酷 | 插畫 搭建流程略，主要講一下如何更好的結合使用，看圖說話。 Kafka 結合 Spark Streaming 實現在線的準實時流分析，除了保證數據源和數據接收的可靠性，還要保證元數據的 checkpoint 。 以上的方案，不能防止數據的丟失。 Executor 收到數據後開始執行任務了。但是這時候 Driver 掛掉了，相應的 Exec

>>阅读原文<<