Kafka結合Spark-streaming 的兩種鏈接方式(AWL與直連)

kafka結合spark-streaming的用法及說明以前博客有些，這裏就不贅述了。apache 這篇文章說下他們結合使用的兩種鏈接方式。(AWL與直連)網絡 先看一張圖： 異步 這是kafka與streaming結合的基本方式，如圖spark集羣中的 worker節點中 exeutor線程裏的 receiver接口會一直消費kafka中的數據，那麼問題來了，假如咱們定義5秒消費一次，若是spa

>>阅读原文<<