spark從kafka中獲取數據

spark從kafka獲取數據兩種方式 1.kafkaUtils.createStream 利用 Kafka 消費者高級 API 在 Spark 的工做節點上建立消費者線程，訂閱 Kafka 中的消息，數據會傳輸到 Spark 工做節點的執行器中，可是默認配置下這種方法在 Spark Job 出錯時會致使數據丟失，若是要保證數據可靠性，須要在 Spark Streaming 中開啓 Write A

>>阅读原文<<