spark Streaming +kafka 的offset數據保存hbase或redis

Kafka做爲一款流行的分佈式發佈訂閱消息系統，以高吞吐、低延時、高可靠的特點著稱，已經成爲Spark Streaming常用的流數據來源。 常用的ETL架構   SparkStreaming直連方式讀取kafka數據，使用MySQL保存偏移量 https://blog.csdn.net/Lu_Xiao_Yue/article/details/84110045   import scala.col

>>阅读原文<<