基於Spark Streaming 進行 MySQL Binlog 日誌準實時傳輸

基本架構 RDS -> SLS -> Spark Streaming -> Spark HDFS 上述鏈路主要包含3個過程: 如何把 RDS 的 binlog 收集到 SLS。 如何通過 Spark Streaming 將 SLS 中的日誌讀取出來,進行分析。 如何把鏈路 2 中讀取和處理過的日誌,保存到 Spark HDFS中。 環境準備 安裝一個 MySQL 類型的數據庫(使用 MySQL 協
相關文章
相關標籤/搜索