Spark實時項目第四天-MySQL的準備及Canal的安裝測試

採集數據框架流程 Canal 使用場景 阿里otter中間件的一部分:otter是阿里用於進行異地數據庫之間的同步框架,canal是其中一部分。 更新緩存 抓取業務數據新增變化表,用於製做拉鍊表。 抓取業務表的新增變化數據,用於製做實時統計。 canal工做原理 Master主庫將改變記錄,寫到二進制日誌(binary log)中 Slave從庫向mysql master發送dump協議,將mas
相關文章
相關標籤/搜索