大數據之路——阿里巴巴大數據實踐:數據同步要點

1.數據同步分爲DB數據同步和日誌數據同步: 如下是DB數據同步機制:數據庫按照規定的格式,將數據發給數據文件管理系統。 日誌同步解析:如下是日誌文件,通過數據的日誌解析模塊,將有用的數據過濾出來,然後按照一定的格式發給數據文件管理系統。(數據的過濾是通過日誌的方式,可能裏面對user表某一行有增刪改查等等,怎樣保持其中的數據版本,方式與「從Hlog中恢復數據庫」的方式如出一轍) 2.離線數據同步
相關文章
相關標籤/搜索