kettle學習筆記

kettle學習筆記之數據同步 業務需求: 將庫中數據同步到另一個數據庫,實時性使用n+1策略,進行每天凌晨進行數據同步。其中包含增量的數據同步、編輯的數據修改同步以及物理刪除的同步刪除。 實現方案: 這裏同步的數據分爲兩種 一種爲基礎數據,這種數據的數據量不會很大,實施全量的比對更新; 一種爲業務數據,這種數據的數據量可能會很大,但是時間軸越長數據越不會被修改,這裏實施一個月內的比對更新。 兩種
相關文章
相關標籤/搜索