大數據量同步方案之全量同步改成增量同步解決方案

背景描述： 　　在一些大數據運用場景中，因爲上游數據天天都在變化着，在須要用這些數據的下游系統須要天天刷新這些變化的數據，當數據量小時候，簡單粗暴的方式就是每次全量更新數據，但隨着業務的增加，數據量成幾何方式增加時（達到億級別甚至更多），每次的更新工做將是耗時耗力的，也是業務方沒法忍受的。此時，就須要一種解決方案變全量同步爲增量同步。web 解決方案： 　　考慮到數據量基數雖然大，但天天變化的數據

>>阅读原文<<