python增量計算

在rsync同步數據後,因業務須要以及文件大小限制,須要對數據作增量分析,而每次都須要拿出文件的增量部分。 linux有差別計算命令diff以及補丁工具patch,都不是很符合預期。這兩種工具都是須要對兩個文件進行對比,而若如此作的話,其一計算增量耗時,其二須要有一個原數據的副本文件。多餘的副本文件會致使額外的存儲開銷,以及數據移動成本。 又因同步過來的數據是多個application的數據,須要
相關文章
相關標籤/搜索