Milvus 數據段合併機制

​我們在《Milvus在大規模向量檢索場景下的數據管理》這篇文章說過,當向量數據不斷地進入 Milvus 時,系統後臺會持續地將插入緩衝區中的數據寫入磁盤,形成很多小文件。我們稱這些文件爲數據段。大量零碎的數據段有兩個明顯缺點: 不利於元數據管理,對 SQLite/MySQL 的訪問頻繁 索引過於分散,影響查詢的性能 因此 Milvus 後臺落盤任務會不斷地把這些小數據段合併成大數據段,直到合併後
相關文章
相關標籤/搜索