Milvus 数据段合并机制

​我们在《Milvus在大规模向量检索场景下的数据管理》这篇文章说过,当向量数据不断地进入 Milvus 时,系统后台会持续地将插入缓冲区中的数据写入磁盘,形成很多小文件。我们称这些文件为数据段。大量零碎的数据段有两个明显缺点: 不利于元数据管理,对 SQLite/MySQL 的访问频繁 索引过于分散,影响查询的性能 因此 Milvus 后台落盘任务会不断地把这些小数据段合并成大数据段,直到合并后
相关文章
相关标签/搜索