2024 年开年,Milvus Cloud 好消息不断。除了收获 Github 25,000 颗星的成就,Milvus Cloud 也发布了新年的第一个版本—— 2.3.4。
此次发版的主要目的是为用户提供一个高扩展性且更易用的 Milvus Cloud 版本。为此,Milvus Cloud 新增了许多易用性功能,比如:可追踪外部接口调用的 accesslog;对 parquet 数据格式的导入做了支持;引入了更清晰的错误消息;更快的加载速度以及更好的查询分片平衡能力。在扩展性方面,团队通过对内部处理逻辑进行优化以及对内存使用效率的提升,使得 Milvus Cloud 集群目前可支持多达 10,000 个 Collection,可以满足大数据量和多租户场景下的要求。
以下将对这些主要特性和重点优化进行解释说明:
Collection/Partition 是 Milvus Cloud 管理逻辑集合的主要单元,类似关系型数据库里 Table/Partition 的概念。虽然理论上 Milvus Cloud 能支持 65,536 个 Collection,但在实际使用中,随着 Collection 数量的增加,系统内部的开销会变大,一些资源可能会存在瓶颈&#