HFresh: Memory-Efficient Vector Search
Weaviate 发布了 HFresh,一种磁盘型向量索引,用于内存高效的向量搜索,结合低堆内存占用与增量后台维护。
Development
- First ReportHFresh: Memory-Efficient Vector SearchWeaviate Blog
- Current AssessmentWeaviate 推出磁盘型向量索引,反映了向量数据库行业对大规模数据下成本与可扩展性的关注。内存索引成本高昂,磁盘索引可能成为处理十亿级向量的主流选择。此举可能加剧向量数据库在存储引擎层面的竞争,推动其他厂商跟进。Agent Pulse · analysis
Weaviate 于 2026 年 9 月 9 日发布博客,介绍其新的磁盘型向量索引 HFresh。该索引旨在实现内存高效的向量搜索,通过将数据存储在磁盘上并采用增量后台维护机制,显著降低堆内存占用。HFresh 适用于大规模向量检索场景,解决了传统内存索引在数据量增长时内存消耗过大的问题。
HFresh 采用磁盘存储与增量后台维护,可能通过类似 LSM 树或分块索引的结构来平衡查询性能与内存占用。其低堆内存特性暗示索引结构在内存中仅保留摘要或元数据,而将向量数据持久化到磁盘。后续可关注其查询延迟与内存占用的具体基准测试,以及是否支持实时更新与删除。
Weaviate 推出磁盘型向量索引,反映了向量数据库行业对大规模数据下成本与可扩展性的关注。内存索引成本高昂,磁盘索引可能成为处理十亿级向量的主流选择。此举可能加剧向量数据库在存储引擎层面的竞争,推动其他厂商跟进。
HFresh 降低了大规模向量搜索的内存成本,使企业能够以更低的硬件成本处理更大的数据集。对于提供向量检索服务的公司,这可能转化为更低的运营成本和更高的利润率,同时吸引对成本敏感的中大型客户。
HFresh 的后续发展可能包括性能基准的公开、与现有内存索引的对比,以及在生产环境中的采用案例。可关注 Weaviate 是否将其作为默认索引,以及是否支持混合查询(如过滤+向量搜索)。