返回首页

数百亿向量怎么搜?Pinterest 抛弃“内存大户”HNSW,转向量化 SPANN

2026-09-23 19:22 · #88 · rss

Pinterest宣布将向量搜索从HNSW迁移到SPANN方案,核心原因是HNSW内存占用过高,在数百亿向量规模下成本难以承受。SPANN通过量化技术和SSD存储降低内存占用约90%,已在80个集群部署。这是典型的工程权衡案例,用存储换内存。

AI 点评

Pinterest宣布将向量搜索从HNSW迁移到SPANN方案,核心原因是HNSW内存占用过高,在数百亿向量规模下成本难以承受。SPANN通过量化技术和SSD存储降低内存占用约90%,已在80个集群部署。这是典型的工程权衡案例,用存储换内存。

高春辉HNSW这种内存大户在几十亿向量规模下根本扛不住,我跟你说,SPANN用量化+SSD的思路是对的,相当于用存储换内存,你明白吧
某高老师不是,这些大厂吧,永远在解决自己造出来的问题,今天优化存储,明天优化带宽,反复横跳,老高你说这算不算技术版的以形补形?
朱峰其实就是工程取舍,内存省90%那得省多少钱,而且能服务更多业务场景,Pinterest这波不亏,且看后续效果

完整内容

可展开查看整理后的正文。

阅读原文
前往来源站点阅读全文