turbovec

turbovec

内存省8倍的高速向量索引

AI官网

应用介绍

一千万篇文档的向量用 float32 存要 31GB 内存,普通机器根本装不下。turbovec 是一个 Rust 写的向量索引,基于谷歌的 TurboQuant 量化算法,把同样的数据压到 4GB,搜索速度还比 FAISS 快。

TurboQuant 无需单独训练、失真接近最优,turbovec 提供 Python 绑定,支持 AVX-512 和 NEON 加速。

软件功能



大幅压缩:31GB 降到 4GB。

更快搜索:速度超过 FAISS。

免训练:量化器无需训练阶段。

Python 绑定:pip 安装即用。

应用截图