54 подписчика

turbovec – новая звезда в мире векторного поиска

8 июня8 июн

~1 мин

🚀 Если вам приходится работать с огромными массивами векторов, turbovec – то, что стоит проверить. Этот Rust-индексатор экономит память глобально: вместо 31 ГБ для 10 миллионов float32-векторов он помещается всего в 4 ГБ и при этом быстрее FAISS! Как? Использует уникальный алгоритм TurboQuant, который не требует обучения, подстройки параметров и перестройки индекса при добавлении новых данных — просто добавляй и ищи. Есть удобные Python-биндинги, плюс поддержка ARM и x86 с SIMD-оптимизациями, а ещё — фильтрация по ID прямо на уровне ядра поиска. Это отличное решение для проектов с требованиями к приватности, экономии памяти и скорости. #Python #Rust #VectorSearch #MachineLearning #AI #OpenSource #FAISS #Optimization https://github.com/RyanCodrai/turbovec https://vlad1kudelko.github.io/

turbovec – новая звезда в мире векторного поиска 🚀

Если вам приходится работать с огромными массивами векторов, turbovec – то, что стоит проверить. Этот Rust-индексатор экономит память глобально: вместо 31 ГБ для 10 миллионов float32-векторов он помещается всего в 4 ГБ и при этом быстрее FAISS! Как? Использует уникальный алгоритм TurboQuant, который не требует обучения, подстройки параметров и перестройки индекса при добавлении новых данных — просто добавляй и ищи. Есть удобные Python-биндинги, плюс поддержка ARM и x86 с SIMD-оптимизациями, а ещё — фильтрация по ID прямо на уровне ядра поиска.

Это отличное решение для проектов с требованиями к приватности, экономии памяти и скорости.

#Python #Rust #VectorSearch #MachineLearning #AI #OpenSource #FAISS #Optimization

https://github.com/RyanCodrai/turbovec

https://vlad1kudelko.github.io/