Hacker News Front Page · razin ·
RIP, vector database
Turbopuffer rediseña su arquitectura de almacenamiento migrando de un índice vector-primario a una nueva estructura en la versión v3. Durante años, el índice ANN jerárquico fue la base de todo, permitiendo búsquedas vectoriales eficientes en almacenamiento de objetos, pero generó amplificación de escritura, duplicación de datos en documentos multi-vector e imposibilidad de usar bloques de datos optimales para consultas no-vector. La solución elimina el direccionamiento por ANN como clave primaria, permitiendo que índices de texto completo, filtros de atributos y agregaciones utilicen sus propias estructura y tamaños de bloque, con proyecciones de mejora de rendimiento hasta 20x en operaciones como búsqueda full-text.
turbopuffer is pushing the frontier of search. To do that, we have to fundamentally redesign our storage architecture so the vector index is no longer primary.