Dan Harrison（エンジニア）は、turbopufferがturbopuffer v3でストレージアーキテクチャを変更していると発表しました。新しいエンジンは、ドキュメントとインデックスのレイアウト、書き込み、コンパクション、クエリの方法を変更し、はるかに大規模なスケールで多くのクエリプランを可能にします。turbopufferはサーバーレスベクトルデータベースとしてローンチされ、経済性のための真実のソースとしてオブジェクトストレージ、パフォーマンスのための階層型NVMe SSD/メモリキャッシュを採用しました。これはCursorやNotionを含む初期顧客によって検証されました。
時間の経過とともに、turbopufferは検索のための汎用データベースに進化し、属性フィルタリングと全文検索をサポートしました。クエリエンジンは進化しましたが、ストレージアーキテクチャはANNインデックスをプライマリインデックスとして中心に据えたままでした。現在、彼らは新しいプライマリインデックスに移行し、ANNを「単なる」セカンダリインデックスにしています。
v1では、ドキュメントはIDとベクトルのみで、階層的クラスタリングインデックスを使用していました。v2では、転置インデックスと全文検索による属性フィルタリングが追加されました。チームは移行中にアップデートを共有します。「プライマリANNインデックスを可能な限り押し進めましたが、次に進む時が来ました。」
出典: Hacker News · 要約：HeadlinesBriefing