Pineconeは11月18日、pg_pineconeのRailwayテンプレートを公開した。開発者はRailwayのテンプレートマーケットプレイスから、Pineconeのベクトル検索機能を組み込んだPostgresをワンクリックでデプロイできる。これまでPostgresでベクトル検索を行うには通常pgvectorを利用してきたが、テーブルの成長に伴って運用コストが増大するという課題があった。
問題の中心はインデックスのメモリ消費にある。pgvectorではHNSWグラフインデックスがテーブルの成長に応じてより多くのメモリを必要とするため、Postgres上でのベクトル検索の運用はますます高コストになる。Pineconeによれば、pg_pineconeは同じ再現率でpgvectorよりもレイテンシが低く、メモリ使用量も少ないため、テーブルが大きくなっても運用コストを抑えられる。
新しいRailwayテンプレートは準備の手間を大幅に省く。Postgres 18上でpg_pineconeがインストール、プリロード、有効化された状態で動作するため、拡張機能を別途インストールしたりイメージをビルドしたりする必要はない。100万ベクトルを対象としたベンチマークでは、pg_pineconeのインデックスはhalfvecを使ったpgvectorのHNSWインデックスと比べて約15分の1のサイズとなり、同じ再現率でより速く結果を返した。Railwayはサービスが使用するメモリとストレージに応じて課金するため、インデックスが小さければ、同じコストで同じPostgresサービスにより多くのベクトルを保持できる。
テーブルの規模をさらに拡張する必要が生じた場合、PineconeのAPIキーと1回のSQL呼び出しだけで、そのテーブルの検索をPineconeのマネージドサービス上のサーバーレスインデックスへ移行できる。もう一度呼び出せば元に戻せる。ベクトルがどこに保存されていても、クエリを変更する必要はない。
pg_pineconeテンプレートは現在Railwayのテンプレートマーケットプレイスで利用可能で、pg_pinecone拡張自体はApache 2.0ライセンスの下でオープンソース化されている。デフォルトで使用されるネイティブエンジンはPostgres内部で動作するため、Pineconeアカウントは不要だ。開始するには、Railwayでテンプレートをデプロイするか、pg_pineconeのクイックスタートを参照すればよい。