Pinecone Nexus がパブリックプレビューに | Pinecone
Pinecone Nexus は AI エージェント向けナレッジエンジンで、エンタープライズの分散知識を構造化レイヤーにコンパイルし、クエリあたりのトークンコストを削減し、精度と速度を向上させます。本記事では、その仕組み、ベンチマーク結果、パブリックプレビューの利用方法を説明します。
Pinecone は本日、ナレッジエンジン Pinecone Nexus のパブリックプレビュー開始を発表しました。この製品は7週間前にアーリーアクセスとしてリリースされ、AIエージェントにコンパイルされたエンタープライズ知識を提供することを目的としています。それ以来、Pinecone は膨大なデータ、高い複雑性、厳格な精度・遅延・コスト要件を持つ幅広いユーザーと協力してきましたが、現在はすべてのビジネスユースケースに開放されています。
Pinecone Nexus の核心は、エンタープライズ知識が分散している問題を解決することです。最先端のモデルは一般的な知識や複雑な推論に優れていますが、ファイルに埋もれた特定の情報を見つけるには検索能力が不足しています。一方、従来のベクトルデータベースは検索の改善を続けてきましたが、エンタープライズにはさらにユニークな知識層があります。それはビジネスコンテキストです。これは3年目の従業員が検索せずに知っている知識、つまりどの内部プロセスドキュメントが現在の実際の作業方法を反映しているか、四半期目標が実践的に何を意味するか、ある部門のポリシーが別の部門の決定にどのように関連するかといったことです。これらの知識は契約書、Wiki、人事文書、会議メモ、サポートチケット、財務記録に分散しています。大部分はどこかに文書化されていますが、文書化されていることとコンパイルされていることは異なり、エージェントがタスクを開始するには後者が必要です。エージェントがタスクを開始するたびに、これらすべてについてゼロから始めなければならず、トークン消費、時間遅延、半分正しい答えという結果をもたらします。
Nexus は「マニフェスト」メカニズムを通じてこの問題を解決します。マニフェストはドメインエキスパートが設計した青写真であり、文書をどのように理解するか、知識アーティファクトのタイプと関係を定義します。データはコネクタ（ローカルファイルアップロード、Box、OneLake など）を介してワークスペースに取り込まれ、ワークスペース内で複数の「コンテキスト」（各データセットまたは知識ドメインに対応）に整理されます。その後、Nexus のキュレーション層がマニフェストに従って生の文書を構造化された知識アーティファクトに変換します。エージェントは KnowQL クエリインターフェースを通じてこの知識層を直接クエリし、実行時に文書構造を推測する必要がありません。
Nexus のユニークな点は、ドメインエキスパートが知識キュレーションに関与することです。例えば、特許弁護士は特許基準の整理方法を定義するマニフェストを作成でき、M&Aアナリストはデューデリジェンスで相互参照が必要な文書カテゴリを指定できます。このモデルはプロンプトエンジニアリングとは異なります。モデルはクエリ時にコーチされるのではなく、実際にドメインを理解している人によって設計された知識層を直接利用します。その結果、答えは正確で高速になり、推論は最初から正しい方向に向けられます。
規制の変更や製品の進化に伴い、知識は「知識ドリフト」を起こします。Nexus ではエキスパートが再キュレーションできます。マニフェストを更新し、知識層を再構築し、リリースします。ドメインエキスパートが知識層を制御し続けるため、エージェントは最新の状態を保ちます。
Pinecone は複数のベンチマーク結果を公開し、Nexus の効果を実証しています。例えば、フィンテック企業 Q2 のサポート知識ベースのテストでは、Nexus は20の複雑な質問に対して95%のF1スコアを達成し、平均再現率と適合率はともに4.70（5点満点）でした。Q2 のチーフデータサイエンティスト Jesse Barbour 氏は、ベクトルデータベースを構築してRAGを実行することは容易だが、エージェントが確実に正しい知識を組み立てることが難しいと述べ、Nexus がそれを実現したと評価しています。
法律研究会社のテストでは、Nexus は EU 判例法に対する回答完了率100%、精度87%を達成し、エージェンティック RAG ベースラインの完了率66%、精度45%を大幅に上回りました。Nexus のクエリあたりの平均トークン消費は9k で、エージェンティック RAG の80k の約9分の1でした。
市の議事録のクロスドキュメント推論のテストでも、Nexus は標準的な検索を上回る性能を示しました。
現在、ビジネスユースケースを持つ誰でも Pinecone Nexus パブリックプレビューへのアクセスを申請できます。Preview Playground（迅速な検証用）と BYOC デプロイメント（本番環境、データはユーザーのVPC内に留まる）の2つの方法を提供しています。Pinecone は、データレジデンシー、セキュリティ、コンプライアンスの要件を満たすため、BYOC モデルに重点を置いていると述べています。