AI検索をよりスマートに

検索は、ウェブ上でほぼすべてのもの（クリエイター、販売者、質問の答え）を見つける方法です。AIはルールを書き換え、クリエイターは、エージェント時代に発見されやすくありながら、作品に対して報酬を得るというジレンマに直面しています。本日、Cloudflareはこれらの問題に対処するための2つのイニシアチブを発表しました。

検索はウェブのほとんどの体験を支えています。約30年にわたり、この発見プロセスは単純な取引に基づいていました：検索エンジンにコンテンツをクロールさせると、訪問者が送られてくるというものです。訪問者は、広告、サブスクリプション、または単なるオーディエンスを通じてビジネスに変えられました。発見可能であることと報酬を得ることは同一でした。1年前、最初のコンテンツ独立記念日に、私たちはAI時代にこの取引を守るための線を引きました。しかし、砂に線を引くことは最初の一歩に過ぎませんでした。それ以来、AI検索の消費者の生活における普及は加速し、現在、オンライントラフィックの50％以上が非人間です。脅威はもはやブロックできる訓練用クローラーの数ではなく、検索自体がAI回答を中心に再構築されていることです。

現在の回答エンジンは、あなたのページを読んでユーザーに要約を提供するため、訪問（およびそれに依存する収益）は不要になります。私たちはそれを直接目にしており、独立した研究も裏付けています：2025年のピュー研究所の調査によると、GoogleがAI要約を表示した場合、ユーザーが従来の検索結果リンクをクリックするのはわずか8%（要約がない場合の約半分）で、要約内のリンクをクリックするのはわずか1%でした。これにより、顧客はジレンマに陥ります：AIをオプトアウトして見つけにくくなるか、オプトインしてユーザーに大きな価値を提供しながらも、見返りはますます少なくなるかの選択を迫られます。

本日、私たちは新しいボットオプションを発表し、顧客が誰がサイトにアクセスできるか、何をできるかをより細かく制御できるようにしました。しかし、ブロックは第一歩に過ぎません：「ノー」と言うことはコンテンツを保護しますが、それを支えるビジネスモデルを再構築するわけではありません。そこで、検索から始めて、インターネットの新しい経済モデルを構築する時が来ました。

取引の再構築

透明性と制御は基本ですが、それだけでは不十分です。2025年、私たちは責任あるAIボットの原則（ボットは自分が誰であるか、何のためにあるかを透明にし、サイト所有者の選択を尊重し、誠実に行動すべき）を基礎として打ち出しました。私たちのツールはボットをその基準に従わせます。しかし、良いボットの行動を強制しても、それに依存する人々にとってAI検索が良くなるわけではなく、回答を可能にしたクリエイターに1ドルも還元されません。私たちは、ウェブが「ノー」と言うのを助けるだけでなく、「イエス」と言うものを再構築する手助けができます。

そこで本日、私たちは防御から攻撃へと移行し、古い取引の両方の部分を再び組み立て始める2つのイニシアチブを発表します。

• AI検索をよりスマートに：グローバルネットワーク全体で見られるシグナル（何が新しいか、高品質か、実際に変化したか）を利用して、回答エンジンが最も関連性の高いコンテンツを表示し、不要なクローリングを減らすことができます。人々はより良い回答を得られ、Webページが変更された場合のみ再クロールされることで、AI企業とサイト所有者の両方のコストが削減されます。
• 提供する価値に対してクリエイターに報いる：あなたの作品が誰かの質問に答えるために使用された場合、無料でスクレイピングされるのではなく、報酬を得るべきです。また、何が使用されているか、人々が何を尋ねているかを確認できるべきです。これは真の収益源となり、見つける価値のあるオリジナルコンテンツを生産し続けるインセンティブとなるはずです。

検索をよりスマートに

本日、私たちはAI検索をよりスマートにし、顧客が新しいものを生み出さないクロールの代金を支払うのを止めるための研究プログラムを開始します。

Cloudflareのネットワークにはウェブの20％以上が存在しており、これにより独自の視点が得られます。どのページが実際に変更されたか、どのページに人やエージェントが集まっているかを判断できます。このプログラムを通じて、顧客が共有することを選択したコンテンツの鮮度に関するシグナルを探求し、それらを人間とボットの両方のトラフィックフローに関する自身の洞察と組み合わせます。回答エンジンにとっては、高品質なコンテンツへのロードマップとなります。顧客にとっては、ユーザーが実際に尋ねていることや、自分のコンテンツがAI結果にどのように表示されるかのビューを提供します。目的は2つのことを測定することです：これらのシグナルが回答エンジンがより新鮮で高品質なコンテンツを表示するのにどの程度役立つか、そして不要なクローリングをどの程度削減するかです。

2番目の利点である不要なクローリングの削減は、見た目以上に重要です。Cloudflareのデータによると、善玉ボットからのクロールトラフィックの50％以上が変更されていないページの再取得に使用されており、クロール量が増加するにつれてその数はさらに増加する可能性があります。「ここでは何も変わっていない」というシグナルにより、クローラーはその訪問をスキップできます。これにより、回答エンジンの計算が節約されます。さらに重要なのは、サイト所有者が必要のないリクエストを提供して支払う必要がなくなることです。

このプログラムは中立的に設計されています：私たちの目標は、公正にプレイするすべての回答エンジンが利用できるようにすることです。検索に限定されています。コンテンツは一切共有せず、基礎モデルのトレーニングにも使用しません。私たちが学んだこと（コンテンツの発見性の向上やサーバー負荷の軽減など、サイト所有者へのメリットを含む）を公開する予定です。今年後半には、この機能を広く利用可能にし、ネットワーク全体で不要なクローリングを削減する予定です。

ペイ・パー・クロールからペイ・パー・ユースへ

昨年、私たちは「ペイ・パー・クロール」を開始し、パブリッシャーがAI企業にコンテンツのクロールに対して課金できるようにしました。これは本当のスタートでしたが、クロールは価値の粗い尺度です。1つのページが1回クロールされて何千もの回答で引用されることもあれば、何度もクロールされて全く使用されないこともあります。クリエイターは、提供する価値に対して公正な報酬を求めています。

そこで、私たちは「ペイ・パー・クロール」を「ペイ・パー・ユース」に変え始めています。Ceramic.aiやYou.comなどのトップAI企業との実験を開始しており、取り決めはシンプルです：組織は独自の支払いモデルを持ち込み、Cloudflareネットワーク上のコンテンツ所有者に簡単にスケールできます。

Ceramicは「ペイ・パー・クエリ」モデルを構築しており、オプトインしたパブリッシャーは、コンテンツがCeramicの検索結果に表示されたときに報酬を得ることができます。つまり、支払いはクローラーが取得した回数ではなく、作品が提供する価値に従って設計されています。

「AI検索の未来をスケールするには、広大なリーチと透明性と公正な報酬への共通のコミットメントを持つパートナーが必要です」とCeramic.aiの創業者兼CEOのAnna Pattersonは述べています。「Cloudflareは、私たちが簡単かつプログラム的に運用をスケールすることを可能にします。当社のペイ・パー・クエリモデルを彼らのネットワークに持ち込むことで、何百万ものコンテンツ所有者がシームレスにオプトインし、コンテンツが検索結果に表示されるたびに報酬を受け取ることができます。」

報酬に加えて、Cloudflare/Ceramicプログラムに参加するコンテンツ所有者は、アンサーエンジン最適化（AEO）に役立つ新しいレポートを利用できるようになります。顧客は、自分のコンテンツが検索結果に表示される原因となる上位のクエリ、特定のWebページとスニペット、平均検索順位などをついに確認できるようになります。これは、発見性を向上させるために私たちが提供する多くの製品の最初のものです。

これは、出現しつつあるアプローチの1つにすぎません。別のアプローチはYou.comからのものです：エージェントは、事前のコミットメントなしに、必要な特定のプレミアムコンテンツに対してオンデマンドで支払うことができます。AIプロバイダーからの新しい支払いモデル（ペイ・パー・クエリ、ペイ・パー・リザルトなど）がテストされており、私たちはそれらすべてをサポートするインフラを備えています。

正直なところ、これは実験であることをお伝えしたいと思います。学ぶべきことは多く、特にこれがインターネットの規模でどのように持続するかが課題です。私たちは、パートナーや顧客と共に進めながら学び、学んだことを共有します。しかし、目標は明確です：AI検索企業はより新鮮で根拠のある回答を得られ、回答を可能にした顧客は報酬を得ます。Cloudflareの役割は、この市場を繁栄させるインフラ層を提供することです。

これは、検索の経済が向かう方向に、より自然に適合していると考えています。かつての人間中心のウェブは、時間を節約するために最適化されていました（抜粋、10の青いリンク、クリック）。エージェントインターネットは異なります：エージェントは高速に読み、継続的に検索できます。検索は、1つの質問に答えるために数十回行われる行為となり、目的地ではなく公共事業に近づいています。その世界では、重要な単位はクロールやクリックではありません。結果です。結果に価格を付け、それを可能にした人々に支払うことが、ウェブが繁栄し続ける方法です。

私たちが獲得したいヘッドライン

1年前のコンテンツ独立記念日、ヘッドラインはデフォルトの「ノー」でした：AIは報酬なしにクロールできない。今年の焦点は、ユーザーに「イエス」と言うためのより多くの製品とコントロールを提供し、それに伴う利益をもたらすことです。

本日の発表は始まりに過ぎません。Cloudflareの研究プロジェクトは、私たちのシグナルがより少ないクロールでより良い結果を生み出すかどうかを確認するために設計されています。ペイ・パー・ユースは有望な方向性であり、コンテンツクリエイターが公正な報酬を受けるべきだと信じるパートナーと共に実験していきます。これが、過去30年のウェブが構築されてきた方法でもあります：誰かがパイロットを実行し、「モデルは壊れている」を「これが新しいモデルだ」に変えるのです。実験を1つずつ。私たちは、顧客がこの新しいエージェント時代に発見されやすくなり、最大限の発見のためにコンテンツを最適化することに価値があると信じています。しかし、彼らは最も価値のあるクリエイティブな資産を無料で提供することなく、それを実現できるべきです。

ウェブは変化しており、それに依存するビジネスモデルも変化しています。昔のインターネットはオープンで中立的であり、貢献する価値がありました。私たちはそれを維持し、将来それを資金提供するビジネスモデルを構築する稀な機会を持っています。人間とエージェントが質問するためのよりスマートな回答。回答を価値あるものにするスキル、創造性、献身を持った人々への公正な取引。それが、Cloudflareのミッションを追求する方法です：より良いインターネットの構築を支援すること。

コンテンツ独立記念日、おめでとうございます！

オープンでエージェント対応のウェブを構築していますか？CeramicとYouのプログラムについて詳しく知りたい場合は、このフォームにご記入ください。回答エンジンを構築していて、よりスマートにクロールしたい場合は、ぜひご連絡ください：[email protected]。