内容独立日一周年:为代理互联网构建商业模式
一年前,Cloudflare宣布了“内容独立日”,旨在为内容所有者提供透明度和控制权。一年后,随着AI代理的崛起和互联网流量的非人化,传统的搜索推荐模式正在崩溃,一个付费内容市场已经形成。本报告分享了关键数据,并探讨了内容所有者与AI公司之间的新经济关系。
一年前,Cloudflare宣布了“内容独立日”,改变了新域名的默认设置,阻止AI训练爬虫,除非域名所有者选择允许。这一举措旨在为内容所有者提供透明度、控制权,并最终创造一个高质量内容能被公平交易的市场。
一年后,这个市场已经出现,但互联网的转型速度超过了预期。根据Cloudflare的最新报告,AI的采用曲线呈垂直增长:在短短3.5年内,超过30%的人类(25亿用户)开始定期使用生成式AI,这比智能手机的普及速度快两倍多。
这种转变正在彻底改变人们使用互联网的方式。如今,人们每小时上网搜索信息,只有15分钟花在开放网页上。传统的搜索行为正在崩溃,用户转向AI驱动的发现和消费。与此同时,非人类流量首次超过50%,其中AI训练爬虫占爬虫请求的52%,而纯粹搜索爬虫的份额正在下降。
旧的经济模型是内容创造者通过提供内容换取搜索引擎的推荐流量,从而产生经济价值。但现在,AI系统直接回答问题、比较产品和完成任务,内容被消费却没有流量返回给来源。这种“谷歌零”的未来促使内容所有者寻找新的收入来源。
然而,市场已经出现了积极的信号。Cloudflare的工具为出版商提供了运营商级别的归因数据,使他们能够了解AI公司如何访问其内容。这种稀缺性创造了议价能力,导致更多的许可协议:自2023年以来已签署超过50项出版商-AI协议,主要AI公司现在积极许可内容。
尽管如此,市场仍存在效率低下的问题。许可协议仍然是定制的,不太可能完全取代失去的广告和联盟收入。此外,谷歌的双重角色带来了特殊挑战:谷歌的混合爬虫将搜索和AI训练合并,使得出版商难以区分目的,也无法控制内容的使用方式。
Cloudflare作为连接内容所有者和AI公司的关键节点,拥有独特的视角。超过20%的网站使用Cloudflare网络,包括36%的全球访问量最大网站和近80%的领先AI公司。Cloudflare继续投资于增强归因、测量和出版商控制工具,以推动透明度成为标准。
总之,互联网正从搜索驱动的开放网络转向代理驱动的经济。内容所有者需要适应这一新现实,通过定价其独家数据、启用AI代理的商务功能以及将AI消费与人类发现一起优化来探索新的货币化路径。Cloudflare的报告表明,虽然挑战巨大,但一个可持续的互联网经济的基石正在形成。