我们的数据显示,来自守规矩的爬虫的大量流量,都是在重复抓取没有变化的页面。请求数以十亿计,海量的机器算力,却没有换来任何结果。这正是一个为人类打造的网络被别的访客造访时的典型特征。
智能体已经到来——它们不是一种新型软件,而是网络的一种新型访客。
围绕这一新访客重塑的网络,就是我们所说的智能体互联网(Agentic Internet)。我们认为它的未来是可读、可发现、可调用、可支付的。要实现这样的未来,它需要自己的工具和协议。
Cloudflare 的开发者平台为智能体提供了运行的场所和最初的构建工具。目前缺少的,是让智能体与域名所有者协作而非冲突的工具——而且要面向开放互联网,而不只是在某一个平台内部。
每个浏览器向来都通过一个名为 User-Agent 的请求头向网络表明身份。这个名字只有在你意识到浏览器是在代表你行事时才说得通。如今,用户代理真正成了用户的代理:一个代表人去抓取网络内容的程序。当下它最成熟的形态是编码智能体:它读写代码、拉取所需文档,却从不“看见”自己读到的页面。
智能体不会渲染你的 CSS,不会看到你的主图,也不会点击你的广告。但它背后站着一个付费的人。如今每一次请求都要有人花钱,也都带着明确的目的。屏蔽它,就是屏蔽你的客户;把它当成爬虫对待,你就会失去他们。
每个智能体之所以运行,都是因为有人——个人或企业——在为它所做的事付费。大多数人不会为了花 token 而花 token。在这样的互联网里,每一次请求的另一端都有一个结果和一张账单,它将和我们现在的互联网截然不同。
网络不是为此而生的,你的分析工具也不是。多数情况下,你的商业模式同样不是。智能体如何阅读、发现、调用和支付,将决定互联网是保持开放还是走向封闭。在一种未来里,少数几套技术栈掌握发现、身份和支付,其他人都要经由它们中转。在另一种未来里,互联网保持开放:基础能力建立在任何人都能实现的标准之上,运行在因代码公开而保持中立的底层设施上。
Cloudflare 信奉开放的互联网,我们也有能力帮助构建一个让它蓬勃发展的未来。

我们所依托的规范都是任何人都可以实现的开放标准——x402、MCP、Web Bot Auth、PACT。域名所有者可以自行选择身份提供方、支付处理方和智能体合作伙伴。Cloudflare 只是其中一个选项,而不是整套技术栈。我们是这些底层设施的“零号客户”,与客户使用的完全相同,没有只有我们能走的特权通道,也没有只有我们能用的抢先体验 API。过去十五年里,我们为人类的网络做的正是这件事,如今我们打算为智能体互联网做同样的事。
智能体互联网上的人类用户不会注意到背后的工程。他们是在接触一种新媒介,会像当年评判网络那样评判它:它是否更好。找座位、订餐位,是一次交互就能完成,还是要来回九次。他们是否知道自己在和谁打交道。支付是否让人觉得安全。
我们的理念:一个可读、可发现、可调用、可支付的智能体互联网
这一切从身份开始。Web Bot Auth 让机器人能够以密码学方式向它访问的任何站点证明自己的身份,这样发布者就可以决定欢迎谁、拒绝谁。不再靠猜测,也不再有伪造的用户代理。许多站点本来就能通过登录、应用内行为或购买记录知道请求背后的人是谁。这样的站点可以签发私有访问控制令牌(Private Access Control Tokens,PACT)。该方案与 Mozilla、Google、Microsoft 和 Shopify 共同发布,让站点可以匿名地为用户背书,智能体随后可以在其他地方出示这个令牌。合法的智能体因此能以更小的阻力通过。
接下来,我们可以让智能体更容易完成工作。Markdown for Agents 让智能体用更少的 token 和更低的带宽读取网站。WebMCP 为它们提供了代表你进行交互的原生方式。x402 等标准则让它们可以直接向商家付款。
可读最直截了当:AI 智能体能否以原生于自身、发挥自身长处的方式读取内容?智能体消耗的带宽越少、token 越少越好。为人类渲染、而智能体根本不会看的每一个 HTML 标签,不仅浪费算力,还污染了上下文窗口,智能体还得花钱去忽略它们。Markdown for Agents 从服务端解决了这个问题。
在客户端,我们着手打造一款把智能体当作一等公民的浏览器。Kitesurf 是我们全新的浏览器,足够精简,可以在 Workers 上运行,按请求启动、用完即弃。它提供智能体所需的内容和功能,没有传统浏览器中那些面向人类的功能带来的臃肿。
可发现是智能体互联网上每一个经济行为的起点。智能体在读取资源、调用工具或为交易付款之前,必须先知道这个资源的存在。搜索只是故事的一半:智能体需要通过为它们打造的接口来找到所需,而不是通过一个为打字慢、爱浏览扫读的人类设计的关键词搜索框。AI Search 现已推出,任何公开站点都可以变得可供智能体搜索。
被发现是另一半。内容创作者和 API 所有者需要知道自己对智能体有多可见。智能体引擎优化(Agent Engine Optimization,AEO)衡量品牌在重要的模型和智能体中的可见度。如果你的客户所使用的智能体看不到你,那么对他们来说,你实际上就是离线的。
可调用是智能体开始做事的地方:订餐位、续订订阅、拉取报表。在面向人类的网络上,这些操作各不相同,因为它们是为点击用户界面的人类而构建的。一个想把条目添加到待办清单的智能体,必须解析 HTML,猜哪个按钮是“Add”,合成一次点击,并祈祷自上次查看以来 DOM 没有变化。
WebMCP 让站点通过浏览器直接向智能体暴露其操作:
document.modelContext.registerTool({
name: "add-todo",
description: "Add a new item to the user's active todo list",
inputSchema: {
type: "object",
properties: {
text: { type: "string", description: "The todo item text" }
},
required: ["text"]
},
async execute({ text }) {
await addTodoItemToCollection(text);
return { content: [{ type: "text", text: `Added: "${text}"` }] };
}
});
工具的“契约”变得明确。无需解析 HTML,也无需猜测表单字段。由于工具在页面内部运行,它们会复用用户已有的会话和状态。Code Mode 更进一步。智能体以代码来思考,通过编写代码来调用工具,比用文字描述更快也更准确。由于智能体调用的是端点,而不是抓取网页,内容所有者就能得到一个清晰的信号,知道哪些内容真正被用到了。
可支付是我们相信智能体互联网的前进方向。每一笔经济交易最终都需要一种支付方式。基于广告的模式正在失效。当用户是一个程序时,按席位计费的模式也行不通。我们所依赖的发布者,无法靠根本不会发生的页面浏览和不渲染其广告的浏览器养活自己。
一个从未靠广告盈利的菜谱网站,每次抓取收取不到一分钱的费用,在智能体互联网的规模下就能盈利。一家本地报纸可以在读取时授权文章,无需授权协议,也无需登录。另一边,智能体带着人类一次性设定好的钱包和预算出现。
每一次付费交互都会留下收据。发布者可以证明哪个智能体抓取了哪个页面,智能体可以证明自己为所用内容付了款。Wallets 让智能体能轻松为内容和 API 付费。Monetization Gateway 让域名所有者只需点几下,就能设置来自智能体的付款。
Cloudflare 在设计上就处于这一切的中间。我们本来就位于数十亿人类与他们访问的站点之间,保护他们、加速他们、让他们保持在线。智能体改变了流量,但没有改变这项工作的形态——我们是中立的高性能层,发布者、商家、智能体构建者和终端用户都可以信任我们站在他们这一边,而不是与他们竞争。
我们希望为域名所有者提供工具,让他们能赋能自己愿意支持的那类 AI 智能体,并屏蔽不愿支持的那些。开发者工具很可能希望变得对智能体就绪(agent-ready),以鼓励 AI 智能体发现、推荐并向其付费。发布者可能希望屏蔽榨取式的 AI 智能体(只消耗资源却不回报任何东西),但允许那些授权使用其内容或给予补偿的 AI 智能体。非营利数据提供方可能希望屏蔽超出速率限制的机器人或人类,但允许他们付费解除封锁,并用这些资金来弥补多出的资源消耗。
机器人已死,机器人万岁
机器人与人类之间的区别已经没那么简单了。并不是机器人就是坏的、人类就是好的,也不是机器人在浪费本该由人类消耗的资源。在智能体的世界里,这种旧思维已经过时。
我们把智能体视为一种新型的行为主体。它们的行为可能是令人期待的,比如以节省资源的方式读取内容、按域名所有者指定的方式与网站交互、为所用内容付费。它们的行为也可能是不受欢迎的,比如不付任何报酬地抓取数百万个页面、试图绕过屏蔽,或无视 robots.txt。我们相信,只要给人类和机器人配备合适的工具,许多不受欢迎的行为会减少,甚至转变为令人期待的行为。
弥合收入缺口
多年来,Cloudflare 一直在检测机器人,让域名所有者能够掌控机器人能否访问自己。缺少的是另一半:智能体进入这些站点之后如何与之交互。这套智能体工具正是为此而生:让网络可读、可发现、可调用、可支付。这四项基础能力都建立在开放标准之上,因此没有哪一家公司拥有这些底层设施。
开放的智能体互联网需要两端都具备多样性。不仅要有多样的发布者和内容创作者,也要有多样的智能体。如果需求侧趋于单一,那么供给侧再开放也无济于事,互联网仍然会是一座围墙花园。
我们正在构建这个开放的替代方案。欢迎加入我们:通过我们的新仪表盘让你的站点对智能体就绪,并注册以接收我们答案引擎优化(Answer Engine Optimization)产品的消息。如果你运营站点或智能体,可以使用我们的 AI Playground 体验互联网上所有的新技术。
