构建开放的代理互联网:可读、可发现、可调用和可支付
我们的数据显示,很多来自表现良好的机器人的流量是在<a href="https://blog.cloudflare.com/making-ai-search-smarter/">重新获取未改变的页面</a>。数十亿次请求,这是一种庞大的机器努力,却没有任何结果。这是一个为人类设计的网站被其他事物访问的标志。
代理人已经出现——并不是作为一种新型软件,而是作为一种新型的网络访问者。
围绕这一新的访问者重塑的网络就是我们所称的代理互联网。我们看到它的未来是可读的、可发现的、可调用的和可支付的。要实现这个未来,它需要自己的工具和协议。
Cloudflare的开发者平台为代理人提供了运行的空间,以及构建它们的第一个工具。现在缺乏的,是那些让代理人与域名所有者协作,而不是碰撞的工具——在开放的互联网中,而不仅仅是在单一平台内。
每个浏览器一直以来通过一个名为用户代理的标头向网络标识自己。这个名称只有在你意识到浏览器是代表你行动的时候才有意义。现在,用户代理真的成为了用户的代理:一个在个人的名义下访问网络的程序。今天,它最成熟的形式是编码代理,能够读写代码、获取所需文档,而从未见到它所读取的页面。
代理不会渲染你的CSS,观察你的主图像,或点击你的广告。但它的另一端有一个付费的人。每一个请求现在都花费着某人的钱,并承载着一个目的。阻止它,你就是在阻止你的客户。把它当成抓取工具,你就会失去他们。
每个代理的运行都是因为有人——一个人或一个企业——在为其所做的事情付费。大多数人不会无缘无故花费代币。这种互联网的版本,即每个请求的另一端都有结果和账单,将与我们现在拥有的互联网截然不同。
这张网络并不是为了这个目的而构建的,你的分析工具也不是。大多数情况下,你的商业模式也不是。代理如何阅读、发现、调用和支付,将决定互联网是保持开放还是变得封闭。在未来的一个版本中,少数几个栈掌控了发现、身份和支付,而其他所有人都通过它们进行路由。在另一个版本中,互联网保持开放:建立在任何人都可以实现的标准之上的原语,依靠中立的轨道运行,因为代码是公开的。
Cloudflare相信开放的互联网,我们有能力帮助建设一个繁荣的未来。
我们所构建的规范是任何人都可以实现的开放标准——x402、MCP、Web Bot Auth、PACT。域名所有者可以选择自己的身份提供者、支付处理器和代理合作伙伴。Cloudflare只是一个选择,并不是整个栈。我们是客户所使用的相同轨道的零客户,没有特权路径或只有我们能访问的早期访问API。这是我们在过去十五年为人类网络所做的工作,也是我们打算为代理互联网做的工作。
技术本身并不是人类在代理互联网中所关注的。他们正在接触一种新媒介,并将以他们判断网络的方式来评判:是否更优秀。是否寻找和预定一个桌子只需一次交换而非九次。是否知道他们在与谁打交道。支付是否感觉安全。
## 我们的理念:一个可读、可发现、可调用和可支付的代理互联网
这一切从身份开始。[Web Bot Auth](https://blog.cloudflare.com/web-bot-auth/)让机器人能够以密码学方式向它访问的任何网站确认自身身份,以便出版商可以决定谁可以被接纳,谁不能。不再有猜测,也不再有伪造的用户代理。许多网站已经通过登录、应用内行为或购买历史知道请求背后的人。在这种情况下,网站可以发放[私人访问控制令牌(PACT)](https://cloudflare.net/news/news-details/2026/Cloudflare-Collaborates-With-Leading-Browsers-to-Develop-a-Privacy-First-Protocol-For-the-Global-Internet/default.aspx)。PACT与Mozilla、Google、Microsoft和Shopify联合发布,让网站可以以匿名方式担保,以便代理可以在其他地方展示令牌。合法代理可以更少的阻碍地进入。
然后,我们可以使代理更容易地完成其工作。[Markdown for Agents](https://developers.cloudflare.com/fundamentals/reference/markdown-for-agents/)让代理能够以更少代币和更少带宽读取网站。[WebMCP](https://blog.cloudflare.com/webmcp/)为他们提供了一种在你名下进行交互的本地方式。像[x402](https://x402.org/)这样的标准让他们能够直接支付商家。
**可读性**是很简单的。AI代理能够以对它们原生的方式读取内容并发挥它们的优势吗?代理消耗的带宽越少、代币越少,效果越好。每一个为人类渲染的HTML标签,无论如何都不会被看见,这不仅浪费了计算资源,也是代理需要支付以忽视的上下文窗口的污染。[Markdown for Agents](https://developers.cloudflare.com/fundamentals/reference/markdown-for-agents/)正是从服务器端解决这点。
在客户端,我们在构建浏览器时考虑代理作为一等公民。[Kitesurf](http://blog.cloudflare.com/kitesurf)是我们全新的浏览器,足够轻量,能在Workers上运行,每次请求后启动并被丢弃。它提供了代理所需的内容和功能,而不包含传统浏览器中人为导向特征的臃肿。
**可发现性**是代理互联网上的每一个经济时刻的开始。在代理能够读取资源、调用工具或支付交易之前,它必须知道资源的存在。搜索是故事的一半,代理需要通过为它们构建的接口找到所需的内容,而不是通过一个为输入较慢、浏览速度较快的人设计的关键词框。[AI搜索](https://developers.cloudflare.com/ai-search/)今天就可以使用,因此任何公共网站都可以被代理搜索到。
被发现是另一部分。内容创作者和API拥有者需要知道自己对代理的可见程度。[代理引擎优化(AEO)](http://blog.cloudflare.com/aeo)可以测量品牌在重要模型和代理上的可见性。如果你对你客户使用的代理没有可测量的可见度,那么在他们眼中你实际上是离线的。
**可调用性**是代理开始做事情的地方:预订桌子、续订订阅、提取报告。在人类网络上,这些都看起来不同,因为它们是为人类在用户界面上点击而设计的。一个代理试图向待办事项列表中添加一项条目时,必须解析HTML、猜测哪个按钮是“添加”、合成一个点击,并希望DOM在它最后查看以来没有变化。
[WebMCP](https://blog.cloudflare.com/webmcp/)允许网站通过浏览器直接向代理暴露其操作:
这个工具“合同”变得明确。不再需要解析HTML,也不再需要猜测表单字段。由于工具在页面中运行,它们可以重用用户的现有会话和状态。[代码模式](https://blog.cloudflare.com/code-mode/)更进一步。代理以代码思考,利用代码调用工具比用散文更快且更准确。由于代理调用的是端点而非抓取网页,因此向内容拥有者明确发出了实际使用哪些内容的信息。
**可支付性**是我们相信代理互联网所要去的地方。每一笔经济交易最终都需要一种支付方式。基于广告的模型正在崩溃。当用户是程序时,基于座位的模型不再适用。我们大家依赖的出版商不能仅靠那些永远不会发生的页面浏览和不能渲染广告的浏览器来维持自己。
一个从未通过广告获利的食谱网站,可以按fetch收费,赚取微薄利润,适应代理互联网的规模。当地报纸可以在读取时间内为文章授权,而无需许可协议或登录。另一方面,代理带着人类设置的预算和钱包出现。
每一次付费互动都会留下收据。出版商可以证明是哪个代理获取了哪个页面。代理可以证明它为所使用的内容付费。[钱包](https://blog.cloudflare.com/wallets/)允许代理轻松支付内容和API。[货币化网关](https://blog.cloudflare.com/monetization-gateway/)让域名所有者可以快速设置代理支付。
Cloudflare在这一切中设计上处于中间位置。我们已经连接了数十亿人类与他们访问的网站,保护他们、加速他们、保持他们在线。代理改变了流量,但并没有改变这项工作的形状——我们是一个中立的、高性能的层,出版商、商家、代理构建者和最终用户都可以信任我们站在他们这边,而不是与他们竞争。
我们希望给域名所有者工具,以支持他们想要支持的AI代理,并[阻止他们不想要的代理](https://blog.cloudflare.com/cloudflare-ai-audit-control-ai-content-crawlers/)。开发者工具可能希望变得[适合代理](http://blog.cloudflare.com/aeo),以鼓励AI代理去发现、推荐和支付他们。出版商可能希望阻止提取式AI代理(这些代理消耗资源却不回馈任何东西),但允许那些许可他们内容或为他们补偿的AI代理。一个非营利数据提供者可能希望阻止超出其速率限制的机器人或人类,但允许他们付费来解除封锁并用那些资金来覆盖过度的资源消耗。
## 机器人已死,机器人万岁
如今,区分<a href="https://blog.cloudflare.com/past-bots-and-humans/">机器人和人类并不那么简单了</a>。并不是说机器人是坏的,人类是好的,也不是机器人浪费着人类应该消耗的资源。这种简单的思维方式在代理的世界中已经过时。
我们将代理视作一种新的行为体。它们的行为可以是可取的,例如,以节省资源的方式读取内容,以域名所有者指定的方式与网站互动,并为其使用的东西付费。或者它们的行为也可以是不可取的,例如,毫无补偿地抓取数百万页面、试图规避阻止或忽略[robots.txt](https://www.cloudflare.com/learning/bots/what-is-robots-txt/)。我们相信,如果人类与机器人能够获得正确的工具,许多不可取的行为会减少,甚至转变为可取的行为。
## 缩小收入差距
Cloudflare花了数年时间检测机器人,让域名所有者能够控制机器人是否可以访问他们。现在缺失的是另一半:一旦代理被允许进入,这些代理与网站的交互方式。这就是这一套代理工具的目的:让网络变得可读、可发现、可调用、可支付。这四个原语都是基于开放标准构建的,因此没有任何单一公司可以垄断这些轨道。
一个开放的代理互联网需要双方的多样性。不仅需要多样化的出版商和内容创作者,还需要多样化的代理。如果需求方趋同,那么无论供给方多么开放,互联网仍然会变成围墙花园。
我们正在构建这种开放的替代品。加入我们,通过获取你的网站[使用我们新仪表板做好代理准备](http://blog.cloudflare.com/aeo),并注册以接收我们的答案引擎优化产品的新闻。如果你运营一个网站或代理,你可以使用我们的[AI Playground](https://playground.ai.cloudflare.com/)试验所有互联网的新技术。
---
原文链接:[点击查看](https://blog.cloudflare.com/the-agentic-internet/)
代理人已经出现——并不是作为一种新型软件,而是作为一种新型的网络访问者。
围绕这一新的访问者重塑的网络就是我们所称的代理互联网。我们看到它的未来是可读的、可发现的、可调用的和可支付的。要实现这个未来,它需要自己的工具和协议。
Cloudflare的开发者平台为代理人提供了运行的空间,以及构建它们的第一个工具。现在缺乏的,是那些让代理人与域名所有者协作,而不是碰撞的工具——在开放的互联网中,而不仅仅是在单一平台内。
每个浏览器一直以来通过一个名为用户代理的标头向网络标识自己。这个名称只有在你意识到浏览器是代表你行动的时候才有意义。现在,用户代理真的成为了用户的代理:一个在个人的名义下访问网络的程序。今天,它最成熟的形式是编码代理,能够读写代码、获取所需文档,而从未见到它所读取的页面。
代理不会渲染你的CSS,观察你的主图像,或点击你的广告。但它的另一端有一个付费的人。每一个请求现在都花费着某人的钱,并承载着一个目的。阻止它,你就是在阻止你的客户。把它当成抓取工具,你就会失去他们。
每个代理的运行都是因为有人——一个人或一个企业——在为其所做的事情付费。大多数人不会无缘无故花费代币。这种互联网的版本,即每个请求的另一端都有结果和账单,将与我们现在拥有的互联网截然不同。
这张网络并不是为了这个目的而构建的,你的分析工具也不是。大多数情况下,你的商业模式也不是。代理如何阅读、发现、调用和支付,将决定互联网是保持开放还是变得封闭。在未来的一个版本中,少数几个栈掌控了发现、身份和支付,而其他所有人都通过它们进行路由。在另一个版本中,互联网保持开放:建立在任何人都可以实现的标准之上的原语,依靠中立的轨道运行,因为代码是公开的。
Cloudflare相信开放的互联网,我们有能力帮助建设一个繁荣的未来。
我们所构建的规范是任何人都可以实现的开放标准——x402、MCP、Web Bot Auth、PACT。域名所有者可以选择自己的身份提供者、支付处理器和代理合作伙伴。Cloudflare只是一个选择,并不是整个栈。我们是客户所使用的相同轨道的零客户,没有特权路径或只有我们能访问的早期访问API。这是我们在过去十五年为人类网络所做的工作,也是我们打算为代理互联网做的工作。
技术本身并不是人类在代理互联网中所关注的。他们正在接触一种新媒介,并将以他们判断网络的方式来评判:是否更优秀。是否寻找和预定一个桌子只需一次交换而非九次。是否知道他们在与谁打交道。支付是否感觉安全。
## 我们的理念:一个可读、可发现、可调用和可支付的代理互联网
这一切从身份开始。[Web Bot Auth](https://blog.cloudflare.com/web-bot-auth/)让机器人能够以密码学方式向它访问的任何网站确认自身身份,以便出版商可以决定谁可以被接纳,谁不能。不再有猜测,也不再有伪造的用户代理。许多网站已经通过登录、应用内行为或购买历史知道请求背后的人。在这种情况下,网站可以发放[私人访问控制令牌(PACT)](https://cloudflare.net/news/news-details/2026/Cloudflare-Collaborates-With-Leading-Browsers-to-Develop-a-Privacy-First-Protocol-For-the-Global-Internet/default.aspx)。PACT与Mozilla、Google、Microsoft和Shopify联合发布,让网站可以以匿名方式担保,以便代理可以在其他地方展示令牌。合法代理可以更少的阻碍地进入。
然后,我们可以使代理更容易地完成其工作。[Markdown for Agents](https://developers.cloudflare.com/fundamentals/reference/markdown-for-agents/)让代理能够以更少代币和更少带宽读取网站。[WebMCP](https://blog.cloudflare.com/webmcp/)为他们提供了一种在你名下进行交互的本地方式。像[x402](https://x402.org/)这样的标准让他们能够直接支付商家。
**可读性**是很简单的。AI代理能够以对它们原生的方式读取内容并发挥它们的优势吗?代理消耗的带宽越少、代币越少,效果越好。每一个为人类渲染的HTML标签,无论如何都不会被看见,这不仅浪费了计算资源,也是代理需要支付以忽视的上下文窗口的污染。[Markdown for Agents](https://developers.cloudflare.com/fundamentals/reference/markdown-for-agents/)正是从服务器端解决这点。
在客户端,我们在构建浏览器时考虑代理作为一等公民。[Kitesurf](http://blog.cloudflare.com/kitesurf)是我们全新的浏览器,足够轻量,能在Workers上运行,每次请求后启动并被丢弃。它提供了代理所需的内容和功能,而不包含传统浏览器中人为导向特征的臃肿。
**可发现性**是代理互联网上的每一个经济时刻的开始。在代理能够读取资源、调用工具或支付交易之前,它必须知道资源的存在。搜索是故事的一半,代理需要通过为它们构建的接口找到所需的内容,而不是通过一个为输入较慢、浏览速度较快的人设计的关键词框。[AI搜索](https://developers.cloudflare.com/ai-search/)今天就可以使用,因此任何公共网站都可以被代理搜索到。
被发现是另一部分。内容创作者和API拥有者需要知道自己对代理的可见程度。[代理引擎优化(AEO)](http://blog.cloudflare.com/aeo)可以测量品牌在重要模型和代理上的可见性。如果你对你客户使用的代理没有可测量的可见度,那么在他们眼中你实际上是离线的。
**可调用性**是代理开始做事情的地方:预订桌子、续订订阅、提取报告。在人类网络上,这些都看起来不同,因为它们是为人类在用户界面上点击而设计的。一个代理试图向待办事项列表中添加一项条目时,必须解析HTML、猜测哪个按钮是“添加”、合成一个点击,并希望DOM在它最后查看以来没有变化。
[WebMCP](https://blog.cloudflare.com/webmcp/)允许网站通过浏览器直接向代理暴露其操作:
这个工具“合同”变得明确。不再需要解析HTML,也不再需要猜测表单字段。由于工具在页面中运行,它们可以重用用户的现有会话和状态。[代码模式](https://blog.cloudflare.com/code-mode/)更进一步。代理以代码思考,利用代码调用工具比用散文更快且更准确。由于代理调用的是端点而非抓取网页,因此向内容拥有者明确发出了实际使用哪些内容的信息。
**可支付性**是我们相信代理互联网所要去的地方。每一笔经济交易最终都需要一种支付方式。基于广告的模型正在崩溃。当用户是程序时,基于座位的模型不再适用。我们大家依赖的出版商不能仅靠那些永远不会发生的页面浏览和不能渲染广告的浏览器来维持自己。
一个从未通过广告获利的食谱网站,可以按fetch收费,赚取微薄利润,适应代理互联网的规模。当地报纸可以在读取时间内为文章授权,而无需许可协议或登录。另一方面,代理带着人类设置的预算和钱包出现。
每一次付费互动都会留下收据。出版商可以证明是哪个代理获取了哪个页面。代理可以证明它为所使用的内容付费。[钱包](https://blog.cloudflare.com/wallets/)允许代理轻松支付内容和API。[货币化网关](https://blog.cloudflare.com/monetization-gateway/)让域名所有者可以快速设置代理支付。
Cloudflare在这一切中设计上处于中间位置。我们已经连接了数十亿人类与他们访问的网站,保护他们、加速他们、保持他们在线。代理改变了流量,但并没有改变这项工作的形状——我们是一个中立的、高性能的层,出版商、商家、代理构建者和最终用户都可以信任我们站在他们这边,而不是与他们竞争。
我们希望给域名所有者工具,以支持他们想要支持的AI代理,并[阻止他们不想要的代理](https://blog.cloudflare.com/cloudflare-ai-audit-control-ai-content-crawlers/)。开发者工具可能希望变得[适合代理](http://blog.cloudflare.com/aeo),以鼓励AI代理去发现、推荐和支付他们。出版商可能希望阻止提取式AI代理(这些代理消耗资源却不回馈任何东西),但允许那些许可他们内容或为他们补偿的AI代理。一个非营利数据提供者可能希望阻止超出其速率限制的机器人或人类,但允许他们付费来解除封锁并用那些资金来覆盖过度的资源消耗。
## 机器人已死,机器人万岁
如今,区分<a href="https://blog.cloudflare.com/past-bots-and-humans/">机器人和人类并不那么简单了</a>。并不是说机器人是坏的,人类是好的,也不是机器人浪费着人类应该消耗的资源。这种简单的思维方式在代理的世界中已经过时。
我们将代理视作一种新的行为体。它们的行为可以是可取的,例如,以节省资源的方式读取内容,以域名所有者指定的方式与网站互动,并为其使用的东西付费。或者它们的行为也可以是不可取的,例如,毫无补偿地抓取数百万页面、试图规避阻止或忽略[robots.txt](https://www.cloudflare.com/learning/bots/what-is-robots-txt/)。我们相信,如果人类与机器人能够获得正确的工具,许多不可取的行为会减少,甚至转变为可取的行为。
## 缩小收入差距
Cloudflare花了数年时间检测机器人,让域名所有者能够控制机器人是否可以访问他们。现在缺失的是另一半:一旦代理被允许进入,这些代理与网站的交互方式。这就是这一套代理工具的目的:让网络变得可读、可发现、可调用、可支付。这四个原语都是基于开放标准构建的,因此没有任何单一公司可以垄断这些轨道。
一个开放的代理互联网需要双方的多样性。不仅需要多样化的出版商和内容创作者,还需要多样化的代理。如果需求方趋同,那么无论供给方多么开放,互联网仍然会变成围墙花园。
我们正在构建这种开放的替代品。加入我们,通过获取你的网站[使用我们新仪表板做好代理准备](http://blog.cloudflare.com/aeo),并注册以接收我们的答案引擎优化产品的新闻。如果你运营一个网站或代理,你可以使用我们的[AI Playground](https://playground.ai.cloudflare.com/)试验所有互联网的新技术。
---
原文链接:[点击查看](https://blog.cloudflare.com/the-agentic-internet/)
评论
暂无评论。