从排名到推荐:为 AI 助手时代做好网站准备
你的下一个客户可能不是通过搜索引擎找到你的。他们会问 AI 助手:"我该如何做 X?";"对像我这样的人来说,哪个选项最好?";"帮我处理这个吧",然后 AI 助手会找到答案、权衡选项,并代表客户采取行动。越来越多的情况下,客户是否选择你的决定取决于模型的回应,而在客户看到你的网站之前,决定已经做出了。
这种具有“代入感”的用户群已经出现:根据我们的统计,目前不到一半的 HTML 页面的请求来自人类 [现在的人类请求](https://radar.cloudflare.com/traffic#bot-vs-human)。并不是所有这些机器都是代表个人在行动的代理,但这部分人数正在快速增长。答案引擎、购物助手和研究工具将决定哪些企业能够被发现和推荐。可发现性不再只是意味着在搜索结果页面上排名。如今,它意味着被发现、被阅读,并被引导客户的代理自信地推荐。
传统的指标,如人类点击和页面浏览量,已经无法全面反映网站的表现。我们花时间与网站所有者交谈,他们面对着充满 AI 机器人的访问日志,却对这些机器人是否能够使用自己的网站或推荐产品和服务给用户完全无视。我们听到了两个主要的问题:
- 代理真的能使用我的网站吗?
- 我被推荐了吗?
为了帮助网站所有者回答这些问题,我们已将我们关于代理准备性的 [先前工作](https://blog.cloudflare.com/agent-readiness/) 集成到 Cloudflare 控制面板中,并新增了我们的答案引擎优化 (AEO) 工具。这些工具将代理视为你网站的核心用户群,向你展示代理将如何看待你的网站,以及你被推荐的频率。
这个机会巨大,而门槛很低,因为大多数网站尚未为这一用户群体构建。正如早期的 SEO 奖励了为搜索引擎构建的网站,现在为代理构建的网站将获得同样的奖励。那些易于被找到、阅读和信任的网站将被代理推荐。
## 诊断:你的网站为代理准备好了吗?
诊断是在代理准备性中的技术检查。它以代理阅读你的网站的方式扫描你的网站:确定是否允许访问,是否能够发现你的内容,提取干净的机器可读副本,并找到它可以调用的接口。
一个人仅仅加载你的主页,而代理会依赖于你的 robots.txt、你的网站地图、响应头、你内容的 Markdown 版本,以及已发布的元数据进行身份验证和工具。
诊断对主机名进行这些检查,并将结果汇聚成一个代理准备性视图,从“未准备”到完全支持代理。每次检查的结果为通过、失败或中立,并附有说明其重要性的备注以及显示我们所看到的确切请求和响应的证据路径。
这些检查根据努力的程度进行分组,以便你知道该从哪里开始:
- 快速胜利:大多数网站缺失的高影响基础,包括可爬取的 robots.txt、XML 网站地图、AI 爬虫规则,以及向代理提供清晰的 Markdown。
- 技术基础:下一个层级,包括内容信号,说明你的内容可能如何被使用、API 目录、链接头和代理登录说明。
- 高级集成:代理原生功能,包括 OAuth 发现、MCP(模型上下文协议)和 A2A(代理到代理)代理卡、技能索引、Web Bot Auth 和 WebMCP。
- 商务:新兴的代理支付标准,包括 [x402](https://blog.cloudflare.com/x402/)(经典 HTTP 402 需要付款状态码的扩展)、ACP(代理商务协议)、通用商务协议 (UCP) 和 AP2(代理支付协议)。这只是信息性内容,目前不计入你的分数。
每个建议的改进都有后续步骤。当有 Cloudflare 功能可以帮助时,会有一个“在 Cloudflare 中设置”的链接直接跳转到设置页面,比如为代理启用 Markdown 或管理 robots.txt。对于其他所有内容,我们提供一个“复制代理提示”按钮,建议你的编程代理需要构建的内容。进行更改后,再次扫描,看看勾选项是否变为绿色。
## AEO:AI 助手是否在推荐你?
诊断告诉你代理是否能读取你的网站。AEO 标签告诉你接下来会发生什么:当客户在你的类别中询问 AI 助手时,它是否推荐你或者你的竞争对手?你无法像搜索排名那样来查询这个情况。没有展示计数,也没有漏掉点击的报告,所以当竞争对手被提及而不是你时,销售就丢失了,而你却不知情。
我们通过你的网站推测你的行业(例如,健康和健身)和类别(例如,运动服饰),并用可能的客户提示去探测主要助手(现阶段是 Anthropic 的 Claude 和 OpenAI 的 GPT)以查看他们如何回应。我们根据真实世界的发现结构这些提示,询问推荐、产品比较和你类别内的一般建议。通过观察模型对这些现实查询的回答,你获得如下指标:
- **引用率**:在你的类别中引用你的网站作为来源的答案所占的比例;
- **显著性**:当你被引用时,答案中有多少内容实际上属于你,以及内容出现得有多早;
- **提及率**:助手在回答中提及你品牌的频率——例如,“Cloudflare”在回答中出现的频率,无论 [cloudflare.com](http://cloudflare.com) 是否被引用作为来源。与引用率一起阅读,它区分了意识与归因:助手提到你要比引用你多得多,意味着你在他们的雷达上,但还没有获得引用——这是一个特定的、可针对的差距;
- **声音份额**:你与竞争对手的引用份额,这样你可以看到谁在赢得你失去的提示。
为了评估 AI 模型是如何看待你的市场存在的,我们在每个行业和类别下建立基准,然后为特定网站打分。我们会使用可能的提示查询 AI 助手——不指定你的品牌——并记录被引用的网站、它们出现的顺序以及它们的显著性。
为了避免在每次网站所有者运行扫描时重复查询模型,我们对每个类别的面板进行一次查询,并在该域的所有账户中重用该基线。预先计算此数据集提供了三个主要好处:
- **零延迟**:快速加载结果,不再需要等待实时的模型查询。
- **更低的计算开销**:在类别层面聚合查询可以避免数千次扫描中冗余的 AI 调用。
- **行业适配评分**:重用面板语料库让我们能够映射哪些品牌一直一起出现,从而可以导出一个行业适配评分,衡量 AI 助手是否将你的网站视为与实际竞争对手同时存在。
AI 助手很少以完全相同的方式回答相同的问题。为了解决这种差异,我们使用 [Cloudflare AI Gateway](https://www.cloudflare.com/products/ai-gateway/) 多次对每个助手进行提示,并跨不同的模型。同样,我们查看客户将看到的响应——答案文本以及每个助手引用的来源,并从中提取多个信号。
我们评估的不仅仅是你的网站是否被提及,而是你是否被引用为来源,你的引用在回答中出现得有多早,以及最终答案中有多少内容是归于你的。当需要进行真实判断时,Workers AI 在我们自己的基础设施上进行重负荷处理,以读取每个回复并评估你的引用和提及的表现。我们还使用确切文本分析,而不是模型对自身输出进行评分。综合所有的回复可以产生可操作的指标。通过抽象多模型的查询和评估流程,该工具提供了指标,而无需你构建自己的评估框架。
在答案的旁边,AI 操作员活动显示了你的网站上的真实爬虫和推荐流量,按操作人员(OpenAI、Google 等)细分:谁在阅读你的内容,谁把访问者带回,并且他们在过程中遇到的错误(403 被阻拦,404 死链接)。值得关注的模式是,某个操作人员爬取了你数千个页面但没有带来任何访问者,利用了你的工作却不带来客户。
由于这些数字特定于你的网站,你可以进行实验,重新运行扫描,并测量在带给你生意的确切问题上的影响。
## 迎接你的其他受众
直到现在,评估代理意味着猜测:通过日志 grep 来推断谁访问过,或给聊天机器人输入提示并观察它是否提到了你。但通过代理准备性和 AEO,你可以获取所需数据以采取行动。而且,因为请求确实是通过 Cloudflare 传递的,这些工具测量而不是估算,从而尽可能地提供准确的数据,并将随着时间的推移而改善。
帮助你了解谁在访问信息的同时决定如何以自身的方式进行互动,这一直是我们所做的。代理只是最新的受众,能够容易被代理找到、理解和信任的企业,才是那些被推荐的企业。代理准备性是你发现自己是否属于其中之一的地方,以及如果还未达到这一点该如何改进。
准备好发现 AI 代理是否向你发送客户吗?请前往控制面板的概览标签,以使你的网站准备就绪,申请 AEO 可见性的早期访问。
_在构建开放、面向代理的网络吗?请在你的 [Cloudflare 控制面板](https://dash.cloudflare.com) 中打开 **代理准备性** 标签,并告诉我们你在 [Cloudflare Developer Discord](https://discord.cloudflare.com) 上正在构建的内容。_
---
原文链接:[点击查看](https://blog.cloudflare.com/aeo/)
这种具有“代入感”的用户群已经出现:根据我们的统计,目前不到一半的 HTML 页面的请求来自人类 [现在的人类请求](https://radar.cloudflare.com/traffic#bot-vs-human)。并不是所有这些机器都是代表个人在行动的代理,但这部分人数正在快速增长。答案引擎、购物助手和研究工具将决定哪些企业能够被发现和推荐。可发现性不再只是意味着在搜索结果页面上排名。如今,它意味着被发现、被阅读,并被引导客户的代理自信地推荐。
传统的指标,如人类点击和页面浏览量,已经无法全面反映网站的表现。我们花时间与网站所有者交谈,他们面对着充满 AI 机器人的访问日志,却对这些机器人是否能够使用自己的网站或推荐产品和服务给用户完全无视。我们听到了两个主要的问题:
- 代理真的能使用我的网站吗?
- 我被推荐了吗?
为了帮助网站所有者回答这些问题,我们已将我们关于代理准备性的 [先前工作](https://blog.cloudflare.com/agent-readiness/) 集成到 Cloudflare 控制面板中,并新增了我们的答案引擎优化 (AEO) 工具。这些工具将代理视为你网站的核心用户群,向你展示代理将如何看待你的网站,以及你被推荐的频率。
这个机会巨大,而门槛很低,因为大多数网站尚未为这一用户群体构建。正如早期的 SEO 奖励了为搜索引擎构建的网站,现在为代理构建的网站将获得同样的奖励。那些易于被找到、阅读和信任的网站将被代理推荐。
## 诊断:你的网站为代理准备好了吗?
诊断是在代理准备性中的技术检查。它以代理阅读你的网站的方式扫描你的网站:确定是否允许访问,是否能够发现你的内容,提取干净的机器可读副本,并找到它可以调用的接口。
一个人仅仅加载你的主页,而代理会依赖于你的 robots.txt、你的网站地图、响应头、你内容的 Markdown 版本,以及已发布的元数据进行身份验证和工具。
诊断对主机名进行这些检查,并将结果汇聚成一个代理准备性视图,从“未准备”到完全支持代理。每次检查的结果为通过、失败或中立,并附有说明其重要性的备注以及显示我们所看到的确切请求和响应的证据路径。
这些检查根据努力的程度进行分组,以便你知道该从哪里开始:
- 快速胜利:大多数网站缺失的高影响基础,包括可爬取的 robots.txt、XML 网站地图、AI 爬虫规则,以及向代理提供清晰的 Markdown。
- 技术基础:下一个层级,包括内容信号,说明你的内容可能如何被使用、API 目录、链接头和代理登录说明。
- 高级集成:代理原生功能,包括 OAuth 发现、MCP(模型上下文协议)和 A2A(代理到代理)代理卡、技能索引、Web Bot Auth 和 WebMCP。
- 商务:新兴的代理支付标准,包括 [x402](https://blog.cloudflare.com/x402/)(经典 HTTP 402 需要付款状态码的扩展)、ACP(代理商务协议)、通用商务协议 (UCP) 和 AP2(代理支付协议)。这只是信息性内容,目前不计入你的分数。
每个建议的改进都有后续步骤。当有 Cloudflare 功能可以帮助时,会有一个“在 Cloudflare 中设置”的链接直接跳转到设置页面,比如为代理启用 Markdown 或管理 robots.txt。对于其他所有内容,我们提供一个“复制代理提示”按钮,建议你的编程代理需要构建的内容。进行更改后,再次扫描,看看勾选项是否变为绿色。
## AEO:AI 助手是否在推荐你?
诊断告诉你代理是否能读取你的网站。AEO 标签告诉你接下来会发生什么:当客户在你的类别中询问 AI 助手时,它是否推荐你或者你的竞争对手?你无法像搜索排名那样来查询这个情况。没有展示计数,也没有漏掉点击的报告,所以当竞争对手被提及而不是你时,销售就丢失了,而你却不知情。
我们通过你的网站推测你的行业(例如,健康和健身)和类别(例如,运动服饰),并用可能的客户提示去探测主要助手(现阶段是 Anthropic 的 Claude 和 OpenAI 的 GPT)以查看他们如何回应。我们根据真实世界的发现结构这些提示,询问推荐、产品比较和你类别内的一般建议。通过观察模型对这些现实查询的回答,你获得如下指标:
- **引用率**:在你的类别中引用你的网站作为来源的答案所占的比例;
- **显著性**:当你被引用时,答案中有多少内容实际上属于你,以及内容出现得有多早;
- **提及率**:助手在回答中提及你品牌的频率——例如,“Cloudflare”在回答中出现的频率,无论 [cloudflare.com](http://cloudflare.com) 是否被引用作为来源。与引用率一起阅读,它区分了意识与归因:助手提到你要比引用你多得多,意味着你在他们的雷达上,但还没有获得引用——这是一个特定的、可针对的差距;
- **声音份额**:你与竞争对手的引用份额,这样你可以看到谁在赢得你失去的提示。
为了评估 AI 模型是如何看待你的市场存在的,我们在每个行业和类别下建立基准,然后为特定网站打分。我们会使用可能的提示查询 AI 助手——不指定你的品牌——并记录被引用的网站、它们出现的顺序以及它们的显著性。
为了避免在每次网站所有者运行扫描时重复查询模型,我们对每个类别的面板进行一次查询,并在该域的所有账户中重用该基线。预先计算此数据集提供了三个主要好处:
- **零延迟**:快速加载结果,不再需要等待实时的模型查询。
- **更低的计算开销**:在类别层面聚合查询可以避免数千次扫描中冗余的 AI 调用。
- **行业适配评分**:重用面板语料库让我们能够映射哪些品牌一直一起出现,从而可以导出一个行业适配评分,衡量 AI 助手是否将你的网站视为与实际竞争对手同时存在。
AI 助手很少以完全相同的方式回答相同的问题。为了解决这种差异,我们使用 [Cloudflare AI Gateway](https://www.cloudflare.com/products/ai-gateway/) 多次对每个助手进行提示,并跨不同的模型。同样,我们查看客户将看到的响应——答案文本以及每个助手引用的来源,并从中提取多个信号。
我们评估的不仅仅是你的网站是否被提及,而是你是否被引用为来源,你的引用在回答中出现得有多早,以及最终答案中有多少内容是归于你的。当需要进行真实判断时,Workers AI 在我们自己的基础设施上进行重负荷处理,以读取每个回复并评估你的引用和提及的表现。我们还使用确切文本分析,而不是模型对自身输出进行评分。综合所有的回复可以产生可操作的指标。通过抽象多模型的查询和评估流程,该工具提供了指标,而无需你构建自己的评估框架。
在答案的旁边,AI 操作员活动显示了你的网站上的真实爬虫和推荐流量,按操作人员(OpenAI、Google 等)细分:谁在阅读你的内容,谁把访问者带回,并且他们在过程中遇到的错误(403 被阻拦,404 死链接)。值得关注的模式是,某个操作人员爬取了你数千个页面但没有带来任何访问者,利用了你的工作却不带来客户。
由于这些数字特定于你的网站,你可以进行实验,重新运行扫描,并测量在带给你生意的确切问题上的影响。
## 迎接你的其他受众
直到现在,评估代理意味着猜测:通过日志 grep 来推断谁访问过,或给聊天机器人输入提示并观察它是否提到了你。但通过代理准备性和 AEO,你可以获取所需数据以采取行动。而且,因为请求确实是通过 Cloudflare 传递的,这些工具测量而不是估算,从而尽可能地提供准确的数据,并将随着时间的推移而改善。
帮助你了解谁在访问信息的同时决定如何以自身的方式进行互动,这一直是我们所做的。代理只是最新的受众,能够容易被代理找到、理解和信任的企业,才是那些被推荐的企业。代理准备性是你发现自己是否属于其中之一的地方,以及如果还未达到这一点该如何改进。
准备好发现 AI 代理是否向你发送客户吗?请前往控制面板的概览标签,以使你的网站准备就绪,申请 AEO 可见性的早期访问。
_在构建开放、面向代理的网络吗?请在你的 [Cloudflare 控制面板](https://dash.cloudflare.com) 中打开 **代理准备性** 标签,并告诉我们你在 [Cloudflare Developer Discord](https://discord.cloudflare.com) 上正在构建的内容。_
---
原文链接:[点击查看](https://blog.cloudflare.com/aeo/)
评论
暂无评论。