答案已发布2小时前Last edited 2小时前24 来源

一条 robots.txt 规则，能否让网站拒绝 AI 训练？

2026 年 10 月 30 日，Google、OpenAI、Microsoft 和 Anthropic 表态支持通过 robots.txt 共享网站对生成式 AI 训练的偏好，使用 usage ai training 信号。[2][8] Anthropic 已开始实施；Microsoft 计划从 2027 年 2 月 1 日起执行，Google 目标为 2027 年初，OpenAI 尚未公布明确日期。[3][8][33] 该信号表达的是训练用途偏好，不会自动禁止抓取或让网页退出搜索；Microsoft 还将另行提供页面级 AI Grounding 控制。[3][7][17][19]

发布者使用 GPT-6 Luna 编辑图片由 GPT Image 2 生成

使用 Studio Global AI 搜索并核查事实浏览更多热门页面

研究答案

要点

2026 年 10 月 30 日，Google、OpenAI、Microsoft 和 Anthropic 表态支持通过 robots.txt 共享网站对生成式 AI 训练的偏好，使用 usage ai training 信号。[2][8]
Anthropic 已开始实施；Microsoft 计划从 2027 年 2 月 1 日起执行，Google 目标为 2027 年初，OpenAI 尚未公布明确日期。[3][8][33]
该信号表达的是训练用途偏好，不会自动禁止抓取或让网页退出搜索；Microsoft 还将另行提供页面级 AI Grounding 控制。[3][7][17][19]

Illustration of a robots.txt file expressing a shared AI training preference — What did Google, OpenAI, Microsoft, and Anthropic commit to on October 30, 2026, regarding a shared robots.txt opt-out signal for generativeIllustration of how a shared robots.txt token can express an AI-training preference.
AI 提示
Create a landscape editorial hero image for this Studio Global article: What did Google, OpenAI, Microsoft, and Anthropic commit to on October 30, 2026, regarding a shared robots.txt opt-out signal for generative. Article summary: On October 30, 2026, Google, OpenAI, Microsoft, and Anthropic backed a shared robots.txt signal for expressing whether website content may be used for generative AI training, rather than requiring publishers to address e. Topic tags: general, general web. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks, charts with fake numbers, clic
openai.com

四家 AI 公司支持一种让网站发布者统一表达训练用途偏好的方式：在 robots.txt 中使用 __usage_ai-training。这有望减少发布者逐家设置规则的麻烦，但目前它仍是 Internet-Draft（互联网草案），各家实施时间也不相同。2 8 41

共享信号怎么写？

Anthropic 标准负责人 Kevin Kelley 向 IETF（互联网工程任务组）的 AI Preferences 工作组提交了 Machine-Readable Training Preference Signal。这份提案把 __usage_ai-training 作为 robots.txt 中的策略标记，用来表达网站内容是否可用于生成式 AI 训练，而不是针对某一家公司的爬虫。2 41

若要表达全站不允许用于训练，可以写成：

User-agent: __usage_ai-training
Disallow: /

也可以用路径规则设定范围。例如，整体不允许用于训练，但对 /permitted/ 路径开放例外：7

User-agent: __usage_ai-training
Disallow: /
Allow: /permitted/

提案要求明确写出这个策略标记；单独使用 User-agent: * 并不能表达 __usage_ai-training 这项偏好。4

它不等于禁止抓取或退出搜索

这项信号针对的是内容能否用于模型训练，不是通用的爬取禁令，也不会自动要求搜索引擎将网页从结果中移除。7 8

Microsoft 表示，新偏好不会改变网页出现在 Bing 常规搜索结果中的资格；这是 Microsoft 对 Bing 的说明，不应视为所有公司的搜索产品都作出同样保证。19

四家公司的实施进度并不同步

四家公司于 2026 年 10 月 30 日宣布支持，但“支持”不代表规则已经全面上线。8

**Anthropic：**Kevin Kelley 表示公司已经开始实施，但现有报道没有给出完整上线日期。8
**Google：**计划在 2027 年初支持。如果网站设置了共享拒绝信号，却没有明确设置 Google-Extended，Google 计划将共享偏好视作对 Google-Extended 的禁止规则。因此，Google 的专属控制仍与共享信号如何被解释有关。33 35
**Microsoft／Bing：**计划自 2027 年 2 月 1 日起，在 Bing 抓取网页时遵循共享训练偏好。3 17
**OpenAI：**表示会在“未来几个月”遵循该信号，但现有报道没有提供确定的实施日期。5 8

因此，这项信号提供了共同表达偏好的方式，但目前没有统一的上线时间表，也没有一个由四家公司共同运行的执行系统。8

Microsoft 另设 AI Grounding 偏好

Microsoft 还将推出单独的、按页面设置的 AI Grounding 偏好。这里的 grounding 指利用网页内容为生成式回答提供信息，与训练模型是不同用途。现有报道指出，Microsoft 没有提供全站适用的 robots.txt grounding 偏好。3 17

报道列出的 grounding 选项包括：

**Allow：**允许用于 grounding。
**Disallow：**不允许用于 grounding。
**DisallowExtended：**有限度地允许 grounding；内容仍可用于 Microsoft 自营体验，但不用于 Microsoft 提供给第三方的 grounding 服务。3 17

对仍在使用旧控制的站点，Microsoft 的过渡安排也有几个日期需要留意：

**2026 年 12 月 15 日：**符合条件、使用 NoArchive 或 NoCache 的网站，预计可在 Bing Webmaster Tools 中设置临时 grounding 过渡偏好。3 51
**2027 年 2 月 1 日：**Microsoft 计划在 Bing 抓取网页时开始遵循新的偏好。3 17
**2027 年 3 月 1 日：**使用 NoArchive 或 NoCache 表达这些偏好的网站，报道所列的迁移期限。44 46

Microsoft 表示，这些变化不会影响网页出现在 Bing 常规搜索结果中的资格；这是 Microsoft 针对 Bing 的说法。19

发布者仍需留意的限制

这还不是正式标准。 __usage_ai-training 目前仍是提交给 IETF AI Preferences 工作组的 Internet-Draft，而非已经完成的 IETF 标准。发布者应把它视为正在形成中的共享偏好，而不是所有网络服务都必须遵循的技术规则。8 41

它表达偏好，不会技术性地挡住访问。 参与的服务商表示会遵循该信号，但它本身不能阻止未参与的爬虫访问网站。7 8

**已收集的内容如何处理，仍不明确。**现有资料没有说明这些承诺是否覆盖实施前已收集的内容、是否要求删除既有数据，或会不会影响已经训练完成的模型。

**Meta 的支持情况尚未得到确认。**现有资料没有证实 Meta 在表态支持之外，是否承诺实施这一信号，因此发布者不应据此假设 Meta 会遵循它。

对网站运营者来说，这条新规则提供了一个更统一的表达入口；但在各家真正落实之前，它并不能替代对各平台规则、抓取设置和过渡期限的分别核对。

Studio Global AI

继续你的研究

此页面包含一个有来源支持的答案，您可以在 Studio Global 内继续。

使用 Studio Global AI 搜索并核查事实

人们还问

“一条 robots.txt 规则，能否让网站拒绝 AI 训练？”的简短答案是什么？

2026 年 10 月 30 日，Google、OpenAI、Microsoft 和 Anthropic 表态支持通过 robots.txt 共享网站对生成式 AI 训练的偏好，使用 usage ai training 信号。[2][8]

首先要验证的关键点是什么？

接下来在实践中我应该做什么？

该信号表达的是训练用途偏好，不会自动禁止抓取或让网页退出搜索；Microsoft 还将另行提供页面级 AI Grounding 控制。[3][7][17][19]

来源

答案已发布2小时前Last edited 2小时前24 来源

一条 robots.txt 规则，能否让网站拒绝 AI 训练？

发布者使用 GPT-6 Luna 编辑图片由 GPT Image 2 生成

使用 Studio Global AI 搜索并核查事实浏览更多热门页面

研究答案

要点

2026 年 10 月 30 日，Google、OpenAI、Microsoft 和 Anthropic 表态支持通过 robots.txt 共享网站对生成式 AI 训练的偏好，使用 usage ai training 信号。[2][8]
Anthropic 已开始实施；Microsoft 计划从 2027 年 2 月 1 日起执行，Google 目标为 2027 年初，OpenAI 尚未公布明确日期。[3][8][33]
该信号表达的是训练用途偏好，不会自动禁止抓取或让网页退出搜索；Microsoft 还将另行提供页面级 AI Grounding 控制。[3][7][17][19]

共享信号怎么写？

若要表达全站不允许用于训练，可以写成：

User-agent: __usage_ai-training
Disallow: /

也可以用路径规则设定范围。例如，整体不允许用于训练，但对 /permitted/ 路径开放例外：7

User-agent: __usage_ai-training
Disallow: /
Allow: /permitted/

提案要求明确写出这个策略标记；单独使用 User-agent: * 并不能表达 __usage_ai-training 这项偏好。4

它不等于禁止抓取或退出搜索

这项信号针对的是内容能否用于模型训练，不是通用的爬取禁令，也不会自动要求搜索引擎将网页从结果中移除。7 8

Microsoft 表示，新偏好不会改变网页出现在 Bing 常规搜索结果中的资格；这是 Microsoft 对 Bing 的说明，不应视为所有公司的搜索产品都作出同样保证。19

四家公司的实施进度并不同步

四家公司于 2026 年 10 月 30 日宣布支持，但“支持”不代表规则已经全面上线。8

**Anthropic：**Kevin Kelley 表示公司已经开始实施，但现有报道没有给出完整上线日期。8
**Google：**计划在 2027 年初支持。如果网站设置了共享拒绝信号，却没有明确设置 Google-Extended，Google 计划将共享偏好视作对 Google-Extended 的禁止规则。因此，Google 的专属控制仍与共享信号如何被解释有关。33 35
**Microsoft／Bing：**计划自 2027 年 2 月 1 日起，在 Bing 抓取网页时遵循共享训练偏好。3 17
**OpenAI：**表示会在“未来几个月”遵循该信号，但现有报道没有提供确定的实施日期。5 8

因此，这项信号提供了共同表达偏好的方式，但目前没有统一的上线时间表，也没有一个由四家公司共同运行的执行系统。8

Microsoft 另设 AI Grounding 偏好

报道列出的 grounding 选项包括：

**Allow：**允许用于 grounding。
**Disallow：**不允许用于 grounding。
**DisallowExtended：**有限度地允许 grounding；内容仍可用于 Microsoft 自营体验，但不用于 Microsoft 提供给第三方的 grounding 服务。3 17

对仍在使用旧控制的站点，Microsoft 的过渡安排也有几个日期需要留意：

**2026 年 12 月 15 日：**符合条件、使用 NoArchive 或 NoCache 的网站，预计可在 Bing Webmaster Tools 中设置临时 grounding 过渡偏好。3 51
**2027 年 2 月 1 日：**Microsoft 计划在 Bing 抓取网页时开始遵循新的偏好。3 17
**2027 年 3 月 1 日：**使用 NoArchive 或 NoCache 表达这些偏好的网站，报道所列的迁移期限。44 46

Microsoft 表示，这些变化不会影响网页出现在 Bing 常规搜索结果中的资格；这是 Microsoft 针对 Bing 的说法。19

发布者仍需留意的限制

它表达偏好，不会技术性地挡住访问。 参与的服务商表示会遵循该信号，但它本身不能阻止未参与的爬虫访问网站。7 8

**Meta 的支持情况尚未得到确认。**现有资料没有证实 Meta 在表态支持之外，是否承诺实施这一信号，因此发布者不应据此假设 Meta 会遵循它。

Studio Global AI

继续你的研究

此页面包含一个有来源支持的答案，您可以在 Studio Global 内继续。

使用 Studio Global AI 搜索并核查事实

人们还问

“一条 robots.txt 规则，能否让网站拒绝 AI 训练？”的简短答案是什么？

2026 年 10 月 30 日，Google、OpenAI、Microsoft 和 Anthropic 表态支持通过 robots.txt 共享网站对生成式 AI 训练的偏好，使用 usage ai training 信号。[2][8]

首先要验证的关键点是什么？

接下来在实践中我应该做什么？

该信号表达的是训练用途偏好，不会自动禁止抓取或让网页退出搜索；Microsoft 还将另行提供页面级 AI Grounding 控制。[3][7][17][19]

来源

答案已发布2小时前Last edited 2小时前24 来源

一条 robots.txt 规则，能否让网站拒绝 AI 训练？

发布者使用 GPT-6 Luna 编辑图片由 GPT Image 2 生成

使用 Studio Global AI 搜索并核查事实浏览更多热门页面

研究答案

要点

2026 年 10 月 30 日，Google、OpenAI、Microsoft 和 Anthropic 表态支持通过 robots.txt 共享网站对生成式 AI 训练的偏好，使用 usage ai training 信号。[2][8]
Anthropic 已开始实施；Microsoft 计划从 2027 年 2 月 1 日起执行，Google 目标为 2027 年初，OpenAI 尚未公布明确日期。[3][8][33]
该信号表达的是训练用途偏好，不会自动禁止抓取或让网页退出搜索；Microsoft 还将另行提供页面级 AI Grounding 控制。[3][7][17][19]

共享信号怎么写？

若要表达全站不允许用于训练，可以写成：

User-agent: __usage_ai-training
Disallow: /

也可以用路径规则设定范围。例如，整体不允许用于训练，但对 /permitted/ 路径开放例外：7

User-agent: __usage_ai-training
Disallow: /
Allow: /permitted/

提案要求明确写出这个策略标记；单独使用 User-agent: * 并不能表达 __usage_ai-training 这项偏好。4

它不等于禁止抓取或退出搜索

这项信号针对的是内容能否用于模型训练，不是通用的爬取禁令，也不会自动要求搜索引擎将网页从结果中移除。7 8

Microsoft 表示，新偏好不会改变网页出现在 Bing 常规搜索结果中的资格；这是 Microsoft 对 Bing 的说明，不应视为所有公司的搜索产品都作出同样保证。19

四家公司的实施进度并不同步

四家公司于 2026 年 10 月 30 日宣布支持，但“支持”不代表规则已经全面上线。8

**Anthropic：**Kevin Kelley 表示公司已经开始实施，但现有报道没有给出完整上线日期。8
**Google：**计划在 2027 年初支持。如果网站设置了共享拒绝信号，却没有明确设置 Google-Extended，Google 计划将共享偏好视作对 Google-Extended 的禁止规则。因此，Google 的专属控制仍与共享信号如何被解释有关。33 35
**Microsoft／Bing：**计划自 2027 年 2 月 1 日起，在 Bing 抓取网页时遵循共享训练偏好。3 17
**OpenAI：**表示会在“未来几个月”遵循该信号，但现有报道没有提供确定的实施日期。5 8

因此，这项信号提供了共同表达偏好的方式，但目前没有统一的上线时间表，也没有一个由四家公司共同运行的执行系统。8

Microsoft 另设 AI Grounding 偏好

报道列出的 grounding 选项包括：

**Allow：**允许用于 grounding。
**Disallow：**不允许用于 grounding。
**DisallowExtended：**有限度地允许 grounding；内容仍可用于 Microsoft 自营体验，但不用于 Microsoft 提供给第三方的 grounding 服务。3 17

对仍在使用旧控制的站点，Microsoft 的过渡安排也有几个日期需要留意：

**2026 年 12 月 15 日：**符合条件、使用 NoArchive 或 NoCache 的网站，预计可在 Bing Webmaster Tools 中设置临时 grounding 过渡偏好。3 51
**2027 年 2 月 1 日：**Microsoft 计划在 Bing 抓取网页时开始遵循新的偏好。3 17
**2027 年 3 月 1 日：**使用 NoArchive 或 NoCache 表达这些偏好的网站，报道所列的迁移期限。44 46

Microsoft 表示，这些变化不会影响网页出现在 Bing 常规搜索结果中的资格；这是 Microsoft 针对 Bing 的说法。19

发布者仍需留意的限制

它表达偏好，不会技术性地挡住访问。 参与的服务商表示会遵循该信号，但它本身不能阻止未参与的爬虫访问网站。7 8

**Meta 的支持情况尚未得到确认。**现有资料没有证实 Meta 在表态支持之外，是否承诺实施这一信号，因此发布者不应据此假设 Meta 会遵循它。

Studio Global AI

继续你的研究

此页面包含一个有来源支持的答案，您可以在 Studio Global 内继续。

使用 Studio Global AI 搜索并核查事实

人们还问

“一条 robots.txt 规则，能否让网站拒绝 AI 训练？”的简短答案是什么？

2026 年 10 月 30 日，Google、OpenAI、Microsoft 和 Anthropic 表态支持通过 robots.txt 共享网站对生成式 AI 训练的偏好，使用 usage ai training 信号。[2][8]

首先要验证的关键点是什么？

接下来在实践中我应该做什么？

该信号表达的是训练用途偏好，不会自动禁止抓取或让网页退出搜索；Microsoft 还将另行提供页面级 AI Grounding 控制。[3][7][17][19]

来源

答案已发布2小时前Last edited 2小时前24 来源

一条 robots.txt 规则，能否让网站拒绝 AI 训练？

发布者使用 GPT-6 Luna 编辑图片由 GPT Image 2 生成

使用 Studio Global AI 搜索并核查事实浏览更多热门页面

研究答案

要点

2026 年 10 月 30 日，Google、OpenAI、Microsoft 和 Anthropic 表态支持通过 robots.txt 共享网站对生成式 AI 训练的偏好，使用 usage ai training 信号。[2][8]
Anthropic 已开始实施；Microsoft 计划从 2027 年 2 月 1 日起执行，Google 目标为 2027 年初，OpenAI 尚未公布明确日期。[3][8][33]
该信号表达的是训练用途偏好，不会自动禁止抓取或让网页退出搜索；Microsoft 还将另行提供页面级 AI Grounding 控制。[3][7][17][19]

共享信号怎么写？

若要表达全站不允许用于训练，可以写成：

User-agent: __usage_ai-training
Disallow: /

也可以用路径规则设定范围。例如，整体不允许用于训练，但对 /permitted/ 路径开放例外：7

User-agent: __usage_ai-training
Disallow: /
Allow: /permitted/

提案要求明确写出这个策略标记；单独使用 User-agent: * 并不能表达 __usage_ai-training 这项偏好。4

它不等于禁止抓取或退出搜索

这项信号针对的是内容能否用于模型训练，不是通用的爬取禁令，也不会自动要求搜索引擎将网页从结果中移除。7 8

Microsoft 表示，新偏好不会改变网页出现在 Bing 常规搜索结果中的资格；这是 Microsoft 对 Bing 的说明，不应视为所有公司的搜索产品都作出同样保证。19

四家公司的实施进度并不同步

四家公司于 2026 年 10 月 30 日宣布支持，但“支持”不代表规则已经全面上线。8

**Anthropic：**Kevin Kelley 表示公司已经开始实施，但现有报道没有给出完整上线日期。8
**Google：**计划在 2027 年初支持。如果网站设置了共享拒绝信号，却没有明确设置 Google-Extended，Google 计划将共享偏好视作对 Google-Extended 的禁止规则。因此，Google 的专属控制仍与共享信号如何被解释有关。33 35
**Microsoft／Bing：**计划自 2027 年 2 月 1 日起，在 Bing 抓取网页时遵循共享训练偏好。3 17
**OpenAI：**表示会在“未来几个月”遵循该信号，但现有报道没有提供确定的实施日期。5 8

因此，这项信号提供了共同表达偏好的方式，但目前没有统一的上线时间表，也没有一个由四家公司共同运行的执行系统。8

Microsoft 另设 AI Grounding 偏好

报道列出的 grounding 选项包括：

**Allow：**允许用于 grounding。
**Disallow：**不允许用于 grounding。
**DisallowExtended：**有限度地允许 grounding；内容仍可用于 Microsoft 自营体验，但不用于 Microsoft 提供给第三方的 grounding 服务。3 17

对仍在使用旧控制的站点，Microsoft 的过渡安排也有几个日期需要留意：

**2026 年 12 月 15 日：**符合条件、使用 NoArchive 或 NoCache 的网站，预计可在 Bing Webmaster Tools 中设置临时 grounding 过渡偏好。3 51
**2027 年 2 月 1 日：**Microsoft 计划在 Bing 抓取网页时开始遵循新的偏好。3 17
**2027 年 3 月 1 日：**使用 NoArchive 或 NoCache 表达这些偏好的网站，报道所列的迁移期限。44 46

Microsoft 表示，这些变化不会影响网页出现在 Bing 常规搜索结果中的资格；这是 Microsoft 针对 Bing 的说法。19

发布者仍需留意的限制

它表达偏好，不会技术性地挡住访问。 参与的服务商表示会遵循该信号，但它本身不能阻止未参与的爬虫访问网站。7 8

**Meta 的支持情况尚未得到确认。**现有资料没有证实 Meta 在表态支持之外，是否承诺实施这一信号，因此发布者不应据此假设 Meta 会遵循它。

Studio Global AI

继续你的研究

此页面包含一个有来源支持的答案，您可以在 Studio Global 内继续。

使用 Studio Global AI 搜索并核查事实

人们还问

“一条 robots.txt 规则，能否让网站拒绝 AI 训练？”的简短答案是什么？

2026 年 10 月 30 日，Google、OpenAI、Microsoft 和 Anthropic 表态支持通过 robots.txt 共享网站对生成式 AI 训练的偏好，使用 usage ai training 信号。[2][8]

首先要验证的关键点是什么？

接下来在实践中我应该做什么？

该信号表达的是训练用途偏好，不会自动禁止抓取或让网页退出搜索；Microsoft 还将另行提供页面级 AI Grounding 控制。[3][7][17][19]