Cloudflare Disallow AI Training 是什么

2026年9月15日,Cloudflare 发布 Disallow AI Training 设置,由 Cloudflare 开发,是一项面向网站主的爬虫管理功能,闭源服务,官方未说明是否开源;它能让网站继续被搜索引擎收录,同时拒绝同一爬虫用内容训练 AI,苹果、谷歌、微软已承诺或已支持;就像一家商店允许路人进来看看招牌,但不允许有人把商品拍照拿去仿造。

先记住三个身份信息:

开发者:Cloudflare;产品类型:网站爬虫管理与 AI 训练偏好控制功能;开放方式:闭源服务。

它解决什么问题

Cloudflare 推出新的 Disallow AI Training 设置,允许网站主在保持搜索引擎可发现性的同时拒绝 AI 训练爬虫,并引入 Accountable 认证机制,影响大量网站主和主流爬虫运营商,属于核心功能与平台政策变化。

用简单的比喻解释

就像一家商店允许路人进来看看招牌和橱窗,但不允许有人把店里的商品拍照拿去仿造。Cloudflare 的新设置让网站主可以只拒绝“仿造”,不拒绝“看看”。

目前确认的能力

Cloudflare 官方博客于 2026 年 9 月 15 日宣布 Disallow AI Training 设置,允许网站主在 robots.txt 中发布禁止 AI 训练偏好,同时保留搜索爬虫访问;苹果、谷歌、微软已满足或承诺满足 Accountable 认证要求;Block 和 Block on pages with ads 现在也适用于混合用途爬虫。

适合哪些人

适合确实需要上述能力,并愿意先用非关键任务验证效果的个人、开发者或团队。第一次使用时,应从小任务开始,并保留人工检查。

现在还不能确定什么

原文未说明 Disallow AI Training 是否开源、具体技术实现细节、所有爬虫运营商完整名单、AI 摘要控制功能的具体上线日期和计费方式;也未说明非 Accountable 爬虫被阻止后的具体报告形式。

怎样继续核验

本专题只把官方资料能够支持的内容写成事实。后续重大版本、核心功能、价格、安全或开放范围变化,会按日期加入完整更新历史。