Cloudflare 推出「禁止 AI 训练」:搜索可收录、训练可拒绝
Cloudflare 为混合用途爬虫新增 Disallow AI Training,让站点继续被搜索收录的同时拒绝用于模型训练;苹果、谷歌、微软被列为 Accountable。
2026 年 9 月 15 日,Cloudflare 宣布新增「Disallow AI Training」设置:针对同时服务搜索与训练的混合用途爬虫,站点可在保持搜索可发现性的同时拒绝训练用途。
苹果、谷歌、微软被认定为满足或承诺满足透明度与选择权要求的 Accountable 运营商。同时,「Block」等更强拦截选项现在也会作用于含 Googlebot、Bingbot、Applebot 在内的混合用途爬虫,可能同时影响搜索。