每日 Harness 开源 · Source
返回本期 · Back to 2026-09-17

行业动态 · Industry News2026-09-17 · Thursday, September 17, 2026

Stay discoverable in search while disallowing AI training

blog.cloudflare.com原文 ↗

Cloudflare 新增 Disallow AI Training,把 Search、Training、Agent 三类爬虫控制拆开,让站点拒绝训练却继续被混合用途的 Applebot、Googlebot 或 Bingbot 索引。官方称不到 1% 站点阻止搜索、17% 站点启用训练阻止,并要求 Accountable 运营者提供 robots.txt 选择、URL 级训练可见性及不影响传统搜索的承诺;当前 Agent 仍缺少统一拒绝标准。
–浏览

评论 · Comments