Cloudflare推出拒绝AI训练的新设置

IT时代网9月16日消息，Cloudflare宣布推出新设置Disallow AI Training，允许网站管理员继续接受搜索引擎爬取，同时拒绝网站内容被用于AI训练。苹果、谷歌和微软已承诺遵守该设置。

网站管理员启用该设置后，Cloudflare仍会允许用于搜索、AI训练的混合爬虫抓取内容，但前提是系统将其标记为Accountable（可问责），其他AI训练爬虫仍会被拦截。官方表示，拦截这类爬虫有可能影响网站搜索排名。

Cloudflare表示，大多数客户无需进行任何更改。此前在Training中选择Block或Block on pages with ads的网站会自动迁移至Disallow AI Training。

此外，谷歌将在未来几周推出Google-Extended的URL层级透明度工具，苹果也在开发自己的URL层级工具，微软计划2027年初支持robots.txt拒绝AI训练。

注：本文综合自IT之家等，文中包含AI辅助创作的内容。

编辑：林一舟