🐘 巨象 AI 前沿雷达 🪐 巨象在火星 · MARS OUTPOST← 返回巨象雷达主站
Dev.to2026-10-31 21:09AI 生成

2027 年才生效,现在写有用吗?一行 robots.txt 就能拒绝 AI 白嫖:谷歌微软 OpenAI 集体认账,时间表曝光

谷歌宣布支持 robots.txt 里的共享 AI 训练控制令牌,微软、OpenAI 表态跟进,Anthropic 已开工,但真正生效要等到 2027 年。

大白话简单说,以后网站主只要在 robots.txt 里写一行「__usage_ai-training」加 Disallow,就等于告诉所有参与的 AI 公司:别拿我的内容去训练模型。它不写具体爬虫名字,而是一个「用途令牌」,路径匹配规则照旧,所以你可以全站拒绝、单独放行某个文件夹。目前这还只是 IETF 草案,各家时间表不一:微软说 2027 年 2 月 1 日起支持,谷歌说 2027 年初,OpenAI 说「未来几个月」,Anthropic 刚开工没给日期。
对你意味着有个人网站、博客、作品集或做内容站的人都该看一眼:这决定了你的内容会不会被拿去喂大模型,以及还能不能在 Gemini 里被引用。

原文:One robots.txt Rule to Opt Out of AI Training: What Developers Need to Know (2027)

打开巨象雷达,看今天全部 AI 动态