Anthropic 爬虫狂扫 iFixit 近百万次：无视禁止条款引众怒
iFixit 首席执行官公开指责 Anthropic 的爬虫 ClaudeBot 在 24 小时内狂刷其网站近百万次，涉嫌违反禁止抓取用于 AI 训练的服务条款。Anthropic 回应称爬虫只识别 robots.txt 协议。这凸显了网站条款无法约束爬虫、只能靠粗暴断联的尴尬现状。
ClaudeBot
Cloudflare 上线一键拦截 AI 爬虫：全员免费，专治伪装抓取
Cloudflare 上线一键拦截所有 AI 爬虫的功能，面向包含免费版在内的所有用户开放。它不仅拦截遵守 robots.txt 的合规爬虫，还会用机器学习识别伪装成真实浏览器的恶意抓取。也就是说，站长无需再费心配规则，就能防住拿自家内容喂模型的 AI。