Cloudflare 推出 AI Audit:一键封杀 AI 爬虫,未来还要帮站长收费
Cloudflare 推出 AI Audit 工具,帮网站所有者分析 AI 爬虫的抓取频次与意图,支持一键拦截所有 AI 抓取。最值得关注的是,平台后续还将上线定价机制,让站长能向抓取内容的 AI 公司收费。现有用户可通过控制台使用。
Cloudflare 推出 AI Audit 工具,帮网站所有者分析 AI 爬虫的抓取频次与意图,支持一键拦截所有 AI 抓取。最值得关注的是,平台后续还将上线定价机制,让站长能向抓取内容的 AI 公司收费。现有用户可通过控制台使用。
Cloudflare 上线一键拦截所有 AI 爬虫的功能,面向包含免费版在内的所有用户开放。它不仅拦截遵守 robots.txt 的合规爬虫,还会用机器学习识别伪装成真实浏览器的恶意抓取。也就是说,站长无需再费心配规则,就能防住拿自家内容喂模型的 AI。
Cloudflare 推出 Workers AI、Vectorize 和 AI Gateway 三款工具。开发者可按需调用就近 GPU 运行 Llama 2 等模型,配合向量数据库与用量监控降低延迟和成本。推理数据保留在本地且不参与模型训练。