Google 採納 IETF 統一標準:寫一行 robots.txt 就能拒絕所有 AI 訓練
Google 宣佈將採納 IETF AIPREF 標準,加入 OpenAI、Anthropic 和 Bing 的陣營。網站管理者只需在 robots.txt 中加入統一標識,就能一鍵表達對多家 AI 的訓練偏好,告別逐家配置的麻煩。這項支援預計在 2027 年初正式上線。
Google 宣佈將採納 IETF AIPREF 標準,加入 OpenAI、Anthropic 和 Bing 的陣營。網站管理者只需在 robots.txt 中加入統一標識,就能一鍵表達對多家 AI 的訓練偏好,告別逐家配置的麻煩。這項支援預計在 2027 年初正式上線。
Cloudflare 宣佈自 2026 年 9 月 15 日起,將預設攔截訪問廣告頁面的「混用型」網路爬蟲,要求 AI 公司必須將傳統搜尋與 AI 訓練及智慧體抓取徹底分開。最值得關注的是,此舉旨在阻止科技巨頭以搜尋收錄為由免費掠奪出版商版權內容,並將按抓取付費升級為按使用價值付費。
Google 推出控制工具 Google-Extended。網站釋出者只需在 robots.txt 中加上該標識,就能禁止 Google 用其內容訓練 Bard 和 Vertex AI 等模型,同時不影響正常搜尋收錄。這意味著站長不必再在「被抓去訓 AI」和「丟掉搜尋流量」之間艱難二選一。