Google、AI学習拒否のIETF統一規格を採用へ robots.txtで一括指定可能に
GoogleはOpenAIやAnthropic、Bingに続き、IETFが策定中のAI学習制御規格「AIPREF」を採用すると発表した。ウェブサイト管理者はrobots.txtに統一トークンを1行記述するだけで、複数社のAIモデルによる学習を一括制御できるようになる。対応開始は2027年初頭を予定している。
Google-Extended
Cloudflare、AI訓練と検索クローラーの分離を要求 従わなければデフォルト遮断へ
CloudflareはAI企業に対し、従来のWeb検索用クローラーとAI訓練・エージェント用クローラーの分離を求めた。2026年9月15日以降、両者を混用するクローラーは広告掲載ページからデフォルトで遮断される。検索露出を口実にAI訓練データを無償収集する動きを牽制し、パブリッシャーへの正当な対価還元を促す狙いがある。
Google、サイト内容をAI学習から除外できる「Google-Extended」を提供開始
Google は Web サイト管理者が AI の学習利用を拒否できる「Google-Extended」を発表した。robots.txt に指定するだけで、Google 検索のインデックス登録を維持したまま、Bard や Vertex AI の学習データ収集のみを遮断できる。検索流入を諦めずに権利を守れるのがポイントだ。