Cloudflareが検索用クロールは許可しつつAI学習用途のクローリングのみ拒否できる新機能「AI学習の不許可」を導入し、主要テック企業が対応を開始した。
- •既存のrobots.txtとは別に、AI学習目的のデータ収集だけを制御できる新たな設定メニューが提供される
- •Google、Apple、Microsoftなどの主要企業がこの新機能に対応し、自社のAIモデル学習におけるデータ取得ポリシーを調整している
- •Webサイト運営者は、検索エンジンのインデックス登録を維持したまま、生成AIモデルへのデータ提供を拒否する選択肢が得られた