ITmedia AI+
元記事公開:
AI学習への利用拒否をrobots.txtで一括指定へ OpenAIやGoogleなどが対応表明
AI要約
生成・訂正方針OpenAIやGoogle、MicrosoftがWebサイト運営者のAI学習利用意向をrobots.txtで一括指定できる仕組みへの対応を表明し、クローラーの一元管理が可能になった。
重要ポイント
- •OpenAI、Google、MicrosoftがAI学習へのコンテンツ利用意向を一括指定できる共通の仕組みへの対応を発表した
- •Anthropicの担当者が個人名義で実装を表明している
- •robots.txtに共通トークンを記述するだけで、AI各社のAIクローラーを一元管理できるようになる