AI学習用リダイレクト機能：Cloudflareが古いドキュメントの誤学習を防ぐ新機能を発表

概要

Cloudflareは、AIクローラーが古いコンテンツを学習するのを防ぐため、HTMLのcanonicalタグを基に自動で301リダイレクトを行う新機能を導入しました。

詳細内容

Cloudflareは、AIクローラーが`noindex`や警告バナーなどの「推奨信号」を無視し、非推奨の古いドキュメントを学習し続ける問題に対処するため、「Redirects for AI Training」機能を発表しました。この機能は、有料プランのユーザーを対象に、HTML内の`<link rel="canonical">`タグを検出し、認証済みのAI学習クローラーに対してのみ自動的にHTTP 301リダイレクトを実行します。これにより、AIモデルが最新かつ正規のコンテンツのみを取り込むよう強制し、古いCLI構文などの誤った情報がモデルに継承されるのを防ぎます。人間や検索エンジンのクローラーには影響を与えず、既存のSEO資産を活用してAIへの露出を制御できる点が特徴です。あわせて、Cloudflare RadarではAIクローラーへの応答ステータス分析機能も提供開始されました。

元記事を読む他のサマリーを見る