Cloudflareは2026年9月15日、サイト運営者が検索で見つけてもらうことを維持しながら、コンテンツのAIモデル学習利用を拒否できる「Disallow AI Training（AI学習を拒否）」を発表しました。720

これまで、AIの学習利用を止めようとしてボットを広く遮断すると、通常の検索インデックスまで失うおそれがありました。新設定の狙いは、この二者択一を解消することです。

検索・学習・AIエージェントを別々に扱う

Cloudflareは、従来の包括的な「Block AI Bots」方式に代わり、クローラーの利用目的を次の3分類で個別に管理できるようにしました。

• Search：検索エンジンのインデックス作成
• Training：モデルの訓練・ファインチューニング
• Agent：ユーザーに代わって行動するAIエージェントからのアクセス

この分離により、サイト運営者は「検索は許可するが、学習は許可しない」といった方針を選べます。Cloudflareによると、これらの制御と推奨設定は9月15日から出版社・企業向けに提供されています。1320

検索流入を保ちつつ学習利用を拒否したい場合に選ぶのが、Disallow AI Trainingです。この設定は、Cloudflareのボットポリシーとrobots.txtの仕組みを通じて「学習不可」の意思を示し、学習目的のトラフィックにはブロックルールを適用します。167

なぜ検索表示を維持できるのか

一部のクローラーは複数の用途を持ちます。Googlebot、Applebot、Bingbotは検索用にクロールしますが、それぞれの運営企業にはAIに関係するコンテンツ利用もあり得ます。Cloudflareの新ポリシーは、こうした検索目的と学習目的を分けます。

Disallow AI Trainingを有効にすると、原則として次の扱いになります。

• Accountableに認定された混合用途クローラーは、検索インデックス作成のためのアクセスを継続できる。
• クローラー運営者は、そのサイトのコンテンツをAI学習に使わないという選択を尊重することが求められる。
• 学習専用クローラー、およびAccountableではない事業者の混合用途クローラーは、学習拒否ポリシーの対象としてブロックされる。71724

一方、より強いBlockを選んだ場合は注意が必要です。Googlebot、Applebot、Bingbotを検索クロールも含めて止める可能性があるため、検索での露出維持が目的なら適した選択ではありません。1728

「Accountable」とは何か

**Accountable（説明責任を果たす事業者）**は、検索とAI関連利用を区別するためにCloudflareが設けた指定です。混合用途クローラーの運営者が、Cloudflareの基準をすでに満たしている、または定められた期限内に満たすことを確約している場合に与えられます。最初の指定事業者はApple、Google、Microsoftでした。72023

これは、サイト運営者がAI利用全般を許可したことを意味しません。あくまで、運営者が学習拒否を尊重する前提で、その混合用途クローラーに検索アクセスを残すための判断基準です。

Accountableに必要な4条件

報道・公表された内容によると、対象事業者は次の4項目を満たす、または期限付きで満たすことを約束する必要があります。

1. robots.txtまたは同等の標準による、AI学習のオプトアウト手段
2. すでに提供済み、または指定時期までに提供する、AI生成の検索要約に対するオプトアウト手段
3. 検索と学習でコンテンツがどう使われるかを把握できる、URL単位の可視性
4. 学習をオプトアウトしても、通常の検索アクセスは失われないという公開確認2324

この要件は、単に意思表示を行うだけではなく、その意思がどう扱われるのかをサイト側が確認できるようにするための枠組みでもあります。

許可されるボット、ブロックされるボット

Disallow AI Trainingで重要なのは、相手がAI企業かどうかだけではありません。検索と学習の両方に関わる混合用途クローラーであり、その運営者がAccountable指定を受けているかどうかが分かれ目です。

クローラーの分類	Disallow AI Training有効時の扱い
Googlebot、Applebot、Bingbotを含む、Accountable指定の混合用途検索クローラー	検索インデックス作成のためのアクセスを維持できる 1722
AI学習専用クローラー	ブロックされる 1722
Accountable指定を受けていない混合用途クローラー	学習アクセスはブロックされる 24

つまり、すべてのAIボットを一律に遮断するのではなく、透明性と学習拒否の尊重を条件に、検索という役割だけを残す設計です。

Google・Apple・Bingとの関係

CloudflareのBot Preference Syncは、Cloudflareダッシュボードで設定したSearch、Agent、TrainingのAIボット方針をrobots.txtにも反映させる機能です。16

GoogleやAppleでは、検索クローラーとは別に、学習利用を拒否するための指定があります。

• Google-Extended：Googleの学習関連のオプトアウトトークンです。Googlebotとは別の仕組みであるため、学習利用の拒否を示しても、Google検索でのインデックス作成を本質的に止めるものではありません。27
• Applebot-Extended：Apple側の対応する学習関連コントロールです。Applebotによる検索用途のクロールと、AI学習のオプトアウトを分けて扱えます。1727
• Bingbot：CloudflareのAccountableモデルでは、検索用途でのアクセスを維持できます。ただしAccountableの枠組みは、すべての機能が全事業者で即時に提供済みであることを意味するものではなく、指定された期限までの対応確約を含みます。723

新規ドメインの初期設定と既存サイトの確認点

Cloudflareは、2026年9月15日からの新しい既定値として、Cloudflareに新規追加するドメインのうち、広告を表示するページではTrainingとAgentを既定でブロックする方針を示しました。13

これは検索をサイト全体で遮断する設定ではなく、用途ごとに判断する考え方に沿ったものです。提供された情報だけでは、既存顧客の全サイトに対する自動移行ルールを一律に断定できません。既存のサイト運営者は、従来の設定がどう変わったかを推測するのではなく、ゾーン単位でSearch、Training、Agentの各設定を確認するのが安全です。

サイト運営者が取るべき選択

実務上の判断は比較的明確です。

• 検索での発見可能性を維持し、モデル学習だけを拒否したい：Disallow AI Trainingを選ぶ。
• 対象クローラーの検索アクセスも制限してよい：より広範なBlockを検討する。
• 広告表示ページや既存のボットルールがある：Search、Training、Agentを別々に見直す。131720

Cloudflareの設定だけで、すべてのクローラー運営者による遵守を技術的に保証するわけではありません。それでも今回の導入により、検索インデックスは許可しつつ、AIモデルの学習利用は明確に拒否するという方針を、より具体的に示し、適用できるようになりました。724

Cloudflareは2026年9月15日、サイト運営者が検索で見つけてもらうことを維持しながら、コンテンツのAIモデル学習利用を拒否できる「Disallow AI Training（AI学習を拒否）」を発表しました。720

これまで、AIの学習利用を止めようとしてボットを広く遮断すると、通常の検索インデックスまで失うおそれがありました。新設定の狙いは、この二者択一を解消することです。

検索・学習・AIエージェントを別々に扱う

Cloudflareは、従来の包括的な「Block AI Bots」方式に代わり、クローラーの利用目的を次の3分類で個別に管理できるようにしました。

• Search：検索エンジンのインデックス作成
• Training：モデルの訓練・ファインチューニング
• Agent：ユーザーに代わって行動するAIエージェントからのアクセス

この分離により、サイト運営者は「検索は許可するが、学習は許可しない」といった方針を選べます。Cloudflareによると、これらの制御と推奨設定は9月15日から出版社・企業向けに提供されています。1320

検索流入を保ちつつ学習利用を拒否したい場合に選ぶのが、Disallow AI Trainingです。この設定は、Cloudflareのボットポリシーとrobots.txtの仕組みを通じて「学習不可」の意思を示し、学習目的のトラフィックにはブロックルールを適用します。167

なぜ検索表示を維持できるのか

一部のクローラーは複数の用途を持ちます。Googlebot、Applebot、Bingbotは検索用にクロールしますが、それぞれの運営企業にはAIに関係するコンテンツ利用もあり得ます。Cloudflareの新ポリシーは、こうした検索目的と学習目的を分けます。

Disallow AI Trainingを有効にすると、原則として次の扱いになります。

• Accountableに認定された混合用途クローラーは、検索インデックス作成のためのアクセスを継続できる。
• クローラー運営者は、そのサイトのコンテンツをAI学習に使わないという選択を尊重することが求められる。
• 学習専用クローラー、およびAccountableではない事業者の混合用途クローラーは、学習拒否ポリシーの対象としてブロックされる。71724

一方、より強いBlockを選んだ場合は注意が必要です。Googlebot、Applebot、Bingbotを検索クロールも含めて止める可能性があるため、検索での露出維持が目的なら適した選択ではありません。1728

「Accountable」とは何か

**Accountable（説明責任を果たす事業者）**は、検索とAI関連利用を区別するためにCloudflareが設けた指定です。混合用途クローラーの運営者が、Cloudflareの基準をすでに満たしている、または定められた期限内に満たすことを確約している場合に与えられます。最初の指定事業者はApple、Google、Microsoftでした。72023

これは、サイト運営者がAI利用全般を許可したことを意味しません。あくまで、運営者が学習拒否を尊重する前提で、その混合用途クローラーに検索アクセスを残すための判断基準です。

Accountableに必要な4条件

報道・公表された内容によると、対象事業者は次の4項目を満たす、または期限付きで満たすことを約束する必要があります。

1. robots.txtまたは同等の標準による、AI学習のオプトアウト手段
2. すでに提供済み、または指定時期までに提供する、AI生成の検索要約に対するオプトアウト手段
3. 検索と学習でコンテンツがどう使われるかを把握できる、URL単位の可視性
4. 学習をオプトアウトしても、通常の検索アクセスは失われないという公開確認2324

この要件は、単に意思表示を行うだけではなく、その意思がどう扱われるのかをサイト側が確認できるようにするための枠組みでもあります。

許可されるボット、ブロックされるボット

Disallow AI Trainingで重要なのは、相手がAI企業かどうかだけではありません。検索と学習の両方に関わる混合用途クローラーであり、その運営者がAccountable指定を受けているかどうかが分かれ目です。

クローラーの分類	Disallow AI Training有効時の扱い
Googlebot、Applebot、Bingbotを含む、Accountable指定の混合用途検索クローラー	検索インデックス作成のためのアクセスを維持できる 1722
AI学習専用クローラー	ブロックされる 1722
Accountable指定を受けていない混合用途クローラー	学習アクセスはブロックされる 24

つまり、すべてのAIボットを一律に遮断するのではなく、透明性と学習拒否の尊重を条件に、検索という役割だけを残す設計です。

Google・Apple・Bingとの関係

CloudflareのBot Preference Syncは、Cloudflareダッシュボードで設定したSearch、Agent、TrainingのAIボット方針をrobots.txtにも反映させる機能です。16

GoogleやAppleでは、検索クローラーとは別に、学習利用を拒否するための指定があります。

• Google-Extended：Googleの学習関連のオプトアウトトークンです。Googlebotとは別の仕組みであるため、学習利用の拒否を示しても、Google検索でのインデックス作成を本質的に止めるものではありません。27
• Applebot-Extended：Apple側の対応する学習関連コントロールです。Applebotによる検索用途のクロールと、AI学習のオプトアウトを分けて扱えます。1727
• Bingbot：CloudflareのAccountableモデルでは、検索用途でのアクセスを維持できます。ただしAccountableの枠組みは、すべての機能が全事業者で即時に提供済みであることを意味するものではなく、指定された期限までの対応確約を含みます。723

新規ドメインの初期設定と既存サイトの確認点

Cloudflareは、2026年9月15日からの新しい既定値として、Cloudflareに新規追加するドメインのうち、広告を表示するページではTrainingとAgentを既定でブロックする方針を示しました。13

これは検索をサイト全体で遮断する設定ではなく、用途ごとに判断する考え方に沿ったものです。提供された情報だけでは、既存顧客の全サイトに対する自動移行ルールを一律に断定できません。既存のサイト運営者は、従来の設定がどう変わったかを推測するのではなく、ゾーン単位でSearch、Training、Agentの各設定を確認するのが安全です。

サイト運営者が取るべき選択

実務上の判断は比較的明確です。

• 検索での発見可能性を維持し、モデル学習だけを拒否したい：Disallow AI Trainingを選ぶ。
• 対象クローラーの検索アクセスも制限してよい：より広範なBlockを検討する。
• 広告表示ページや既存のボットルールがある：Search、Training、Agentを別々に見直す。131720

Cloudflareの設定だけで、すべてのクローラー運営者による遵守を技術的に保証するわけではありません。それでも今回の導入により、検索インデックスは許可しつつ、AIモデルの学習利用は明確に拒否するという方針を、より具体的に示し、適用できるようになりました。724