1つのクローラーが検索とAIを兼ねる——Googleの「2目的利用」に揺れるWeb出版の未来

CMAの対応：世界初の行動要件

2025年10月、英国競争・市場庁（CMA）はGoogleを一般検索と検索広告において「戦略的市場地位（SMS）」に指定。英国検索市場の約90%を占めることを根拠とした。2026年6月3日、CMAは**出版社行動要件（Publisher Conduct Requirement, CR）**を発令した。これは2024年デジタル市場・競争・消費者法に基づく初の拘束力ある義務である。

CRの主な要素：

• AIオプトアウト：出版社は検索結果の表示を維持したまま、AI OverviewsやAI ModeといったAI機能へのコンテンツ提供を拒否できる。
• ファインチューニングのオプトアウト：意見公募を踏まえ、GoogleはAIモデルのファインチューニングへのコンテンツ利用も拒否できるようにしなければならない。
• 帰属表示の義務化：GoogleはAI生成検索結果において出版社コンテンツへの明確なリンクを表示しなければならない。
• 透明性とコンプライアンス：Googleは初年度、6カ月ごとにコンプライアンス報告書を公開し、新たなAIサービスに制御機能を拡張する際は事前に出版社に通知しなければならない。
• 実施期限：Googleは2027年3月までにすべての変更を実装する義務を負う（主要な制御はより早期に実装される見込み）。

CMAはクローラー分離（検索用とAI用に別々のクローラーをGoogleに義務付ける案）を検討したが、「過剰な措置」として却下。Google側のコストが著しく高く、改善された制御手段で同等の効果が得られると判断した。

Cloudflareの主張：クローラー分離こそ唯一の解決策

Webトラフィックの約5分の1を扱うCloudflareは、CMAの意見公募に詳細な回答を提出。「CRは前進だが、構造的問題を解決しない」と主張する。主な論点は以下の通り。

• 制御権は依然Google側に：出版社はGoogle独自のシステムに依存せざるを得ず、CloudflareのCrawl Controlのような第三者ツールでブロックすれば検索ランキングに悪影響が出るリスクがある。
• クローラー分離が唯一の技術的解決策：GoogleにAIトレーニング・グラウンディング用の別クローラーを義務付ければ、出版社は片方をブロックしても他方に影響しない。
• 細かな制御では不十分：CMA案では「AIトレーニング/グラウンディング」と「検索生成AI機能」の区別が技術的に複雑で、多くの出版社には理解が難しい。
• 問題の規模：Googlebotは全Webクロールの約50%を占め、GoogleのAI検索はOpenAIの3.2倍のコンテンツをスクレイピングする。

CloudflareのCEOマシュー・プリンスは2025年10月に自らロンドンを訪れ、CMAにクローラー分離を直接働きかけ、以後も「検索とAIのクローラーを分離すべき」と公に訴え続けている。Cloudflareは2026年9月15日から、広告付きページにおいて混在目的のクローラーをブロックすると発表した。

現在の状況

• CMAは2026年6月3日にCRを発令。出版社は初めてAI利用を拒否するツールを得た。実質的な制御義務は2026年12月3日に発効し、2030年10月10日まで効力を持つ。
• CloudflareはCRを不十分とし、クローラー分離の義務化のみが出版社の真の自律性を回復すると主張し続けている。
• Googleは、出版社がAI利用を管理できる新たな制御機能をテスト中とし、クローラー分離によって「検索を壊す」ことはユーザー体験を損なうと警告している。自社のCMA意見公募回答では、CRは適切なバランスを取っていると主張する。
• CMAは追加措置の余地を残しており、Googleの実施状況を積極的に監視し、必要に応じてさらなる措置を取るとしている。

Googleのクローラーをめぐる攻防は英国だけの話ではない。CMAの決定はEUや米国など他の法域の規制当局からも注目されており、その帰結は検索支配とAIトレーニングの交点に関する世界的な先例となる可能性がある。