Googlebot: Perayap Tunggal Yang Jadi 'Paip AI' – Penerbit, Pengawal Selia, Cloudflare Semua Mahu Opt-Out

Tindakan CMA: Satu Keperluan Kelakuan Pertama di Dunia

Pada Oktober 2025, CMA telah menetapkan Google sebagai memiliki Status Pasaran Strategik (SMS) dalam carian umum dan iklan carian, memandangkan penguasaannya sebanyak kira-kira 90 peratus pasaran carian UK . Pada 3 Jun 2026, CMA mengenakan Keperluan Kelakuan Penerbit (Publisher Conduct Requirement, CR) — kewajipan mengikat pertama di bawah Akta Pasaran Digital, Persaingan dan Pengguna UK 2024 .

Elemen utama CR tersebut:

• Opt-out AI untuk penerbit. Buat pertama kalinya, penerbit boleh menghalang kandungan mereka daripada digunakan dalam ciri AI carian Google (AI Overviews, AI Mode) tanpa perlu melepaskan keterlihatan carian .
• Opt-out penalaan halus. Susulan maklum balas konsultasi, Google juga mesti membenarkan penerbit menarik diri daripada penggunaan kandungan untuk penalaan halus model AI .
• Atribusi mandatori. Google mesti memautkan kembali dengan jelas kepada kandungan penerbit dalam hasil carian janaan AI .
• Ketelusan dan pematuhan. Google mesti menerbitkan laporan pematuhan setiap enam bulan untuk tahun pertama, bersama data dan metrik utama, serta mesti memberitahu penerbit secara proaktif apabila ia melanjutkan kawalan kepada perkhidmatan AI baharu .
• Tarikh akhir pelaksanaan. Google diberi masa sembilan bulan (menjelang Mac 2027) untuk melaksanakan semua perubahan, walaupun CMA menjangkakan kawalan utama lebih awal .

CMA secara eksplisit mempertimbangkan tetapi menolak pemisahan perayap — memaksa Google menggunakan perayap berbeza untuk indeks carian berbanding penggunaan AI — sebagai tidak seimbang. Ia membuat kesimpulan bahawa kos kepada Google akan jauh lebih tinggi dan kawalan yang dipertingkatkan adalah remedi yang sama berkesan dan lebih seimbang .

Pendirian Cloudflare: Pemisahan Perayap adalah Satu-satunya Penyelesaian Sebenar

Cloudflare, yang mengendalikan trafik untuk kira-kira satu perlima web, menyerahkan respons terperinci kepada konsultasi CMA dengan berhujah bahawa CR adalah langkah ke hadapan tetapi tidak menyelesaikan masalah struktur . Hujah utamanya:

• CR mewakilkan kawalan kembali kepada Google. Penerbit kekal bergantung pada sistem proprietari Google dan tidak boleh menggunakan alat sekatan pihak ketiga (seperti Kawalan Rayapan Cloudflare sendiri) tanpa mengambil risiko penurunan kedudukan carian .
• Pemisahan perayap adalah satu-satunya penyelesaian teknikal. Google harus diwajibkan menggunakan perayap berasingan untuk latihan dan perataan AI, supaya penerbit boleh menyekat satu tanpa menjejaskan yang lain .
• Kawalan granular tidak mencukupi. Cadangan CMA membezakan antara ‘latihan/perataan AI’ dan ‘ciri AI generatif carian’ dengan cara yang mengelirukan dari segi teknikal dan tidak difahami kebanyakan penerbit .
• Saiz masalah. Googlebot menyumbang kira-kira 50 peratus daripada semua rayapan web, dan carian AI Google mengikis 3.2 kali ganda lebih banyak kandungan berbanding OpenAI .

Ketua Pegawai Eksekutif Cloudflare, Matthew Prince, secara peribadi terbang ke London pada Oktober 2025 untuk melobi CMA bagi pendekatan ini dan secara terbuka mendesak ‘pemisahan’ perayap carian dan AI sejak itu . Cloudflare juga mengumumkan bahawa mulai 15 September 2026, ia akan menyekat perayap tujuan campuran pada halaman yang disokong iklan untuk pelanggan yang berkaitan .

Di Mana Kita Sekarang

• CMA mengenakan CR pada 3 Jun 2026, memberikan penerbit alat opt-out AI buat pertama kalinya . Kewajipan kawalan substantif berkuat kuasa pada 3 Disember 2026 dan keperluan kekal berkuat kuasa sehingga 10 Oktober 2030 .
• Cloudflare terus berhujah bahawa CR tidak mencukupi dan hanya pemisahan perayap mandatori akan memulihkan autonomi sebenar penerbit .
• Google berkata ia sedang menguji kawalan baharu yang membolehkan penerbit mengurus penggunaan AI, dan memberi amaran bahawa ‘memecahkan Carian’ dengan memaksa pemisahan perayap boleh menjejaskan pengalaman pengguna . Respons Google sendiri kepada konsultasi CMA berhujah bahawa CR mencapai keseimbangan yang tepat .
• CMA tidak menutup pintu kepada tindakan lanjut, dengan mengatakan ia sedang memantau secara aktif bagaimana Google melaksanakan perubahan ini dan mungkin mengambil langkah tambahan jika perlu .

Pertempuran mengenai perayap Google bukan hanya cerita UK. Keputusan CMA sedang dipantau rapi oleh pengawal selia di EU, AS dan bidang kuasa lain, dan hasilnya boleh menetapkan duluan global untuk persimpangan antara dominasi carian dan latihan AI.