Anthropic menggunakan dua lapisan kawalan pengindeksan pada halaman chat yang dikongsi:
Disallow: /share/* dalam fail robots.txt mereka, mengarahkan perayap (crawlers) untuk tidak mengakses laluan /share/.X-Robots-Tag: noindex pada halaman itu sendiri, memberitahu enjin carian untuk tidak mengindeksnya walaupun ia dirayap .Konfliknya: Oleh kerana robots.txt menghalang perayap Google daripada mengakses halaman tersebut sepenuhnya, perayap Google tidak pernah melihat pengepala noindex. Walau bagaimanapun, jika URL tersebut dipautkan di tempat lain di web (contohnya, di media sosial, forum, atau laman lain yang boleh dirayap oleh Google), Google masih boleh menemui dan mengindeks URL tersebut berdasarkan rujukan luaran. Apabila perayap disekat oleh robots.txt daripada mengambil halaman, ia tidak boleh membaca arahan noindex — jadi ia mungkin mengindeks URL berdasarkan konteks luaran semata-mata . Pada asasnya, larangan robots.txt menjadikan tag noindex tidak kelihatan dan oleh itu tidak berkesan.
| Syarikat | Insiden | Skala | Perbezaan Utama |
|---|---|---|---|
| OpenAI (ChatGPT) | 2023–2025: URL pautan dikongsi ChatGPT diindeks oleh Google selepas pengguna menyiarkannya secara terbuka. Google menganggarkan ratusan ribu transkrip muncul . | ~143,000+ perbualan merentas pelbagai chatbot GenAI | OpenAI pada mulanya dilaporkan tidak menggunakan noindex atau sekatan robots.txt pada pautan yang dikongsi. |
| xAI (Grok) | 2025: Perbualan Grok yang dikongsi juga muncul dalam hasil carian Google . | Ratusan ribu | Corak yang sama — pautan kongsi boleh diakses secara umum dan dirayap. |
| Anthropic (insiden terdahulu) | September 2025: Forbes melaporkan bahawa Anthropic menjadi syarikat AI ketiga yang perbualan chatbotnya muncul di Google. Tidak seperti OpenAI dan xAI, Anthropic mengatakan ia telah menyekat perayap — namun halaman masih bocor . | Ratusan transkrip | Ini adalah insiden berulang. Masalah kelas yang sama berulang walaupun sebelum ini mendakwa telah membetulkannya. |
Corak utama: Dalam ketiga-tiga kes, punca utama adalah ciri 'share' syarikat AI menjana URL awam yang boleh diramal, dan pengguna menyiarkan pautan tersebut di web terbuka — selepas itu enjin carian mengindeksnya. Insiden Anthropic 2025 pada dasarnya adalah isu yang sama .
site: yang sama .Google sebelum ini menganggarkan ia telah mengindeks "hampir 600" perbualan Claude dalam insiden sebelumnya sebelum ia dialih keluar . Status semasa masih berubah-ubah — Anthropic belum membuat kenyataan rasmi mengenai perkara ini pada masa laporan .
Pusat bantuan rasmi Anthropic menyediakan langkah-langkah ini:
Semak chat yang dikongsi anda:
Tarik balik (batalkan) perkongsian chat:
Padam perbualan sepenuhnya:
Nota: Menarik balik atau memadam perbualan tidak secara automatik mengalih keluarnya daripada cache enjin carian. Anda mungkin perlu menghantar permintaan pengalihan keluar secara berasingan kepada Google, Bing, dan Brave untuk mana-mana URL yang telah diindeks .