Anthropic застосувала два рівні контролю індексації для сторінок спільних чатів:
Disallow: /share/* у файлі robots.txt, яке вказує пошуковим роботам не відвідувати сторінки за шляхом /share/.X-Robots-Tag: noindex на самих сторінках, який наказує пошуковим системам не індексувати їх, навіть якщо вони були проскановані .Проблема в конфлікті: Оскільки robots.txt блокував доступ пошукового робота Google до сторінок, робот ніколи не бачив заголовка noindex. Однак, якщо URL-адреси були розміщені в інших місцях в інтернеті (наприклад, у соціальних мережах, на форумах або інших сайтах, які Google міг сканувати), Google все одно міг виявити та проіндексувати ці URL-адреси на основі зовнішніх посилань. Коли доступ робота заблоковано файлом robots.txt, він не може прочитати директиву noindex — тому він може проіндексувати URL-адресу лише на основі зовнішніх згадок . По суті, заборона в robots.txt зробила тег noindex невидимим і, отже, неефективним.
| Компанія | Інцидент | Масштаб | Ключова відмінність |
|---|---|---|---|
| OpenAI (ChatGPT) | 2023–2025: URL-адреси спільних посилань ChatGPT були проіндексовані Google після того, як користувачі публікували їх у відкритому доступі. За оцінками Google, спливли сотні тисяч транскриптів . | ~143 000+ розмов різних GenAI-чатботів | OpenAI, за повідомленнями, спочатку не використовувала блокування noindex або robots.txt для спільних посилань. |
| xAI (Grok) | 2025: Спільні розмови Grok також з'явилися в результатах пошуку Google . | Сотні тисяч | Схожа схема — посилання на розмови були загальнодоступними та проскановані пошуковими системами. |
| Anthropic (попередній інцидент) | Вересень 2025: Forbes повідомив, що Anthropic став третьою AI-компанією, чиї чати з'явилися в Google. На відміну від OpenAI та xAI, Anthropic заявила, що заблокувала пошукових роботів — але сторінки все одно просочилися . | Сотні транскриптів | Це повторний інцидент. Та сама проблема виникла знову, незважаючи на попередні заяви про її виправлення. |
Основна закономірність: У всіх трьох випадках корінь проблеми полягає в тому, що функції «поділитися» в AI-компаній генерують публічні, вгадувані URL-адреси, а користувачі публікують ці посилання у відкритому інтернеті — після чого пошукові системи їх індексують. Інцидент Anthropic 2025 року був по суті тією ж проблемою .
site: .Раніше Google оцінював, що проіндексував «ледь менше 600» розмов Claude під час попереднього інциденту, перш ніж вони були видалені . Поточна ситуація нестабільна — на момент публікації компанія Anthropic публічно не коментувала цю проблему .
Офіційний довідковий центр Anthropic надає такі інструкції:
Переглянути свої спільні чати:
Відкликати спільний доступ (видалити посилання):
Повністю видалити розмову:
Примітка: Відкликання або видалення розмови не видаляє її автоматично з кешу пошукових систем. Для будь-яких уже проіндексованих URL-адрес вам може знадобитися окремо подати запити на видалення до Google, Bing та Brave .