Anthropic ใช้การควบคุมการทำดัชนีสองชั้นในหน้าบทสนทนาที่แชร์:
Disallow: /share/* ในไฟล์ robots.txt เพื่อบอกให้บอตของเสิร์ชเอนจินไม่ให้เข้าถึงพาธ /share/X-Robots-Tag: noindex บนหน้าเพจ เพื่อบอกให้เสิร์ชเอนจินไม่ทำดัชนีแม้ว่าจะถูก crawl ก็ตาม ปัญหาความขัดแย้ง: เนื่องจาก robots.txt บล็อกบอตของ Google ไม่ให้เข้าถึงหน้าเพจ บอตจึงไม่เคยเห็นส่วนหัว noindex เลย อย่างไรก็ตาม หากลิงก์ URL เหล่านี้ถูกแชร์ในที่อื่นบนเว็บ (เช่น โซเชียลมีเดีย, ฟอรั่ม หรือเว็บไซต์อื่นที่ Google สามารถ crawl ได้) Google ก็ยังสามารถค้นพบและทำดัชนี URL เหล่านั้นได้จากบริบทภายนอก เมื่อบอตถูกบล็อกโดย robots.txt ไม่ให้โหลดหน้าเพจ มันก็ไม่สามารถอ่านคำสั่ง noindex ได้ — ดังนั้นมันจึงอาจทำดัชนี URL ไว้จากบริบทภายนอกเพียงอย่างเดียว กล่าวโดยสรุปคือ การใช้ robots.txt Disallow กลับทำให้แท็ก noindex มองไม่เห็นและไร้ประสิทธิภาพ
| บริษัท | เหตุการณ์ | ขนาด | ความแตกต่างสำคัญ |
|---|---|---|---|
| OpenAI (ChatGPT) | 2023–2025: URL ลิงก์แชร์ของ ChatGPT ถูก Google ทำดัชนีหลังจากผู้ใช้แชร์ลิงก์สาธารณะ Google ประมาณว่ามีบทสนทนาหลายแสนรายการถูกเปิดเผย | ~143,000+ บทสนทนาจาก AI chatbot หลายตัว | OpenAI รายงานว่าในตอนแรกไม่ได้ใช้ noindex หรือการบล็อก robots.txt บนลิงก์ที่แชร์ |
| xAI (Grok) | 2025: บทสนทนาที่แชร์ของ Grok ก็ปรากฏในผลการค้นหาของ Google เช่นกัน | แสนรายการ | รูปแบบคล้ายกัน — ลิงก์แชร์เป็นแบบสาธารณะและถูก crawl |
| Anthropic (เหตุการณ์ก่อนหน้า) | กันยายน 2025: Forbes รายงานว่า Anthropic กลายเป็นบริษัท AI แห่งที่สามที่บทสนทนาของผู้ใช้ปรากฏใน Google ต่างจาก OpenAI และ xAI ตรงที่ Anthropic บอกว่า ได้บล็อคบอตแล้ว — แต่ข้อมูลก็ยังรั่ว | หลายร้อยบทสนทนา | นี่คือ เหตุการณ์ซ้ำ ปัญหาประเภทเดียวกันเกิดขึ้นอีกแม้จะเคยอ้างว่าแก้ไขแล้ว |
รูปแบบสำคัญ: ในทั้งสามกรณี สาเหตุหลักคือฟีเจอร์ "แชร์" ของบริษัท AI สร้าง URL สาธารณะที่คาดเดาได้ และผู้ใช้ก็นำลิงก์เหล่านั้นไปโพสต์บนโลกออนไลน์ — หลังจากนั้น เสิร์ชเอนจินก็ทำดัชนีมัน เหตุการณ์ของ Anthropic ในปี 2025 ก็เป็นปัญหาเดียวกัน
site: เดียวกัน ก่อนหน้านี้ Google เคยประมาณการว่าทำดัชนี "ไม่ถึง 600" บทสนทนา Claude ในเหตุการณ์ครั้งก่อน ก่อนที่จะถูกลบออก สถานะปัจจุบันยังคงเปลี่ยนแปลง — Anthropic ยังไม่ได้ออกมาแถลงการณ์ต่อสาธารณะในเรื่องนี้ ณ เวลาที่มีรายงาน
ศูนย์ช่วยเหลืออย่างเป็นทางการของ Anthropic ให้ขั้นตอนดังนี้:
ตรวจสอบแชทที่ถูกแชร์:
ยกเลิกการแชร์ (เพิกถอน) แชท:
ลบบทสนทนาทั้งหมด:
หมายเหตุ: การยกเลิกการแชร์หรือการลบบทสนทนา ไม่ได้ ลบออกจากแคชของเสิร์ชเอนจินโดยอัตโนมัติ คุณอาจต้องยื่นคำขอให้ลบออก (removal requests) กับ Google, Bing และ Brave แยกต่างหากสำหรับ URL ที่ถูกทำดัชนีไว้แล้ว