Kawal Cara OpenAI Mengakses Tapak Web Anda: Panduan robots.txt untuk GPTBot, OAI-SearchBot, dan ChatGPT Shopping

OpenAI telah mengeluarkan garis panduan terkini untuk tahun 2026 yang memisahkan dengan jelas kawalan terhadap akses carian, latihan model, lawatan yang dimulakan pengguna, dan pengindeksan suapan produk. Ini memberi pemilik laman web lebih fleksibiliti untuk memilih cara kandungan mereka digunakan oleh platform AI ini.

Perbezaan Utama Antara 'User-Agent' OpenAI

OpenAI menggunakan beberapa 'user-agent' yang berbeza dalam fail robots.txt, dan setiap satunya mempunyai fungsi yang tersendiri:

• OAI-SearchBot: Digunakan untuk mengindeks laman web bagi hasil carian dalam ChatGPT. Jika 'user-agent' ini dibenarkan, kandungan tapak anda boleh muncul dalam respons carian ChatGPT.

• GPTBot: 'User-agent' ini mengawal sama ada kandungan boleh dirayap untuk tujuan melatih model AI generatif OpenAI. Penting: tetapan untuk GPTBot adalah bebas sepenuhnya daripada OAI-SearchBot. Anda boleh menyekat GPTBot tanpa menjejaskan carian.

• ChatGPT-User: 'User-agent' ini mewakili lawatan yang dimulakan oleh pengguna ChatGPT secara langsung, bukan pengindeksan automatik. Dokumen rasmi OpenAI adalah rujukan sahih untuk tetapan ini.

• OAI-AdsBot: 'User-agent' khusus untuk mengesahkan keselamatan halaman web yang dihantar sebagai iklan dalam ChatGPT. OpenAI mengesyorkan agar membenarkan kedua-dua OAI-AdsBot dan OAI-SearchBot untuk hasil terbaik.

Cara Mudah untuk Menguruskan robots.txt

Bagi memudahkan urusan, berikut adalah contoh konfigurasi robots.txt yang praktikal:

User-agent: OAI-SearchBot
Allow: /

User-agent: GPTBot
Disallow: /

User-agent: OAI-AdsBot
Allow: /

Konfigurasi ini membenarkan carian ChatGPT (OAI-SearchBot) dan pengesahan iklan (OAI-AdsBot), sambil menyekat GPTBot daripada mengumpul data untuk latihan model. Perlu diingat, ini tidak menjamin kedudukan atau penyertaan dalam hasil carian.

Cara Mendaftarkan Produk untuk ChatGPT Shopping

Bagi peniaga yang ingin produk mereka muncul dalam carian ChatGPT, prosesnya agak mudah:

1. Kelayakan: "Mana-mana laman web atau peniaga boleh muncul dalam carian ChatGPT." Tiada keperluan khas untuk disenaraikan.

2. Suapan Produk: "Untuk menjadikan produk anda boleh ditemui dalam ChatGPT, peniaga perlu menyediakan fail suapan produk berstruktur yang akan dicerna dan diindeks oleh OpenAI."

3. Akses Suapan: "Proses pendaftaran suapan produk dalam ChatGPT kini hanya tersedia untuk rakan kongsi yang diluluskan." Ini bermakna anda perlu memohon akses terlebih dahulu.

4. Paparan Produk: Apabila pengguna membuat pertanyaan berkaitan pembelian, ChatGPT boleh memaparkan imej produk, butiran terperinci, dan pautan pembelian. OpenAI menegaskan bahawa hasil produk ini adalah organik dan tidak dipengaruhi oleh iklan atau perkongsian.

Rumusan

Garis panduan terkini OpenAI memberikan pemilik laman web lebih kawalan berbanding sebelum ini. Dengan memahami perbezaan antara setiap 'user-agent', anda boleh membuat keputusan termaklum tentang cara kandungan tapak anda digunakan. Sama ada anda ingin membenarkan carian sambil menyekat latihan model, atau membuka sepenuhnya akses untuk manfaat ChatGPT Shopping, semuanya boleh diuruskan melalui fail robots.txt yang ringkas.