OpenAI अपने OAI-SearchBot और GPTBot रोबोट्स का इस्तेमाल करता है। ये robots.txt टैग वेबमास्टर्स को यह प्रबंधित करने में सक्षम बनाते हैं कि उनकी साइटें और सामग्री AI के साथ कैसे काम करें। दोनों सेटिंग्स एक-दूसरे से स्वतंत्र हैं—उदाहरण के लिए, एक वेबमास्टर OAI-SearchBot को अनुमति दे सकता है ताकि वह सर्च रिजल्ट्स में दिखे, जबकि GPTBot को ब्लॉक करके यह संकेत दे सकता है कि क्रॉल की गई सामग्री का उपयोग OpenAI के जनरेटिव AI फाउंडेशन मॉडल्स को ट्रेन करने के लिए नहीं किया जाना चाहिए ।
OpenAI ने स्पष्ट किया है कि प्रोडक्ट रिजल्ट्स स्वतंत्र रूप से चुने जाते हैं और विज्ञापन नहीं हैं । इसके अलावा, कंपनी के कॉमर्स डॉक्यूमेंटेशन में 'नॉन-एड्स प्रोडक्ट फीड' और 'एड्स प्रोडक्ट फीड' के बीच अंतर बताया गया है। एड्स प्रोडक्ट फीड उसी बेस स्कीमा का उपयोग करते हैं लेकिन इसमें अतिरिक्त पात्रता आवश्यकताएं होती हैं ।
OpenAI के मुताबिक, कोई भी वेबसाइट या मर्चेंट ChatGPT सर्च में दिखाई दे सकता है। इसके लिए यह सुनिश्चित करना ज़रूरी है कि आपने OpenAI के सर्च क्रॉलर को ऑप्ट-आउट नहीं किया है। बाकी सर्च इंजनों की तरह, OpenAI भी क्रॉलिंग और इंडेक्सिंग के लिए स्टैंडर्ड तरीकों का पालन करता है ।
हालांकि OpenAI ने स्पष्ट किया है कि प्रोडक्ट रिजल्ट्स स्वतंत्र रूप से चुने जाते हैं और पेड प्लेसमेंट नहीं हैं, लेकिन अभी तक यह पूरी तरह स्पष्ट नहीं है कि रैंकिंग कैसे काम करती है। उपलब्ध आधिकारिक जानकारी में रैंकिंग की पूरी प्रक्रिया का खुलासा नहीं किया गया है ।
OpenAI अपने OAI-SearchBot और GPTBot रोबोट्स का इस्तेमाल करता है। ये robots.txt टैग वेबमास्टर्स को यह प्रबंधित करने में सक्षम बनाते हैं कि उनकी साइटें और सामग्री AI के साथ कैसे काम करें। दोनों सेटिंग्स एक-दूसरे से स्वतंत्र हैं—उदाहरण के लिए, एक वेबमास्टर OAI-SearchBot को अनुमति दे सकता है ताकि वह सर्च रिजल्ट्स में दिखे, जबकि GPTBot को ब्लॉक करके यह संकेत दे सकता है कि क्रॉल की गई सामग्री का उपयोग OpenAI के जनरेटिव AI फाउंडेशन मॉडल्स को ट्रेन करने के लिए नहीं किया जाना चाहिए ।
OpenAI ने स्पष्ट किया है कि प्रोडक्ट रिजल्ट्स स्वतंत्र रूप से चुने जाते हैं और विज्ञापन नहीं हैं । इसके अलावा, कंपनी के कॉमर्स डॉक्यूमेंटेशन में 'नॉन-एड्स प्रोडक्ट फीड' और 'एड्स प्रोडक्ट फीड' के बीच अंतर बताया गया है। एड्स प्रोडक्ट फीड उसी बेस स्कीमा का उपयोग करते हैं लेकिन इसमें अतिरिक्त पात्रता आवश्यकताएं होती हैं ।
OpenAI के मुताबिक, कोई भी वेबसाइट या मर्चेंट ChatGPT सर्च में दिखाई दे सकता है। इसके लिए यह सुनिश्चित करना ज़रूरी है कि आपने OpenAI के सर्च क्रॉलर को ऑप्ट-आउट नहीं किया है। बाकी सर्च इंजनों की तरह, OpenAI भी क्रॉलिंग और इंडेक्सिंग के लिए स्टैंडर्ड तरीकों का पालन करता है ।
हालांकि OpenAI ने स्पष्ट किया है कि प्रोडक्ट रिजल्ट्स स्वतंत्र रूप से चुने जाते हैं और पेड प्लेसमेंट नहीं हैं, लेकिन अभी तक यह पूरी तरह स्पष्ट नहीं है कि रैंकिंग कैसे काम करती है। उपलब्ध आधिकारिक जानकारी में रैंकिंग की पूरी प्रक्रिया का खुलासा नहीं किया गया है ।