OpenAI के क्रॉलर OAI SearchBot और GPTBot को robots.txt के ज़रिए अलग अलग नियंत्रित किया जा सकता है [1] OAI SearchBot को अनुमति देने से आपकी साइट ChatGPT सर्च में दिख सकती है, जबकि GPTBot मॉडल ट्रेनिंग से जुड़ा है [1] noindex मेटा टैग का उपयोग करके आप कुछ पन्नों को ChatGPT सर्च से बाहर रख सकते हैं [4][6]
यहाँ हम OpenAI के आधिकारिक दस्तावेज़ों और स्रोतों के आधार पर ChatGPT सर्च, शॉपिंग, क्रॉलर कंट्रोल और रेफरल ट्रैकिंग से जुड़ी हर अहम जानकारी साझा कर रहे हैं। इस गाइड का उद्देश्य प्रकाशकों (पब्लिशर्स), डेवलपर्स और ऑनलाइन व्यापारियों को यह समझने में मदद करना है कि OpenAI के टूल्स के साथ अपनी सामग्री और उत्पादों को कैसे मैनेज किया जाए।
OpenAI दो मुख्य क्रॉलर प्रदान करता है जिन्हें आप अपनी वेबसाइट के robots.txt फ़ाइल के ज़रिए नियंत्रित कर सकते हैं।
उदाहरण के लिए, अगर आप केवल GPTBot को ब्लॉक करना चाहते हैं:
User-agent: GPTBot
Disallow: /
User-agent: OAI-SearchBot
Allow: /यह सुनिश्चित करता है कि आपकी साइट ChatGPT सर्च में दिखती रहे, लेकिन उसका डेटा मॉडल ट्रेनिंग में इस्तेमाल न हो।
कोई भी सार्वजनिक वेबसाइट ChatGPT सर्च में प्रकट हो सकती है। OpenAI के अनुसार, पब्लिशर्स को चाहिए:
noindex मेटा टैग का इस्तेमाल करें। ध्यान दें कि इसके लिए क्रॉलर को उस पेज तक पहुँचने की अनुमति होनी चाहिए। ChatGPT सर्च में परिणाम इनलाइन साइटेशन के साथ आते हैं। उपयोगकर्ता स्रोत पर होवर करके या क्लिक करके मूल वेबपेज पर जा सकते हैं।
जो प्रकाशक OAI-SearchBot को अपनी साइट तक पहुँचने की अनुमति देते हैं, वे ChatGPT से आने वाले रेफरल ट्रैफ़िक को ट्रैक कर सकते हैं। इसके लिए ChatGPT अपने आप utm_source=chatgpt.com यूटीएम पैरामीटर जोड़ता है, जिससे Google Analytics या किसी अन्य एनालिटिक्स टूल से इस ट्रैफ़िक को आसानी से पहचाना और विश्लेषित किया जा सकता है।
OpenAI ने ChatGPT में एक नया शॉपिंग अनुभव पेश किया है। जब कोई उपयोगकर्ता खरीदारी से संबंधित सवाल पूछता है (जैसे "मुझे कुत्तों के लिए कॉस्ट्यूम ढूँढने में मदद करें" या "200 डॉलर से कम के बेस्ट नॉइज़-कैंसलिंग हेडफ़ोन"), तो ChatGPT संबंधित उत्पाद दिखा सकता है।
OpenAI के आधिकारिक दस्तावेज़ों से साफ है कि पब्लिशर्स और मर्चेंट OAI-SearchBot को अनुमति देकर अपनी सामग्री और उत्पादों को ChatGPT सर्च और शॉपिंग फीचर में प्रभावी ढंग से प्रदर्शित कर सकते हैं। robots.txt और noindex के ज़रिए उनके पास पूरा नियंत्रण है कि कौन सी सामग्री कहाँ दिखेगी। रेफरल ट्रैकिंग के लिए ChatGPT अपने आप UTM पैरामीटर जोड़ता है, जिससे एनालिटिक्स आसान हो जाता है।
Studio Global AI
Use this topic as a starting point for a fresh source-backed answer, then compare citations before you share it.
OpenAI के क्रॉलर OAI SearchBot और GPTBot को robots.txt के ज़रिए अलग अलग नियंत्रित किया जा सकता है [1]
OpenAI के क्रॉलर OAI SearchBot और GPTBot को robots.txt के ज़रिए अलग अलग नियंत्रित किया जा सकता है [1] OAI SearchBot को अनुमति देने से आपकी साइट ChatGPT सर्च में दिख सकती है, जबकि GPTBot मॉडल ट्रेनिंग से जुड़ा है [1]
noindex मेटा टैग का उपयोग करके आप कुछ पन्नों को ChatGPT सर्च से बाहर रख सकते हैं [4][6]