संचालित करें
एजेंट एनालिटिक्स
समझें कि बॉट आपके पेजों को कैसे देखते हैं, उद्धृत करते हैं और संदर्भित करते हैं: क्रॉलर गतिविधि, अनुक्रमित कवरेज, और वे लोग जो एक उत्तर से आए।
AI क्रॉलर robots.txt जाँच एक तकनीकी ऑडिट है जो यह देखती है कि कौन से AI बॉट, जैसे OpenAI का GPTBot या Google-Extended, आपकी वेबसाइट की सामग्री तक पहुँचने और पढ़ने की अनुमति दिए गए हैं। यह महत्वपूर्ण है क्योंकि ये बॉट ही वह तरीका हैं जिससे ChatGPT और Google AI Overviews जैसे उत्तर इंजन पेजों की खोज करते हैं और उन्हें उद्धृत करते हैं। Mentionry का एजेंट एनालिटिक्स फीचर आपको स्पष्ट रूप से दिखाता है कि आपकी robots.txt फ़ाइल द्वारा किन AI क्रॉलरों की अनुमति है, क्रॉलबिलिटी समस्याओं को उजागर करता है, और ट्रैक करता है कि AI-जनित उत्तरों में आपके कौन से पेज संदर्भित किए जा रहे हैं, जिससे आपको AI-चालित ट्रैफ़िक पर प्रभाव साबित करने में मदद मिलती है।
अपनी AI उपस्थिति समझें और नियंत्रित करें
एआई क्रॉलर दृश्यता
देखें कि आपकी सामग्री पर कौन से AI बॉट्स की अनुमति है: GPTBot, ClaudeBot, PerplexityBot, Google-Extended और बाकी, आपके रोबोट्स नियमों के विरुद्ध।
क्रॉल क्षमता
प्रतिक्रिया समय, रेंडरिंग, ब्लॉक किए गए संसाधन, JavaScript के बिना फ़ेच किया गया पृष्ठ। वे समस्याएं जो एक पृष्ठ को बॉट के लिए अपठनीय बना देती हैं।
कंटेंट प्रदर्शन ट्रैकिंग
कौन से पेज AI मॉडल पसंद करते हैं, आपकी साइट पर टूटी हुई लिंक्स, और वेब पर आपकी ओर इशारा करने वाला एंकर टेक्स्ट।
अभी तक क्या नहीं है
- सर्वर-लॉग इंजेशन, जो दिखाता है कि कौन से बॉट वास्तव में आए और कितनी बार, अभी बना नहीं है। इस स्क्रीन पर सब कुछ बाहर से पढ़ा गया है।
- अन्य साइटों के मुकाबले बेंचमार्किंग के लिए एक जनसंख्या की आवश्यकता होती है जो हमारे पास अभी नहीं है, और हम एक नमूने से निकाले गए प्रतिशत के बजाय कुछ नहीं दिखाना पसंद करेंगे।
यह प्लेटफॉर्म में कहाँ स्थित है
वर्तमान उपलब्धता और डेटा आवश्यकताओं के लिए /dashboard/crawlers खोलें। संग्रह और कार्यक्षेत्र की सीमाएं आपकी योजना पर निर्भर करती हैं।
AI क्रॉलर robots.txt चेक क्या है
जब कोई उपयोगकर्ता किसी उत्तर इंजन से प्रश्न पूछता है, तो उत्तर बनाने के लिए इंजन को जानकारी ढूंढनी होती है। यह विशेष बॉट्स, जिन्हें AI क्रॉलर कहा जाता है, वेब पेज पढ़ने के लिए भेजता है। इनमें ChatGPT के लिए GPTBot, Claude के लिए ClaudeBot, PerplexityBot और Google के AI मॉडल्स के लिए Google-Extended शामिल हैं।
आपकी वेबसाइट का robots.txt फ़ाइल पहला गेटकीपर है। यह इन बॉट्स को बताता है कि आपकी साइट के किन हिस्सों पर वे जा सकते हैं। AI क्रॉलर robots.txt चेक इस फ़ाइल का ऑडिट करने की प्रक्रिया है, ताकि यह देखा जा सके कि आप किन बॉट्स का स्वागत कर रहे हैं और किन्हें ब्लॉक कर रहे हैं। यह AI खोज के लिए तकनीकी SEO का एक मूलभूत हिस्सा है। यदि आपके महत्वपूर्ण पेज ब्लॉक हैं, तो वे पढ़े नहीं जा सकते, और AI उत्तरों में उद्धरण के रूप में दिखाई नहीं देंगे।
AI खोज दृश्यता के लिए यह क्यों महत्वपूर्ण है
पारंपरिक SEO दस नीली लिंक की सूची में रैंकिंग पर केंद्रित था। AI खोज, या उत्तर इंजन अनुकूलन, अलग है। लक्ष्य एक ही, जनरेट किए गए पैराग्राफ में उद्धृत किए जाने वाले कुछ स्रोतों में से एक बनना है। इंजन चयनात्मक हैं, और वे केवल उन्हीं पृष्ठों को उद्धृत करते हैं जिन्हें उनके क्रॉलर पढ़ने की अनुमति प्राप्त कर चुके हैं।
AI क्रॉलर को अनुमति देना पहला, गैर-परक्राम्य कदम है। यदि GPTBot आपके ब्लॉग तक नहीं पहुंच सकता, तो ChatGPT उससे सीख नहीं सकता। यदि Google-Extended ब्लॉक है, तो आपकी सामग्री Google AI Overviews के लिए अदृश्य है। यह जांच ट्रैफ़िक मात्रा के बारे में नहीं है, यह पात्रता के बारे में है। आप उस क्षेत्र में प्रवेश का टिकट जांच रहे हैं जहाँ AI उत्तर लिखे जाते हैं।
Mentionry में Agent Analytics कैसे काम करता है
Agent Analytics, जो /dashboard/crawlers पर मिलता है, आपको AI खोज पर केंद्रित एक तकनीकी रिपोर्ट देता है। यह आपकी साइट को बाहर से पढ़कर काम करता है, ठीक वैसे ही जैसे एक AI बॉट करता। यह आपके robots.txt और किसी भी llms.txt फ़ाइल की जाँच करता है जो आपने सेट की है, फिर जो पाता है उसकी रिपोर्ट देता है।
स्क्रीन तीन क्षेत्रों में व्यवस्थित है। AI क्रॉलर दृश्यता ज्ञात AI बॉट्स की एक सूची दिखाती है, जैसे GPTBot और ClaudeBot, और स्पष्ट रूप से बताती है कि आपके वर्तमान नियम उन्हें अनुमति देते हैं या नहीं। क्रॉलबिलिटी आपके पेजों का एक सिम्युलेटेड फ़ेच चलाती है, जिसमें रिस्पॉन्स टाइम, ब्लॉक किए गए रिसोर्सेज़ और जावास्क्रिप्ट के बिना पेज कैसे रेंडर होता है, इसकी रिपोर्ट देती है, और उन समस्याओं को हाइलाइट करती है जो आपकी सामग्री को अपठनीय बना सकती हैं। कंटेंट परफॉर्मेंस ट्रैकिंग दिखाती है कि आपके कौन से पेज AI-संबंधित सेवाओं द्वारा इंडेक्स किए जा रहे हैं और वेब भर से आपकी साइट की ओर इशारा करने वाले एंकर टेक्स्ट पर डेटा एकत्र करती है।
अपने साप्ताहिक कार्यप्रवाह में इसका उपयोग कैसे करें
एक मार्केटर के लिए, यह एक डायग्नोस्टिक और मॉनिटरिंग टूल है। एक सामान्य कार्यप्रवाह ऑडिट से शुरू होता है। एजेंट एनालिटिक्स खोलें और एआई क्रॉलर विजिबिलिटी सूची की समीक्षा करें। एक नए प्रोडक्ट लॉन्च साइट के लिए, आप यह जांचेंगे कि आपके प्रमुख लैंडिंग और डॉक्यूमेंटेशन पेजों पर सभी मुख्य बॉट्स की अनुमति है।
इसके बाद, क्रॉलबिलिटी रिपोर्ट का उपयोग करें। अपने फ्लैगशिप सर्विस डिस्क्रिप्शन जैसे एक उच्च-प्राथमिकता वाले पेज पर फ़िल्टर करें। ब्लॉक्ड सीएसएस या जावास्क्रिप्ट फ़ाइलों के बारे में चेतावनियाँ देखें जो बॉट के लिए पेज को सही तरीके से रेंडर होने से रोक सकती हैं। अपने कोड में इन समस्याओं को ठीक करें। अंत में, साप्ताहिक रूप से कंटेंट परफॉर्मेंस की जांच करें। 'इंडेक्स्ड' सूची में शामिल हुए नए पेजों को देखें, जो दर्शाता है कि अब एआई सेवाएँ उन्हें पिक कर रही हैं, और एंकर टेक्स्ट रिपोर्ट की समीक्षा करें ताकि देख सकें कि अन्य साइटें आपके ब्रांड का वर्णन कैसे कर रही हैं जब वे आपसे लिंक करती हैं।
संख्याओं को कैसे पढ़ें और जाल से कैसे बचें
GPTBot के लिए हरे रंग की 'अनुमति' स्थिति का मतलब है कि आपका robots.txt इसे अनुमति देता है। इसका मतलब यह नहीं है कि GPTBot ने आपकी साइट देखी है, या आपकी सामग्री का हवाला दिया जाएगा। इसका सीधा मतलब है कि दरवाज़ा खुला है। क्रॉल किए जाने की रिपोर्ट में धीमा प्रतिक्रिया समय एक सीधी समस्या है, क्योंकि बॉट्स के पास समय सीमा होती है और वे धीमे पेजों को छोड़ सकते हैं।
'इंडेक्स्ड कवरेज' मीट्रिक दिखाती है कि सिस्टम किन पेजों के बारे में जानते हैं। यहाँ वृद्धि बढ़ती एआई दृश्यता का एक सकारात्मक संकेत है। एंकर टेक्स्ट रिपोर्ट ब्रांड धारणा को समझने के लिए उपयोगी है। दूसरों द्वारा आपकी लिंक में 'सॉफ़्टवेयर टूल' से 'एआई मार्केटिंग प्लेटफ़ॉर्म' की ओर बदलाव बदलती बाज़ार कथा को दर्शाता है। याद रखें, ये अग्रणी संकेतक हैं, ट्रैफ़िक या उद्धरणों का वादा नहीं।
एजेंट एनालिटिक्स अभी क्या नहीं करता है
सीमाओं को स्पष्ट रूप से बताना महत्वपूर्ण है। एजेंट एनालिटिक्स आपकी साइट को सार्वजनिक इंटरनेट से पढ़ता है। यह आपके सर्वर लॉग्स को इनजेस्ट नहीं करता है। सर्वर-लॉग इनजेशन आपको सटीक दिखाएगा कि कौन से बॉट्स आए, कितनी बार, और उन्होंने क्या फ़ेच किया। वह स्तर का विवरण अभी नहीं बनाया गया है।
यह सुविधा आपकी साइट की दूसरों के मुकाबले बेंचमार्किंग भी नहीं कर सकती। यह कहने के लिए कि आपकी क्रॉलबिलिटी 80वें प्रतिशतक में है, तुलनीय साइटों के एक बड़े समूह की आवश्यकता होती है जिसके विरुद्ध मापा जाए। हमारे पास वह समूह नहीं है, और हम एक के नमूने से निकाले गए भ्रामक प्रतिशतक दिखाने के बजाय कुछ नहीं दिखाना पसंद करेंगे।
योजनाएं और पहुंच
मुफ़्त प्लान में अधिकतम 3 सवालों और 3 पेजों का एक सहेजा गया स्नैपशॉट शामिल है। कार्ड नहीं चाहिए। कोई समाप्ति तिथि नहीं। Lite $29/माह · Growth $99/माह · Agency $249/माह (USD).
Growth: 50 प्रश्न · 40 साझा ड्राफ्ट और एजेंट क्रेडिट/माह · $99/माह (USD)।
प्रश्न
लाइव बॉट ट्रैफ़िक के लिए आपके सर्वर लॉग्स की आवश्यकता है, लॉग इनजेशन इंटीग्रेशन सूची में है। आज आप जो देख सकते हैं वह यह है कि प्रत्येक बॉट को क्या पढ़ने की अनुमति है और आपके पेज उसके लिए कैसे रेंडर होते हैं।
उत्तर देने वाले इंजनों में अपने ब्रांड का उल्लेख करवाएं
एक मुफ्त स्नैपशॉट से शुरुआत करें। सशुल्क योजनाओं में मूल्य निर्धारण पर दिखाई गई सीमाओं के भीतर योग्य अनुसूचित अनुसंधान शामिल हैं। स्टोर और Google डेटा के लिए आपके प्राधिकरण की आवश्यकता होती है।