सात दिनों का ट्रैफ़िक रुझान
किसी एक अलग अनुरोध से क्रॉलर गतिविधि तय करने के बजाय पिछले सात दिनों के सत्यापित बॉट अनुरोध घंटे के समूहों में देखें।
AI और बॉट ट्रैफ़िक विश्लेषण
अपने Screpy प्रोजेक्ट से मेल खाने वाला Cloudflare ज़ोन जोड़ें और पिछले सात दिनों की सत्यापित बॉट गतिविधि देखें। क्रॉलर श्रेणियाँ, प्रकाशक, डेटा ट्रांसफ़र, अनुरोध रुझान, सफल रिस्पॉन्स और non-2xx URL तुलना करें। क्रॉलर के आने को AI में उद्धरण मिलने का प्रमाण न मानें।
TL;DR
संक्षिप्त सारांश
सारांश दिखाएँ सारांश छिपाएँ
TL;DR
संक्षिप्त सारांश
AI और बॉट ट्रैफ़िक विश्लेषण क्या है?
Screpy AI & Bot Traffic सत्यापित क्रॉलर अनुरोधों के लिए Cloudflare से जुड़ा विश्लेषण दृश्य है। यह ज़ोन की पिछले सात दिनों की गतिविधि को श्रेणी रुझान, क्रॉलर स्तर के कुल आँकड़े, ट्रांसफ़र मात्रा, रिस्पॉन्स परिणाम और पाथ स्तर की non-2xx जाँच में बदलता है। यह पहुँच के साक्ष्य मापता है, AI उत्तरों में विज़िबिलिटी नहीं।
सही ज़ोन जोड़ें
- ज़ोन और एनालिटिक्स की अनुमति वाला सक्रिय Cloudflare API टोकन जोड़ें।
- Screpy उपलब्ध ज़ोन का मिलान आपके प्रोजेक्ट की वेबसाइट के डोमेन से करता है।
- आवश्यक ज़ोन या डेटासेट पढ़ा न जा सके तो दृश्य अनुपलब्ध रहता है।
- कनेक्शन अधूरा होने पर बिना बताए कोई वैकल्पिक ट्रैफ़िक स्रोत इस्तेमाल नहीं होता।
सात दिनों का रुझान समझें
- वर्तमान रिपोर्टिंग अवधि पिछले सात दिनों तक निश्चित है।
- अनुरोध मात्रा घंटे के समूहों में दिखाई जाती है।
- सबसे अधिक मात्रा वाली सत्यापित बॉट श्रेणियाँ अलग-अलग श्रृंखलाओं में दिखती हैं।
- आवश्यकता होने पर कम मात्रा वाली श्रेणियाँ Other श्रृंखला में मिलाई जाती हैं।
सत्यापित क्रॉलर तुलना करें
- क्रॉलर का नाम, प्रकाशक और सत्यापित श्रेणी देखें।
- ट्रांसफ़र किए गए बाइट और कुल अनुरोध मात्रा तुलना करें।
- सफल 2xx अनुरोधों को non-2xx रिस्पॉन्स से अलग देखें।
- समीक्षा सीमित करने के लिए श्रेणी फ़िल्टर और हर क्रॉलर का छोटा रुझान चार्ट इस्तेमाल करें।
non-2xx पाथ की जाँच करें
- ध्यान देने योग्य क्रॉलर की असफल अनुरोध संख्या खोलें।
- अनुरोधित पाथ, सटीक HTTP स्थिति और अनुरोध संख्या देखें।
- रीडायरेक्ट, क्लाइंट त्रुटि और सर्वर त्रुटि को उनके उद्देश्य के अनुसार समझें।
- क्रॉलर अनुरोध को इंडेक्सिंग, प्रशिक्षण या उद्धरण का प्रमाण न बताएँ।
डैशबोर्ड में वास्तव में दर्ज क्रॉलर साक्ष्य देखें।
ट्रैफ़िक मात्रा, पहचान, श्रेणी, ट्रांसफ़र आकार, रिस्पॉन्स परिणाम और पाथ स्तर की त्रुटियाँ साथ इस्तेमाल करें। हर फ़ील्ड क्रॉलर की पहुँच से जुड़े अलग प्रश्न का उत्तर देती है।
सत्यापित बॉट श्रेणियाँ
स्टैक्ड चार्ट में सबसे अधिक मात्रा वाली सत्यापित बॉट श्रेणियाँ तुलना करें; कम मात्रा वाली श्रेणियाँ Other में मिलती हैं।
क्रॉलर और प्रकाशक की पहचान
Screpy सत्यापित अनुरोध का मिलान ज्ञात खोज, AI, निगरानी या सोशल क्रॉलर समूह से कर सके तो पढ़ने योग्य क्रॉलर नाम और प्रकाशक देखें।
श्रेणी फ़िल्टर
जुड़े ज़ोन में मौजूद श्रेणियों से सत्यापित क्रॉलर तालिका फ़िल्टर करें और तुलना को एक प्रकार के स्वचालित ट्रैफ़िक पर केंद्रित करें।
ट्रांसफ़र किए गए बाइट
अनुरोध मात्रा और रुझान के साथ मापें कि रिपोर्टिंग अवधि में हर क्रॉलर को कितना रिस्पॉन्स डेटा मिला।
सफल और non-2xx अनुरोध
हर क्रॉलर अनुरोध को सफल फ़ेच मानने के बजाय सफल 2xx रिस्पॉन्स को रीडायरेक्ट, क्लाइंट त्रुटि और सर्वर त्रुटि से अलग देखें।
हर क्रॉलर का अनुरोध रुझान चार्ट
घंटेवार अनुरोधों के छोटे चार्ट से देखें कि सात दिनों की अवधि में एक क्रॉलर लगातार सक्रिय था या कुछ समय के लिए तेज़ गतिविधि हुई।
असफल URL की विस्तृत जाँच
non-2xx अनुरोध वाले किसी भी क्रॉलर को खोलकर प्रभावित पाथ, सटीक HTTP स्थिति और असफल अनुरोधों की संख्या देखें।
सत्यापित बॉट गतिविधि के रूप में वर्गीकृत ट्रैफ़िक से शुरू करें।
Screpy मेल खाने वाला Cloudflare ज़ोन पढ़ता है और इस दृश्य को सत्यापित बॉट श्रेणी वाले अनुरोधों तक सीमित रखता है। इससे विश्लेषण केंद्रित रहता है, बिना यह दावा किए कि हर स्वचालित विज़िटर पहचान लिया गया है।
- पूरे सात दिनों को घंटे के समूहों में देखें
- प्रमुख सत्यापित बॉट श्रेणियाँ और Other तुलना करें
- क्रॉलर साक्ष्य को मेल खाने वाले वेबसाइट ज़ोन से जोड़े रखें
तुलना करें कि सामग्री का अनुरोध किसने किया और साइट ने क्या रिस्पॉन्स दिया।
क्रॉलर तालिका पहचान, प्रकाशक, श्रेणी, ट्रांसफ़र मात्रा, कुल अनुरोध, सफल 2xx, non-2xx परिणाम और घंटेवार छोटे चार्ट को एक समीक्षा दृश्य में साथ रखती है।
- उपलब्ध सत्यापित श्रेणियों से तालिका फ़िल्टर करें
- अनुरोध मात्रा की ट्रांसफ़र किए गए बाइट से तुलना करें
- बार-बार non-2xx रिस्पॉन्स वाले क्रॉलर को प्राथमिकता दें
कुल विफलता संख्या से प्रभावित पाथ तक पहुँचें।
असफल अनुरोध वाला क्रॉलर चुनकर URL पाथ, HTTP स्थिति और दोहराए गए अनुरोधों की संख्या देखें। इससे तकनीकी समीक्षा सीमित होती है, बिना हर non-2xx रिस्पॉन्स को त्रुटि मान लिए।
और जानें: non-2xx जाँच- रीडायरेक्ट, क्लाइंट त्रुटि और सर्वर त्रुटि अलग करें
- एक ही स्थिति के साथ बार-बार अनुरोधित पाथ खोजें
- अप्रत्याशित रिस्पॉन्स की केंद्रित वेबसाइट ऑडिट में जाँच करें
सत्यापित बॉट ट्रैफ़िक को केंद्रित तकनीकी समीक्षा में बदलें।
उपयोगी परिणाम केवल बड़ा क्रॉलर चार्ट नहीं है। यह स्पष्ट निर्णय है कि किस क्रॉलर, श्रेणी या non-2xx पाथ की जाँच होनी चाहिए।
- 01
Cloudflare जोड़ें और प्रोजेक्ट ज़ोन का मिलान करें
ऐसा सक्रिय API टोकन इस्तेमाल करें जो वेबसाइट ज़ोन सूचीबद्ध कर सके और एनालिटिक्स पढ़ सके। फिर पुष्टि करें कि प्रोजेक्ट डोमेन से मेल खाने वाला ज़ोन जुड़ा है।
- 02
सात दिनों का श्रेणी पैटर्न समझें
अलग-अलग क्रॉलर की पंक्तियाँ खोलने से पहले लगातार गतिविधि, अचानक तेज़ अनुरोध, अपेक्षित श्रेणियों की अनुपस्थिति या बड़े Other हिस्से पर ध्यान दें।
- 03
क्रॉलर की मात्रा और परिणाम तुलना करें
अनुरोध, ट्रांसफ़र किए गए बाइट, घंटेवार रुझान, सफल 2xx रिस्पॉन्स और non-2xx संख्या से तय करें कि किस क्रॉलर पर पहले ध्यान देना है।
- 04
पाथ जाँचें और इच्छित रिस्पॉन्स सत्यापित करें
हर दोहराए गए पाथ और स्थिति की समीक्षा करें, पुष्टि करें कि वह जानबूझकर है या नहीं, अप्रत्याशित रिस्पॉन्स जाँचें और बाद के ट्रैफ़िक साक्ष्य से व्यवहार बदलने की पुष्टि करें।
क्रॉलर ट्रैफ़िक वहाँ इस्तेमाल करें जहाँ उससे वास्तविक निर्णय बदलता है।
यह दृश्य तब सबसे उपयोगी है जब टीम के पास वेबसाइट का पर्याप्त संदर्भ हो ताकि वह तय कर सके कि ट्रैफ़िक पैटर्न या HTTP रिस्पॉन्स अपेक्षित है या नहीं।
प्रकाशक और सामग्री लाइब्रेरी
देखें कि सत्यापित खोज और AI क्रॉलर समूह साइट से अनुरोध कर रहे हैं या नहीं और महत्वपूर्ण सामग्री पाथ non-2xx रिस्पॉन्स देते हैं या नहीं।
SEO और सामग्री टीमें
क्रॉल किए जा सकने पर चर्चा में वास्तविक अनुरोध साक्ष्य जोड़ें, बिना क्रॉलर गतिविधि को इंडेक्सिंग, उद्धरण या उत्तरों में विज़िबिलिटी का प्रमाण बताए।
उत्पाद और इंजीनियरिंग टीमें
एप्लिकेशन रूट या डिप्लॉयमेंट की तकनीकी जाँच आवश्यक हो तो विशिष्ट क्रॉलर, पाथ, HTTP स्थिति और अनुरोध संख्या सौंपें।
एजेंसियाँ और कई प्रोजेक्ट की टीमें
हर क्लाइंट या वेबसाइट ज़ोन को मेल खाने वाले Screpy प्रोजेक्ट से जोड़े रखें और अलग-अलग प्रॉपर्टी पर समान समीक्षा तरीका इस्तेमाल करें।
समझें कि क्रॉलर ट्रैफ़िक क्या साबित नहीं कर सकता।
स्पष्ट सीमाएँ SEO, सामग्री, इंजीनियरिंग और AI खोज की चर्चाओं में साक्ष्य के सही उपयोग में मदद करती हैं।
अनुरोध AI उद्धरण नहीं है
सत्यापित क्रॉलर अनुरोध दिखाता है कि बॉट URL तक पहुँचा। इससे यह साबित नहीं होता कि पेज इंडेक्स हुआ, प्रशिक्षण में इस्तेमाल हुआ, उद्धृत हुआ या AI उत्तर में शामिल हुआ।
सात दिन, मनचाहा इतिहास नहीं
वर्तमान Screpy दृश्य घंटेवार रुझान डेटा के साथ निश्चित सात दिनों की अवधि इस्तेमाल करता है। यह मनचाही तारीख सीमाएँ या लंबे समय का बॉट इतिहास देने का वादा नहीं करता।
सत्यापित ट्रैफ़िक, हर स्वचालित अनुरोध नहीं
दृश्य जुड़े ज़ोन के लिए उपलब्ध सत्यापित बॉट श्रेणियों से बनता है। यह कच्चे सर्वर लॉग की जाँच या हर स्क्रेपर की पूरी सूची नहीं है।
विश्लेषण, क्रॉलर नियंत्रण नहीं
Screpy गतिविधि और रिस्पॉन्स परिणाम बताता है। वर्तमान दृश्य क्रॉलर ब्लॉक नहीं करता, पहुँच नियम नहीं बदलता, बॉट अलर्ट नहीं भेजता और पूरा अनुरोध लॉग निर्यात नहीं करता।
प्रश्न के अनुरूप AI खोज कार्यप्रवाह चुनें।
वेबसाइट अनुरोधों के लिए क्रॉलर विश्लेषण, निगरानी किए गए उत्तरों के लिए AI Visibility या दोहराई गई रिस्पॉन्स समस्या की व्यापक तकनीकी जाँच के लिए Website Audit इस्तेमाल करें।
सात दिनों की सत्यापित क्रॉलर श्रेणियाँ, अनुरोध रुझान, ट्रांसफ़र मात्रा, रिस्पॉन्स परिणाम और non-2xx पाथ देखें।
चुने हुए प्रॉम्प्ट पर ब्रांड उल्लेख, उद्धरण, स्रोत डोमेन, उत्तर में स्थान, भावना, प्रतिस्पर्धी और शेयर ऑफ़ वॉइस की निगरानी करें।
non-2xx बॉट अनुरोध रीडायरेक्ट, काम न करने वाले गंतव्य, आंतरिक लिंक समस्या या बार-बार की टेम्पलेट समस्या दिखाएँ तो व्यापक साइट क्रॉल करें।
AI और बॉट ट्रैफ़िक विश्लेषण के सामान्य प्रश्न
जुड़े डेटा स्रोत, निश्चित रिपोर्टिंग अवधि, सत्यापित क्रॉलर दायरे, रिस्पॉन्स गणना, URL की विस्तृत जाँच और क्रॉलर पहुँच तथा AI उत्तर विज़िबिलिटी का अंतर समझें।
असफल क्रॉलर URL की जाँच कैसे करूँ?
प्रभावित क्रॉलर की non-2xx संख्या खोलें, हर पाथ और HTTP स्थिति देखें, फिर तय करें कि रिस्पॉन्स जानबूझकर है या नहीं। बदलाव से पहले अप्रत्याशित रीडायरेक्ट, 4xx या 5xx रिस्पॉन्स को लाइव रूट, आंतरिक लिंक, कैनोनिकल गंतव्य, क्रॉल कॉन्फ़िगरेशन और व्यापक Website Audit से जाँचा जा सकता है।
Screpy AI & Bot Traffic क्या मापता है?
Screpy प्रोजेक्ट से मेल खाने वाले Cloudflare ज़ोन के एनालिटिक्स से पिछले सात दिनों का सत्यापित बॉट ट्रैफ़िक बताता है। डैशबोर्ड में घंटेवार श्रेणी रुझान और प्रकाशक, श्रेणी, ट्रांसफ़र किए गए बाइट, कुल अनुरोध, सफल अनुरोध, non-2xx अनुरोध तथा हर क्रॉलर का रुझान दिखाने वाली तालिका होती है।
बॉट ट्रैफ़िक डेटा दिखने से पहले क्या आवश्यक है?
सक्रिय Cloudflare API टोकन जोड़ें जो संबंधित ज़ोन सूचीबद्ध कर सके और उसका एनालिटिक्स पढ़ सके। फिर Screpy प्रोजेक्ट डोमेन का मिलान उपलब्ध ज़ोन से करता है। टोकन में एनालिटिक्स अनुमति न हो, प्रोजेक्ट डोमेन ज़ोन से मेल न खाता हो या आवश्यक डेटासेट ज़ोन में अनुपलब्ध हो तो डैशबोर्ड वैकल्पिक डेटा के बजाय अनुपलब्ध स्थिति दिखाता है।
क्या AI बॉट ट्रैफ़िक साबित करता है कि मेरी सामग्री AI उत्तर में आई?
नहीं। अनुरोध केवल साबित करता है कि रिपोर्टिंग अवधि में सत्यापित क्रॉलर URL तक पहुँचा। इससे इंडेक्सिंग, मॉडल प्रशिक्षण, ब्रांड उल्लेख, उद्धरण, रैंकिंग स्थान या उत्तर में शामिल होने का प्रमाण नहीं मिलता। निगरानी किए गए प्रॉम्प्ट और उत्तरों से जुड़े प्रश्न के लिए AI Visibility इस्तेमाल करें।
Screpy कौन से क्रॉलर पहचान सकता है?
तालिका जुड़े एनालिटिक्स स्रोत द्वारा सत्यापित बॉट के रूप में वर्गीकृत ट्रैफ़िक से शुरू होती है। अनुरोध मौजूद होने पर Screpy Googlebot, Bingbot, OpenAI, Anthropic, Perplexity, Apple, Meta और अन्य पहचानी गई सेवाओं जैसे ज्ञात क्रॉलर समूहों के पढ़ने योग्य नाम जोड़ता है। उपलब्ध पंक्तियाँ ज़ोन के वास्तविक ट्रैफ़िक पर निर्भर हैं।
सफल या असफल क्रॉलर अनुरोध किसे माना जाता है?
Screpy HTTP 2xx रिस्पॉन्स को सफल गिनता है। इस दृश्य में 2xx सीमा के बाहर वाले रिस्पॉन्स असफल गिने जाते हैं, इसलिए विस्तृत जाँच में रीडायरेक्ट और क्लाइंट तथा सर्वर त्रुटियाँ शामिल हो सकती हैं। सुधार आवश्यक है या नहीं तय करने से पहले सटीक स्थिति जाँचें।
क्या Screpy AI & Bot Traffic सर्वर लॉग विश्लेषक है?
नहीं। यह मेल खाने वाले Cloudflare ज़ोन के समेकित एनालिटिक्स पढ़ता है और सत्यापित क्रॉलर का केंद्रित दृश्य देता है। यह कच्चे Apache, Nginx, CDN या एप्लिकेशन लॉग ग्रहण नहीं करता और हर व्यक्तिगत अनुरोध घटना नहीं दिखाता।
क्या इस पेज से Screpy AI क्रॉलर ब्लॉक कर सकता है या robots.txt बदल सकता है?
नहीं। वर्तमान सुविधा विश्लेषण और जाँच का दृश्य है। पहुँच नियंत्रण, फ़ायरवॉल नियम, robots निर्देश, क्रॉलर अलर्ट, रेफ़रल एनालिटिक्स और CSV निर्यात इस Screpy पेज से प्रबंधित नहीं होते।