সাত দিনের ট্রাফিক প্রবণতা
একটি বিচ্ছিন্ন ভিজিট দিয়ে ক্রলার কার্যকলাপ বিচার না করে ঘণ্টাভিত্তিক বাকেটে সর্বশেষ সাত দিনের যাচাইকৃত বট অনুরোধ পর্যালোচনা করুন।
AI ও বট ট্রাফিক অ্যানালিটিক্স
আপনার Screpy প্রকল্পের সঙ্গে মিল থাকা Cloudflare জোন যুক্ত করুন এবং সর্বশেষ সাত দিনের যাচাইকৃত বট কার্যকলাপ পর্যালোচনা করুন। ক্রলার ভিজিটকে AI উদ্ধৃতি মনে না করে ক্রলার বিভাগ, প্রকাশক, ডেটা স্থানান্তর, অনুরোধের প্রবণতা, সফল প্রতিক্রিয়া ও non-2xx URL তুলনা করুন।
TL;DR
সংক্ষেপে
সারাংশ দেখান সারাংশ লুকান
TL;DR
সংক্ষেপে
AI ও বট ট্রাফিক অ্যানালিটিক্স কী?
Screpy AI ও বট ট্রাফিক হলো যাচাইকৃত ক্রলার অনুরোধের জন্য Cloudflare-সংযুক্ত অ্যানালিটিক্স ভিউ। এটি সর্বশেষ সাত দিনের জোন কার্যকলাপকে বিভাগীয় প্রবণতা, ক্রলারভিত্তিক মোট সংখ্যা, স্থানান্তরের পরিমাণ, প্রতিক্রিয়ার ফলাফল ও পাথভিত্তিক non-2xx বিশ্লেষণে রূপ দেয়। এটি অ্যাক্সেসের প্রমাণ মাপে, AI উত্তরের দৃশ্যমানতা নয়।
সঠিক জোন সংযুক্ত করুন
- জোন ও অ্যানালিটিক্স অ্যাক্সেসসহ সক্রিয় Cloudflare API টোকেন যোগ করুন।
- Screpy উপলভ্য জোনগুলোকে আপনার প্রকল্পের ওয়েবসাইট ডোমেনের সঙ্গে মেলায়।
- প্রয়োজনীয় জোন বা ডেটাসেট পড়া না গেলে ভিউটি উপলভ্য থাকে না।
- সংযোগ অসম্পূর্ণ হলে নীরবে বিকল্প ট্রাফিক উৎস ব্যবহার করা হয় না।
সাত দিনের প্রবণতা পড়ুন
- বর্তমান রিপোর্টিং সময়সীমা সর্বশেষ সাত দিনে নির্ধারিত।
- অনুরোধের পরিমাণ ঘণ্টাভিত্তিক বাকেটে গ্রুপ করা হয়।
- সর্বোচ্চ পরিমাণের যাচাইকৃত বট বিভাগ আলাদা সিরিজ হিসেবে দেখা যায়।
- প্রয়োজনে কম পরিমাণের বিভাগগুলো Other সিরিজে একত্র করা হয়।
যাচাইকৃত ক্রলার তুলনা করুন
- ক্রলারের নাম, প্রকাশক ও যাচাইকৃত বিভাগ পর্যালোচনা করুন।
- স্থানান্তরিত বাইট ও মোট অনুরোধের পরিমাণ তুলনা করুন।
- সফল 2xx অনুরোধকে non-2xx প্রতিক্রিয়া থেকে আলাদা করুন।
- পর্যালোচনা সীমিত করতে বিভাগ ফিল্টার ও প্রতি-ক্রলার স্পার্কলাইন ব্যবহার করুন।
non-2xx পাথ তদন্ত করুন
- যে ক্রলারে মনোযোগ দরকার তার ব্যর্থ অনুরোধের সংখ্যা খুলুন।
- অনুরোধ করা পাথ, নির্দিষ্ট HTTP স্ট্যাটাস ও অনুরোধের সংখ্যা পরীক্ষা করুন।
- রিডাইরেক্ট, ক্লায়েন্ট ত্রুটি ও সার্ভার ত্রুটিকে তাদের উদ্দেশ্য অনুযায়ী বিবেচনা করুন।
- ক্রলার অনুরোধকে ইনডেক্সিং, প্রশিক্ষণ বা উদ্ধৃতির প্রমাণ হিসেবে উপস্থাপন করবেন না।
ড্যাশবোর্ডে সত্যিই সংরক্ষিত ক্রলার প্রমাণ দেখুন।
ট্রাফিকের পরিমাণ, পরিচয়, বিভাগ, স্থানান্তরের আকার, প্রতিক্রিয়ার ফলাফল ও পাথভিত্তিক ত্রুটি একসঙ্গে ব্যবহার করুন। প্রতিটি ক্ষেত্র ক্রলার অ্যাক্সেসের আলাদা প্রশ্নের উত্তর দেয়।
যাচাইকৃত বট বিভাগ
স্ট্যাকড চার্টে সর্বোচ্চ পরিমাণের যাচাইকৃত বট বিভাগ তুলনা করুন; কম পরিমাণের বিভাগগুলো Other হিসেবে একত্র থাকে।
ক্রলার ও প্রকাশকের পরিচয়
Screpy যাচাইকৃত অনুরোধকে পরিচিত সার্চ, AI, মনিটরিং বা সামাজিক ক্রলার পরিবারের সঙ্গে মেলাতে পারলে সহজপাঠ্য ক্রলার নাম ও প্রকাশক দেখুন।
বিভাগ ফিল্টার
সংযুক্ত জোনে থাকা বিভাগ অনুযায়ী যাচাইকৃত ক্রলার টেবিল ফিল্টার করুন এবং একটি স্বয়ংক্রিয় ট্রাফিক শ্রেণিতে তুলনা কেন্দ্রীভূত করুন।
স্থানান্তরিত বাইট
রিপোর্টিং সময়ে প্রতিটি ক্রলার কত প্রতিক্রিয়া ডেটা পেয়েছে তা তার অনুরোধের পরিমাণ ও প্রবণতার পাশে পরিমাপ করুন।
সফল ও non-2xx অনুরোধ
প্রতিটি ক্রলার অনুরোধকে সফল ধরে না নিয়ে সফল 2xx প্রতিক্রিয়াকে রিডাইরেক্ট, ক্লায়েন্ট ত্রুটি ও সার্ভার ত্রুটি থেকে আলাদা করুন।
প্রতি-ক্রলার অনুরোধ স্পার্কলাইন
সাত দিনের সময়সীমায় কোনো ক্রলার নিয়মিত সক্রিয় ছিল নাকি স্বল্প বিস্ফোরণে দেখা গেছে তা ঘণ্টাভিত্তিক স্পার্কলাইনে দেখুন।
ব্যর্থ URL বিশদ বিশ্লেষণ
non-2xx অনুরোধ থাকা ক্রলার খুলে প্রভাবিত পাথ, নির্দিষ্ট HTTP স্ট্যাটাস ও ব্যর্থ অনুরোধের সংখ্যা দেখুন।
যাচাইকৃত বট কার্যকলাপ হিসেবে শ্রেণিবদ্ধ ট্রাফিক দিয়ে শুরু করুন।
Screpy মিল থাকা Cloudflare জোন পড়ে এবং ভিউটিকে যাচাইকৃত বট বিভাগযুক্ত অনুরোধে সীমিত করে। এতে প্রতিটি স্বয়ংক্রিয় দর্শক শনাক্ত হয়েছে দাবি না করেই বিশ্লেষণ কেন্দ্রীভূত থাকে।
- ঘণ্টাভিত্তিক বাকেটে পূর্ণ সাত দিন পর্যালোচনা করুন
- শীর্ষ যাচাইকৃত বট বিভাগ ও Other তুলনা করুন
- ক্রলার প্রমাণকে মিল থাকা ওয়েবসাইট জোনের সঙ্গে যুক্ত রাখুন
কে কনটেন্ট অনুরোধ করেছে এবং সাইট কীভাবে সাড়া দিয়েছে তা তুলনা করুন।
ক্রলার টেবিল একটি ভিউতে পরিচয়, প্রকাশক, বিভাগ, স্থানান্তরের পরিমাণ, মোট অনুরোধ, 2xx সাফল্য, non-2xx ফলাফল ও ঘণ্টাভিত্তিক স্পার্কলাইন একত্র করে।
- উপলভ্য যাচাইকৃত বিভাগ অনুযায়ী টেবিল ফিল্টার করুন
- অনুরোধের পরিমাণের সঙ্গে স্থানান্তরিত বাইট তুলনা করুন
- পুনরাবৃত্ত non-2xx প্রতিক্রিয়াযুক্ত ক্রলারকে অগ্রাধিকার দিন
সমষ্টিগত ব্যর্থতার সংখ্যা থেকে প্রভাবিত পাথে যান।
ব্যর্থ অনুরোধ থাকা ক্রলার বেছে URL পাথ, HTTP স্ট্যাটাস ও পুনরাবৃত্ত অনুরোধের সংখ্যা দেখুন। প্রতিটি non-2xx প্রতিক্রিয়াকে ত্রুটি ধরে না নিয়েই প্রযুক্তিগত পর্যালোচনা সীমিত করুন।
আরও জানুন: non-2xx তদন্ত- রিডাইরেক্ট, ক্লায়েন্ট ত্রুটি ও সার্ভার ত্রুটি আলাদা করুন
- একই স্ট্যাটাসে বারবার অনুরোধ করা পাথ খুঁজুন
- অপ্রত্যাশিত প্রতিক্রিয়াকে লক্ষ্যভিত্তিক ওয়েবসাইট অডিটে পাঠান
যাচাইকৃত বট ট্রাফিককে লক্ষ্যভিত্তিক প্রযুক্তিগত পর্যালোচনায় রূপ দিন।
কার্যকর ফলাফল বড় ক্রলার চার্ট নয়; কোন ক্রলার, বিভাগ বা non-2xx পাথ তদন্তের যোগ্য সে বিষয়ে নির্দিষ্ট সিদ্ধান্ত।
- 01
Cloudflare সংযুক্ত করে প্রকল্পের জোন মেলান
ওয়েবসাইট জোন তালিকাভুক্ত ও অ্যানালিটিক্স পড়তে পারে এমন সক্রিয় API টোকেন ব্যবহার করুন, তারপর প্রকল্প ডোমেনের মিল থাকা সংযুক্ত জোন নিশ্চিত করুন।
- 02
সাত দিনের বিভাগীয় ধরণ পড়ুন
আলাদা ক্রলার সারি খোলার আগে স্থায়ী কার্যকলাপ, আকস্মিক বৃদ্ধি, প্রত্যাশিত বিভাগের অনুপস্থিতি বা বড় Other অংশ দেখুন।
- 03
ক্রলারের পরিমাণ ও ফলাফল তুলনা করুন
প্রথমে কোন ক্রলারে মনোযোগ দরকার তা বাছতে অনুরোধ, স্থানান্তরিত বাইট, ঘণ্টাভিত্তিক প্রবণতা, সফল 2xx প্রতিক্রিয়া ও non-2xx সংখ্যা ব্যবহার করুন।
- 04
পাথ পরীক্ষা করে প্রত্যাশিত প্রতিক্রিয়া যাচাই করুন
প্রতিটি পুনরাবৃত্ত পাথ ও স্ট্যাটাস পর্যালোচনা করুন, তা ইচ্ছাকৃত কি না নিশ্চিত করুন, অপ্রত্যাশিত প্রতিক্রিয়া তদন্ত করুন এবং পরবর্তী ট্রাফিক প্রমাণে আচরণ বদলেছে কি না নিশ্চিত করুন।
যেখানে বাস্তব সিদ্ধান্ত বদলায় সেখানে ক্রলার ট্রাফিক ব্যবহার করুন।
দলটি ট্রাফিকের ধরণ বা HTTP প্রতিক্রিয়া প্রত্যাশিত কি না নির্ধারণের মতো পর্যাপ্ত ওয়েবসাইট প্রসঙ্গ জানলে এই ভিউ সবচেয়ে কার্যকর।
প্রকাশক ও কনটেন্ট লাইব্রেরি
যাচাইকৃত সার্চ ও AI ক্রলার পরিবার সাইটে অনুরোধ করছে কি না এবং গুরুত্বপূর্ণ কনটেন্ট পাথ non-2xx প্রতিক্রিয়া দিচ্ছে কি না দেখুন।
SEO ও কনটেন্ট দল
ক্রলার কার্যকলাপকে ইনডেক্সিং, উদ্ধৃতি বা উত্তরের দৃশ্যমানতার প্রমাণ না বানিয়ে ক্রলযোগ্যতা আলোচনায় বাস্তব অনুরোধের প্রমাণ যোগ করুন।
পণ্য ও প্রকৌশল দল
অ্যাপ্লিকেশন রুট বা ডিপ্লয়মেন্টে প্রযুক্তিগত তদন্ত দরকার হলে নির্দিষ্ট ক্রলার, পাথ, HTTP স্ট্যাটাস ও অনুরোধের সংখ্যা হস্তান্তর করুন।
এজেন্সি ও বহু-প্রকল্প দল
প্রতিটি ক্লায়েন্ট বা ওয়েবসাইট জোনকে মিল থাকা Screpy প্রকল্পের সঙ্গে যুক্ত রাখুন এবং আলাদা প্রপার্টিতে একই পর্যালোচনা পদ্ধতি ব্যবহার করুন।
ক্রলার ট্রাফিক কী প্রমাণ করতে পারে না তা জানুন।
স্পষ্ট সীমাবদ্ধতা SEO, কনটেন্ট, প্রকৌশল ও AI সার্চ আলোচনায় প্রমাণকে নিরাপদে ব্যবহার করতে সাহায্য করে।
একটি অনুরোধ AI উদ্ধৃতি নয়
যাচাইকৃত ক্রলার অনুরোধ দেখায় একটি বট URL-এ পৌঁছেছে। এটি পৃষ্ঠা ইনডেক্স, প্রশিক্ষণে ব্যবহৃত, উদ্ধৃত বা AI উত্তরে অন্তর্ভুক্ত হয়েছে—এমন প্রমাণ নয়।
সাত দিন, কাস্টম ইতিহাস নয়
বর্তমান Screpy ভিউ ঘণ্টাভিত্তিক প্রবণতাসহ নির্ধারিত সাত দিনের সময়সীমা ব্যবহার করে। এটি যেকোনো তারিখসীমা বা দীর্ঘমেয়াদি বট ইতিহাসের প্রতিশ্রুতি দেয় না।
যাচাইকৃত ট্রাফিক, প্রতিটি স্বয়ংক্রিয় অনুরোধ নয়
ভিউটি সংযুক্ত জোনে উপলভ্য যাচাইকৃত বট বিভাগ থেকে তৈরি। এটি কাঁচা সার্ভার লগ এক্সপ্লোরার বা প্রতিটি স্ক্র্যাপারের পূর্ণ তালিকা নয়।
অ্যানালিটিক্স, ক্রলার নিয়ন্ত্রণ নয়
Screpy কার্যকলাপ ও প্রতিক্রিয়ার ফলাফল জানায়। বর্তমান ভিউ ক্রলার ব্লক করে না, অ্যাক্সেস নিয়ম বদলায় না, বট সতর্কতা পাঠায় না বা পূর্ণ অনুরোধ লগ এক্সপোর্ট করে না।
প্রশ্নের সঙ্গে মানানসই AI সার্চ ওয়ার্কফ্লো বেছে নিন।
ওয়েবসাইট অনুরোধের জন্য ক্রলার অ্যানালিটিক্স, পর্যবেক্ষিত উত্তরের জন্য AI দৃশ্যমানতা অথবা পুনরাবৃত্ত প্রতিক্রিয়া সমস্যায় বিস্তৃত প্রযুক্তিগত তদন্তের জন্য ওয়েবসাইট অডিট ব্যবহার করুন।
সাত দিনের যাচাইকৃত ক্রলার বিভাগ, অনুরোধের প্রবণতা, স্থানান্তরের পরিমাণ, প্রতিক্রিয়ার ফলাফল ও non-2xx পাথ পর্যালোচনা করুন।
নির্বাচিত প্রম্পটে ব্র্যান্ড উল্লেখ, উদ্ধৃতি, উৎস ডোমেন, উত্তরের অবস্থান, অনুভূতি, প্রতিযোগী ও শেয়ার অব ভয়েস পর্যবেক্ষণ করুন।
non-2xx বট অনুরোধ রিডাইরেক্ট, ভাঙা গন্তব্য, অভ্যন্তরীণ লিংকের সমস্যা বা পুনরাবৃত্ত টেমপ্লেট ত্রুটির ইঙ্গিত দিলে বিস্তৃত সাইট ক্রল করুন।
AI ও বট ট্রাফিক অ্যানালিটিক্সের সাধারণ প্রশ্ন
সংযুক্ত ডেটা উৎস, নির্ধারিত রিপোর্টিং সময়সীমা, যাচাইকৃত ক্রলারের পরিসর, প্রতিক্রিয়ার যুক্তি, URL বিশ্লেষণ এবং ক্রলার অ্যাক্সেস ও AI উত্তরের দৃশ্যমানতার পার্থক্য বুঝুন।
Screpy AI ও বট ট্রাফিক কী পরিমাপ করে?
Screpy প্রকল্পের সঙ্গে মিল থাকা Cloudflare জোনের অ্যানালিটিক্স ব্যবহার করে সর্বশেষ সাত দিনের যাচাইকৃত বট ট্রাফিক জানায়। ড্যাশবোর্ডে ঘণ্টাভিত্তিক বিভাগীয় প্রবণতা এবং প্রকাশক, বিভাগ, স্থানান্তরিত বাইট, মোট অনুরোধ, সফল ও non-2xx অনুরোধ এবং প্রতি-ক্রলার প্রবণতাসহ টেবিল থাকে।
বট ট্রাফিক ডেটা দেখানোর আগে কী প্রয়োজন?
প্রাসঙ্গিক জোন তালিকাভুক্ত ও অ্যানালিটিক্স পড়তে পারে এমন সক্রিয় Cloudflare API টোকেন যুক্ত করুন। Screpy প্রকল্প ডোমেনকে প্রবেশযোগ্য জোনের সঙ্গে মেলায়। অনুমতি, জোনের মিল বা ডেটাসেট না থাকলে বিকল্প ডেটার বদলে অনুপলভ্য অবস্থা দেখায়।
Screpy কোন ক্রলার শনাক্ত করতে পারে?
টেবিল সংযুক্ত অ্যানালিটিক্স উৎসে যাচাইকৃত বট হিসেবে শ্রেণিবদ্ধ ট্রাফিক দিয়ে শুরু হয়। অনুরোধ থাকলে Screpy Googlebot, Bingbot, OpenAI, Anthropic, Perplexity, Apple, Meta ও অন্যান্য পরিচিত পরিবারের সহজপাঠ্য পরিচয় যোগ করে। সারি প্রকৃত জোন ট্রাফিকের ওপর নির্ভর করে।
কোন ক্রলার অনুরোধ সফল বা ব্যর্থ হিসেবে গণ্য হয়?
Screpy HTTP 2xx প্রতিক্রিয়াকে সফল গণ্য করে। 2xx-এর বাইরের প্রতিক্রিয়া এই ভিউতে ব্যর্থ, তাই বিশ্লেষণে রিডাইরেক্টের পাশাপাশি ক্লায়েন্ট ও সার্ভার ত্রুটিও থাকতে পারে। সংশোধনের সিদ্ধান্তের আগে নির্দিষ্ট স্ট্যাটাস দেখুন।
AI বট ট্রাফিক কি প্রমাণ করে আমার কনটেন্ট AI উত্তরে ছিল?
না। একটি অনুরোধ শুধু প্রমাণ করে রিপোর্টিং সময়ে যাচাইকৃত ক্রলার URL-এ পৌঁছেছে। এটি ইনডেক্সিং, মডেল প্রশিক্ষণ, ব্র্যান্ড উল্লেখ, উদ্ধৃতি, র্যাঙ্কিং বা উত্তরে অন্তর্ভুক্তির প্রমাণ নয়। পর্যবেক্ষিত প্রম্পট ও উত্তরের জন্য AI দৃশ্যমানতা ব্যবহার করুন।
Screpy AI ও বট ট্রাফিক কি সার্ভার লগ বিশ্লেষক?
না। এটি মিল থাকা Cloudflare জোনের সমষ্টিগত অ্যানালিটিক্স পড়ে যাচাইকৃত ক্রলারের লক্ষ্যভিত্তিক ভিউ দেয়। কাঁচা Apache, Nginx, CDN বা অ্যাপ্লিকেশন লগ গ্রহণ করে না এবং প্রতিটি পৃথক অনুরোধ দেখায় না।
এই পৃষ্ঠা থেকে Screpy কি AI ক্রলার ব্লক বা robots.txt পরিবর্তন করতে পারে?
না। বর্তমান ফিচারটি অ্যানালিটিক্স ও তদন্তের ভিউ। অ্যাক্সেস নিয়ন্ত্রণ, ফায়ারওয়াল নিয়ম, robots নির্দেশনা, ক্রলার সতর্কতা, রেফারেল অ্যানালিটিক্স ও CSV এক্সপোর্ট এই পৃষ্ঠা থেকে পরিচালিত হয় না।
ব্যর্থ ক্রলার URL কীভাবে তদন্ত করব?
প্রভাবিত ক্রলারের non-2xx সংখ্যা খুলে প্রতিটি পাথ ও HTTP স্ট্যাটাস দেখুন, তারপর প্রতিক্রিয়াটি ইচ্ছাকৃত কি না নির্ধারণ করুন। পরিবর্তনের আগে অপ্রত্যাশিত রিডাইরেক্ট, 4xx বা 5xx প্রতিক্রিয়াকে লাইভ রুট, অভ্যন্তরীণ লিংক, ক্যানোনিক্যাল গন্তব্য, ক্রল কনফিগারেশন ও বিস্তৃত ওয়েবসাইট অডিটের সঙ্গে যাচাই করুন।