আপনার পৃষ্ঠা আসলে যে রেসপন্স পাঠায় তা পরীক্ষা করুন
পৃষ্ঠার সম্পূর্ণ URL পেস্ট করে পরীক্ষা চালান। Screpy চূড়ান্ত HTTP রেসপন্স ও HTML পড়ে robots meta ট্যাগ, Googlebot ট্যাগ ও X-Robots-Tag হেডারে noindex খোঁজে। সর্বোচ্চ পাঁচটি রিডাইরেক্ট অনুসরণ করে চূড়ান্ত গন্তব্য দেখায়। এটি প্রকাশ্য রেসপন্সের একটি মুহূর্তের পরীক্ষা; পুরো সাইট ক্রল বা Google ইনডেক্স অনুসন্ধান নয়।
পরিবর্তন করার আগে উৎস খুঁজুন
HTML নির্দেশ সাধারণত পৃষ্ঠার টেমপ্লেট, SEO প্লাগইন বা CMS সেটিং থেকে আসে। WordPress-এ পৃষ্ঠার SEO সেটিং ও সাইটের সার্চ ভিজিবিলিটি সেটিং দুটিই দেখুন। হেডারের নির্দেশ আসে HTTP রেসপন্স তৈরির কনফিগারেশন থেকে। Meta ট্যাগ সরালে হেডার সরবে না। PDF ও ছবির URL-এ HTML ছাড়াই হেডারের নির্দেশ থাকতে পারে।
প্রমাণের টেবিলে ক্রলারের পরিধি অক্ষুণ্ণ থাকে। সাধারণ নিয়ম ও Googlebot-এর নিয়ম দুটিই প্রযোজ্য হতে পারে; none-এর মধ্যে noindex আছে। অন্য ক্রলারের নিয়ম আলাদা দেখানো হয়। পরীক্ষক body-এর meta ট্যাগও পড়ে, কিন্তু script, comment ও template-এর উদাহরণ markup উপেক্ষা করে। indexifembedded ও মেয়াদ শেষ হওয়ার নিয়ম আলাদাভাবে ব্যাখ্যা করা হয়।
রঙের সঙ্গে পরীক্ষার পরিধিও দেখুন
লাল অর্থ প্রযোজ্য noindex দেখা গেছে। সবুজ অর্থ সম্পূর্ণ পরীক্ষিত উৎসে noindex পাওয়া যায়নি; এটি ইনডেক্সিংয়ের নিশ্চয়তা দেয় না। হলুদ অসম্পূর্ণ পরিধি বা পর্যালোচনাযোগ্য বিষয় নির্দেশ করে। রেসপন্স সংগ্রহ ব্যর্থ হলে ফল অজানা থাকে। রেসপন্স 2 MiB ছাড়ালে পাঠযোগ্য প্রমাণ থাকে, কিন্তু noindex-এর অনুপস্থিতি নিশ্চিত করা যায় না। পেমেন্ট বা অভ্যন্তরীণ সার্চ পৃষ্ঠায় noindex উপযুক্ত হতে পারে; পৃষ্ঠাটি অনুসন্ধানে পাওয়া দরকার হলেই সরান।
ক্রল করার অনুমতি ও ইনডেক্সিং আলাদাভাবে পরীক্ষা করুন
নির্দেশ পড়তে Google-কে পৃষ্ঠায় প্রবেশ করতে হয়। ক্রল নিয়মের জন্য Robots.txt Tester, canonical ঘোষণার জন্য Canonical Tag Checker এবং বিস্তৃত পৃষ্ঠা পর্যালোচনার জন্য On-Page SEO Checker ব্যবহার করুন। সংশোধন প্রকাশের পর আবার পরীক্ষা করুন এবং Search Console-এ URL দেখুন। এই পরীক্ষক JavaScript চালায় না, robots.txt পড়ে না এবং Google URL ইনডেক্স করেছে কি না নিশ্চিত করে না।
AI বট অ্যাক্সেস পরীক্ষক: শুধু robots.txt নিয়ম পরীক্ষা করা হয়। প্রকৃত বট অ্যাক্সেস, ইনডেক্সিং বা উদ্ধৃতি নিশ্চিত করা হয় না।