আপনার ওয়েবসাইট সার্চ ইঞ্জিন ক্রল করেছে কিনা কিভাবে বুঝবেন?

আপনার ওয়েবসাইট সার্চ ইঞ্জিন ক্রল করেছে কিনা, তা জানার জন্য বেশ কয়েকটি কার্যকর পদ্ধতি রয়েছে।

সাধারণত Google বা Bing-এর মতো সার্চ ইঞ্জিনগুলো ক্রল করার পরে ওয়েবসাইটের তথ্য ইনডেক্স করে থাকে।

আপনি চাইলেই সহজেই আপনার ওয়েব পেইজ ক্রলের পর ইনডেক্স হয়েছে কিনা তা বের করতে পারবেন।

নিচে কিছু উপায় উল্লেখ করা হলো যেগুলোর মাধ্যমে আপনি নিশ্চিত হতে পারবেন যে আপনার ওয়েবসাইটকে সার্চ ইঞ্জিন ক্রল করেছে কিনা:

১. Google Search Console ব্যবহার করা (গুগলের ক্ষেত্রে)

Google Search Console এর মাধ্যমে সার্চ ইঞ্জিন ক্রল সম্পর্কে জানতে পারবেন। এই ফ্রি টুল Google সার্চ ইঞ্জিনের ক্রলিং ও ইনডেক্সিং সম্পর্কে বিস্তারিত তথ্য প্রদান করে।

পদ্ধতি:

১. Google Search Console এ লগইন করুন।

২. আপনার ওয়েবসাইট অ্যাড করুন এবং ভেরিফাই করুন।

৩. Pages বা URL Inspection Tool এ যান। এখানে আপনি দেখতে পারবেন কোন পেইজগুলো ক্রল করা হয়েছে এবং যদি কোনো সমস্যা থাকে, তাহলে সেটাও জানতে পারবেন।

৪. URL Inspection Tool-এ নির্দিষ্ট কোনো URL ইনপুট করে দেখতে পারেন যে, সেই পেইজটি Google ক্রল করেছে কিনা এবং সেটি ইনডেক্স হয়েছে কিনা।

Pages option এর মাধ্যমে আপনি এমন পেজগুলোও দেখতে পাবেন, যেগুলো ক্রলিং সমস্যার কারণে ইনডেক্স করা যায়নি।

আরও পড়ুনঃ এসইও (SEO) কি? এসইও স্টেপ বাই স্টেপ গাইডলাইন।

২. Bing Webmaster Tools ব্যবহার করা (বিংয়ের ক্ষেত্রে)

Bing Webmaster Tools হলো Bing সার্চ ইঞ্জিনের জন্য একটি টুল, যা সার্চ ইঞ্জিনের ক্রলিং এবং ইনডেক্সিং সম্পর্কিত তথ্য প্রদান করে।

পদ্ধতি:

1. Bing Webmaster Tools এ আপনার ওয়েবসাইট যুক্ত করুন এবং ভেরিফাই করুন।
2. URL Inspection বা Crawl Information চেক করে দেখুন যে, আপনার সাইটের পেজগুলো Bing ক্রল করেছে কিনা।
3. আপনি যদি কোনো নির্দিষ্ট পেজের ক্রলিং বা ইনডেক্সিং স্ট্যাটাস জানতে চান, তবে সেই URL চেক করতে পারেন।

৩. “site:” সার্চ অপারেটর ব্যবহার করা

Google বা Bing-এ সার্চ করে আপনি সরাসরি জানতে পারেন যে আপনার ওয়েবসাইটের পেজগুলো ক্রল এবং ইনডেক্স হয়েছে কিনা।

পদ্ধতি:

1. Google বা Bing-এর সার্চ বারে যান।
2. সার্চ বারে লিখুন: site:yourdomain.com (উদাহরণ: site:example.com)।
3. যদি আপনার ওয়েবসাইটের পেইজগুলো ক্রল এবং ইনডেক্স করা হয়ে থাকে, তবে সেই পেজগুলোর তালিকা সার্চ রেজাল্টে প্রদর্শিত হবে।
4. যদি কোনো পেইজ না আসে, তাহলে আপনার সাইটটি হয় ক্রল করা হয়নি বা কোনো কারণে ইনডেক্স হয়নি।

৪. Server Log File চেক করা

আপনার ওয়েবসাইটের সার্ভারের লগ ফাইলগুলোতে আপনি সার্চ ইঞ্জিনের ক্রলার (যেমন Googlebot, Bingbot) এর কার্যকলাপ দেখতে পাবেন।

পদ্ধতি:

1. আপনার ওয়েবসাইটের সার্ভারে প্রবেশ করুন এবং লগ ফাইল ডাউনলোড করুন।
2. লগ ফাইলে Googlebot, Bingbot, বা অন্যান্য সার্চ ইঞ্জিন ক্রলারের কার্যকলাপ চেক করুন।
3. লগ ফাইলে যদি আপনি ক্রলারদের কার্যকলাপ দেখতে পান, তাহলে সেটি প্রমাণ করে যে সার্চ ইঞ্জিন আপনার সাইট ক্রল করেছে।

৫. URL Inspection Tool-এর মাধ্যমে ম্যানুয়াল চেকিং

যদি আপনি নির্দিষ্ট কোন পেইজ ক্রল হয়েছে কিনা  চেক করতে চান তাহলে আপনি Google Search Console-এর URL Inspection Tool ব্যবহার করতে পারেন।

পদ্ধতি:

1. Google Search Console-এ যান।
2. URL Inspection Tool এ নির্দিষ্ট URL দিন। যদি পেজটি ইনডেক্স করা হয়ে থাকে, তাহলে আপনি তা দেখতে পারবেন, এবং যদি না হয়ে থাকে, তাহলে Google-এ Indexing Request পাঠাতে পারবেন।

৬. Crawl Stats ব্যবহার করা

Google Search Console-এ Crawl Stats নামে একটি অপশন আছে, যেখানে সার্চ ইঞ্জিনের ক্রলিং কার্যকলাপের রিপোর্ট দেওয়া হয়। এখানে আপনি দেখতে পারবেন যে, Googlebot কতবার আপনার সাইটের পেজগুলো ক্রল করেছে, ক্রলিংয়ের গতি এবং সার্ভারের প্রতিক্রিয়া কেমন ছিল।

উপসংহার:

আপনার ওয়েবসাইট সার্চ ইঞ্জিন ক্রল করেছে কিনা তা জানার জন্য Google Search Console এবং Bing Webmaster Tools ব্যবহার সবচেয়ে কার্যকর। এ ছাড়া, আপনি “site:” অপারেটর ব্যবহার করে সরাসরি সার্চ ইঞ্জিন থেকে পেজগুলো ইনডেক্স হয়েছে কিনা চেক করতে পারেন। সার্ভার লগ ফাইল এবং Google Search Console-এর URL Inspection Tool-এর মাধ্যমে নির্দিষ্ট পেইজগুলোর ক্রলিং স্ট্যাটাসও জানতে পারবেন।