আপনি যদি Blogger ব্যবহার করেন এবং গুগল সার্চ ইঞ্জিনে আপনার ব্লগকে আরও ভালোভাবে র্যাংক করাতে চান, তাহলে Robots.txt ফাইল কনফিগার করা অত্যন্ত জরুরি। সঠিকভাবে কাস্টম robots.txt ফাইল সেট করলে সার্চ ইঞ্জিন আপনার ব্লগের কোন কোন পেজ ইনডেক্স করবে আর কোনগুলো করবে না, তা নিয়ন্ত্রণ করা যায়।
এই আর্টিকেলে আমরা দেখাবো কিভাবে Robots.txt Generator Tool ব্যবহার করে মাত্র কয়েক ক্লিকে Blogger-এ কাস্টম robots.txt ফাইল যুক্ত করবেন।
Robots.txt হলো একটি টেক্সট ফাইল যা সার্চ ইঞ্জিনের বটদের বলে দেয় কোন পেজগুলো তারা ভিজিট (crawl) করতে পারবে আর কোনগুলো পারবে না। এটি আপনার সাইটের root directory-তে থাকে এবং ওয়েবসাইট SEO-এর একটি গুরুত্বপূর্ণ অংশ।
Blogger ডিফল্টভাবে একটি সাধারণ robots.txt ফাইল ব্যবহার করে। কিন্তু আপনি যদি চাচ্ছেন আপনার ব্লগের:
নির্দিষ্ট লেবেল, পেজ, বা সার্চ পেজ গুলো সার্চ ইঞ্জিন থেকে বাদ দিতে
ফিড পেজ/সার্চ পেজ crawl না করাতে
ব্লগের SEO উন্নত করতে
তাহলে আপনাকে কাস্টম robots.txt ব্যবহার করতেই হবে।
ব্রাউজারে এই লিংকে যান:
👉 https://www.bytesvibe.com/robots-txt-generator-for-blogger/
সেখানে একটি ইনপুট ফিল্ড থাকবে যেখানে আপনাকে আপনার ব্লগের URL (যেমন: https://yourblog.blogspot.com
) দিতে হবে।
আপনি ক্লিক করলেই নিচে আপনার জন্য কাস্টম SEO-ফ্রেন্ডলি robots.txt ফাইল তৈরি হয়ে যাবে।
জেনারেট হওয়া কোডটি সম্পূর্ণভাবে সিলেক্ট করে কপি করে নিন।
আপনার Blogger অ্যাকাউন্টে লগইন করুন এবং যেই ব্লগে robots.txt সেট করতে চান, সেটি সিলেক্ট করুন।
Blogger Dashboard থেকে Settings মেনুতে যান
নিচে স্ক্রল করুন, Crawlers and indexing সেকশনটি খুঁজে বের করুন
Enable custom robots.txt অপশনটি অন করে দিন
নিচে একটি টেক্সট বক্স আসবে
টুল থেকে কপি করা robots.txt কোডটি এখানে পেস্ট করুন।
সবশেষে Save করে দিন।
এখন সার্চ ইঞ্জিন বটগুলো আপনার robots.txt নির্দেশনা অনুযায়ীই কাজ করবে। আপনার ব্লগের অপ্রয়োজনীয় পেজগুলো ইনডেক্স হবে না, ফলে সার্চ ইঞ্জিনে শুধুমাত্র দরকারি ও মানসম্পন্ন কনটেন্ট র্যাংক করতে পারবে।
Robots.txt সঠিকভাবে সেট করা মানে হলো আপনার ব্লগের SEO এক ধাপ এগিয়ে যাওয়া। আর এই ফ্রি টুলটি সেই কাজটিকে করে তুলেছে আরও সহজ, ফাস্ট এবং ইউজার-ফ্রেন্ডলি। আপনি যদি একজন ব্লগার হন, তাহলে এখনই এই টুল ব্যবহার করে আপনার Blogger সাইটে কাস্টম robots.txt ফাইল অ্যাড করুন।
আমি রিদুয়ান চৌধুরী। বিশ্বের সর্ববৃহৎ বিজ্ঞান ও প্রযুক্তির সৌশল নেটওয়ার্ক - টেকটিউনস এ আমি 3 সপ্তাহ 5 দিন যাবৎ যুক্ত আছি। টেকটিউনস আমি এ পর্যন্ত 2 টি টিউন ও 0 টি টিউমেন্ট করেছি। টেকটিউনসে আমার 0 ফলোয়ার আছে এবং আমি টেকটিউনসে 0 টিউনারকে ফলো করি।