আসসালামু আলাইকুম।আশা করি সবাই ভালো আছেন, আজকে আমি আপনাদের সামনে গল্পে গল্পে কিভাবে আপনি আপনার ওয়েবসাইট এর জন্য কিভাবে রোবট টেক্সট ফাইল আপনার ওয়েবসাইটে অ্যাড করেবেন তা নিয়ে আলোচনা করবো ? বন্ধুরা গত পর্বগুলিতে আমরা জেনেছিঃ
- এসইও কি?
- এসইও কেন করবেন?
- কিভাবে গুগল তার সার্চ রেজাল্ট দেখায় ?
- রাঙ্কিং ফ্যাক্টর কি?
- অ্যালগোরিদম কি?
- এসইও কত প্রকার ও কি কি?
- ব্ল্যাক হ্যাট এসইওকি?
- হোয়াইট হ্যাট এসইওকি?
- গ্রে হ্যাট এসইওকি?
- অন পেজ এসইও কি?
- অফ পেজ এসইও কি ?
- কিওয়ার্ড রিসার্চ কি, কিভাবে গুগল কিওয়ার্ড প্লানার ইউস করে কিওয়ার্ড রিসার্চ করতে পারেন
- সেমরাস দিয়ে কিভাবে ইউস করে কিওয়ার্ড রিসার্চ করতে পারেন
- সেমরাস দিয়ে কিভাবে নিস সাইট এর জন্য কিওয়ার্ড রিসার্চ করতে পারেন?
- ওয়ার্ডপ্রেস কিভাবে ইন্সটল করবেন ।
- কিভাবে ওয়ার্ডপ্রেস থিম ইন্সটল করবেন ।
- কিভাবে SSL কিনবেন ও ইন্সটল করবেন
- অন পেজ এসইও কি
- অন পেজ এসইও এর কিছু গুরুত্বপূর্ণ পার্ট
- এএমপি কি ও কিভাবে এএমপি সেট আপ করবেন ?
- কিভাবে আপনি আপনার ওয়েবসাইট এর জন্য অন পেজ অডিট করেবেন
- কিভাবে আপনি আপনার ওয়েবসাইট এর জন্য অফ পেজ অডিট করেবেন
- কিভাবে স্কিমা আপনার ওয়েবসাইটে অ্যাড করেবেন
তো যাওয়া যাক আমাদের আজকের পর্বে।
তারপর দিন করিম গেল কিভাবে কিভাবে রোবট টেক্সট ফাইল আপনার ওয়েবসাইটে অ্যাড করা যায় তা নিয়ে জানতে ।
করিমঃ ভাই রোবট টেক্সট ফাইল কি ?
আইটি এক্সপার্টঃ রোবট টেক্সট ফাইল হচ্ছে এমন একটা টেক্সট ফাইল যারা দ্বারা সার্চ ইঞ্জিন রোবট কে বলে দেয়া, যে হে মহান রোবট সাহেব আপনি আমার এই ওয়েবসাইট এর এই পোস্ট, এই পেজ , এই মিডিয়া ফাইল গুলো ক্রাউল করবেন। এই পেজ পোস্ট মিডিয়া ক্রাউল করবেন না।এক কথায় বলা যায় যে এটা একটা বিধি নিষেধ সার্চ ইঞ্জিন এর রোবট এর জন্য ।
করিমঃ ভাই রোবট টেক্সট এর ইউস করার দরকার কি ?
আইটি এক্সপার্টঃ খুবই ভাল একটা প্রশ্ন করেছেন, কেন আসলে আমরা রোবট টেক্সট ফাইল ইউস করতে সুপারিশ করি ।
আসলে দেখা যায় আমরা যে আমাদের ওয়েবসাইট এর জন্য পেজ পোস্ট বানাই সবই দরকারি পেজ বা পোস্ট নাকি ? না সবই দরকারি পেজ ও পোস্ট না । এই অপ্রয়োজনীয় পেজ বা পোস্ট কে আমরা ইনডেক্স করতে চাই না । এই ইনডেক্স না করার জন্যই আমরা রোবট টেক্সট ইউস করে থাকি ।
করিমঃ রোবটস টিএক্সটি ফাইলস কি করে কাজ করে ?
আইটি এক্সপার্টঃ সাইট এর মালিক নির্দিষ্ট সময় ওয়েব ক্রলার নির্দেশ ক্রলিং এর জন্য এর জন্য সে robots.txt ফাইলটি সাইট এর রুট ডিরেক্টরিতে ঢুকিয়ে দেয়।
বট robots.txt ফাইল ফলো করে ক্রল ও ফ্যাচ করে থাকে। কিন্তু robots.txt বটকে বলে দেয় কোন গুলা ক্রল করা যাবে না আর কোন গুলা ক্রল করবে। যদি robots.txt না থাকে তবে ক্রলার মনে করে আপনি আপনার সাইট এর জন্য কোনো ডাইরেকশন দেন নাই। তাই সে পুরো সাইটটি ক্রল করে নেয়।
মৌলিক একটা রোবটস ফাইল ২ ভাগে বিভক্ত,
User-agent: [user-agent name]
Disallow: /[URL string not to be crawled]
করিমঃ ভাই আমরা কিভাবে রোবট টেক্সট ইউস করবো ?
আইটি এক্সপার্টঃ রোবট টেক্সট ফাইল আপনার ওয়েবসাইটে অ্যাড করা যায় তাই ভাবছেন, কোন সমস্যা নেই আমি আপনাকে দেখিয়ে দিচ্ছি।
খন চলুন ম্যানুয়ালি কি করে রোবট ফাইলটি আপনার হোস্টিং প্যানেল থেকে করা যায় তা শিখি ;
আপনি প্রথমে একটা robot.txt ফাইল তৈরি করুন নোটপ্যাড টেক্সট ফরম্যাটে টেক্সট ফরম্যাটে যা যা থাকবে।
User-agent: *
Disallow: wp-admin
Disallow: wp-admin/includes
Disallow: wp-content/plugins
Disallow: wp-content/cache
Disallow: wp-content/theme
এইটি আপনি টেক্সট ফরম্যাটে নোটপ্যাডে সেভ করুন। তারপর cpanel এ লগইন করুন। ফাইলস থেকে ফাইল ম্যানেজার এ যাবেন তারপর public_html এ যাবেন। উপরে লক্ষ্য করলে দেখবেন আপলোড লিখা আছে ঐ বাটন এ ক্লিক করে সিলেক্ট বাটন এ যেতে আপনার নোটপ্যাড এর টেক্সট ফাইলটা সিলেক্ট করে আপলোড দিন। ঠিক মতন কাজ করছে কি না তার জন্য আপনি এই ভাবে চেক করে নিতে পারেন।https://www.yoursitename.com/robots.txt.
বিকল্প পদ্ধতি হচ্ছে প্লাগিন এর মাধ্যমে করা , প্রথমে আপনি আপনার প্লাগিন্স অপশনে গিয়ে নিউ প্লাগিন্সে ক্লিক করবেন ।তারপর রোবট টেক্সট ফাইল লিখে সার্চ করবেন । এরপর আপনার সামনে অনেক প্লাগিন্স আসবে আপনি যে কোন একটা প্লাগিন্স ইন্সটল করবেন। তারপর ঐ প্লাগিন্স টা অ্যাক্টিভ করবেন । তারপর সেই খানে আপনার রোবট টেক্সট ফাইল লিখে দিবেন । তারপর সেভ করলেই আপনার রোবট টেক্সট ফাইল সেভ হয়ে যাবে ।
করিমঃ ভাই যদি একটু দেখাতেন?
আইটি এক্সপার্টঃ আমি আমার ওয়েবসাইট এর জন্য Virtual Robots.txt নামক প্লাগিন্স দিয়ে আমি এটাকে ইন্সটল করে অ্যাক্টিভ করলাম । অ্যাক্টিভ করার পর আপনাকে এইভাবে দেখাবে ।
তারপর আপনি আপনার ড্যাশবোর্ড এর সেটিং এর Virtual Robots.txt নামক অপশনে ক্লিক করবেন ।আপনি নিচের ছবিটি লক্ষ্য করুন ।
তারপর আপনি নিচের দেখানো ছবি এর জাইগায় আপনার রোবট টেক্সট ফাইল লিখে দিবেন। তারপর সেভ করে দিলেই হবে ।আপনি নিচের ছবিটি লক্ষ্য করুন ।
তাহলেই আপনার রোবট টেক্সট ফাইল সেভ হইয়ে যাবে ।
করিমঃ ভাই এবার বুঝতে পারছি কিভাবে রোবট টেক্সট আফিল সেভ করতে হবে। ওকে ভাই আজকে তাহলে আসি আল্লাহ হাফেজ ।
আইটি এক্সপার্টঃ আল্লাহ হাফেজ।
- এসইও (SEO) কি ওয়েব থ্রি (Web 3.0) যুগে থাকবে? নাকি হারিয়ে যাবে? - May 15, 2022
- ব্ল্যাক ফ্রাইডে ছাড় ২০২১ (মার্কেটার এবং ব্লগারদের জন্যে যত টুলস) - November 24, 2021
- গুগল স্প্যাম আপডেট – নভেম্বর ২০২১ টা কি এবং কি কি স্প্যাম উপেক্ষা করতে হবে? - November 6, 2021
Robot txt file cpanel e upload korthe hobena?
ডিফল্ট রোবট ফাইল থাকে এখন। ওইটা এডিট করলেই হয়। যদি না থাকে, তাহলে নোটপ্যাডে বানানোর পর cpanel এ আপ করবেন।
HTML এর জন্য কিভাবে Robots.txt ফাইল বানাবো?