robots.txt জেনারেটর

সার্চ ইঞ্জিন ক্রলারের জন্য আপনার নিয়ম ও সাইটম্যাপের ঠিকানাসহ তৈরি robots.txt।

…

কীভাবে করবেন?

  1. ১
    লেখা দিন

    লেখা বা অঙ্ক এখানে পেস্ট করুন বা টাইপ করুন।

  2. ২
    ফল দেখুন

    লেখা দেওয়ার সাথে সাথেই ফল নিচে বা পাশে দেখা যায়।

  3. ৩
    কপি করুন

    ফল কপি করে যেখানে খুশি ব্যবহার করুন। আপনার লেখা কোথাও যায় না।

এই টুল সম্পর্কে

ক্রলার বাছুন, যেসব পাথ ক্রল করাতে চান না এবং যেগুলো অনুমতি দেবেন তা লিখুন এবং সাইটম্যাপের ঠিকানা দিন। ফল কপি করে সাইটের রুটে robots.txt নামের ফাইলে রাখুন। মনে রাখবেন robots.txt ক্রলারের কাছে অনুরোধ, ব্যক্তিগত পেজ লুকানোর উপায় নয়।

প্রায় জিজ্ঞাসিত প্রশ্ন

robots.txt কোথায় রাখব?

ওয়েবসাইটের রুটে, যাতে yourdomain.com/robots.txt-এ পাওয়া যায়।

এটি কি পেজ সার্চ থেকে লুকায়?

এটি ক্রলারকে না যেতে বলে, তবে অন্য জায়গা থেকে লিংক থাকলে পেজ দেখা যেতে পারে। ব্যক্তিগত পেজে noindex বা পাসওয়ার্ড ব্যবহার করুন।

সম্পূর্ণ ফ্রিকোনো খরচ বা সাইন-আপ নেই
ফাইল নিরাপদকাজ শেষে স্বয়ংক্রিয় মুছে ফেলা
বাংলায় সহজবাংলা ও ইংরেজি দুই ভাষায়