Генератор на Robots.txt

Как се прави

1. 1
   Попълнете полетата

   Въведете числата си или изберете нужните опции.

2. 2
   Вижте резултата

   Отговорът се обновява веднага, щом промените стойност.

3. 3
   Използвайте го

   Копирайте резултата или го запишете. Нищо не се изпраща никъде.

About this tool

Choose the crawler, list the paths you do not want crawled and any paths to allow, and add your sitemap address. Copy the result into a file named robots.txt in the root of your site. Remember that robots.txt is a request to crawlers, not a way to hide private pages.

When to use it

Create a robots.txt file for your website, with sitemap and rules.

Tips

Do not block pages you want indexed. Test the file.

Privacy

Everything runs in your browser, so your data is not uploaded or stored.

Решен пример

With the boxes at their starting values (Crawler (user-agent): All crawlers (*); Allow everything when no paths are listed: Yes; Paths to block (one per line): /admin /private/), the tool shows: User-agent: * Disallow: /admin Disallow: /private/. Change any box to see your own numbers. The result updates as you type, and nothing leaves your browser.

Съвети за най-добър резултат

Проверете всяко поле, преди да се доверите на резултата, защото една грешна цифра променя целия отговор. Използвайте точните числа от фиш за заплата, фактура, сертификат или договор и запишете датата на изчислението. Ставките, праговете и правилата се променят от време на време, затова за данъци, такси и правни въпроси приемайте резултата за приблизителен и го сверете с официалния източник, посочен на тази страница. Можете да изпробвате колкото искате сценарии; нищо не се запазва и не се изпраща, а презареждането на страницата изчиства полетата.