Robots.txt-Generator

So geht's

1. 1
   Felder ausfüllen

   Geben Sie Ihre Zahlen ein oder wählen Sie die Optionen.

2. 2
   Ergebnis ansehen

   Die Antwort aktualisiert sich sofort, wenn Sie einen Wert ändern.

3. 3
   Nutzen

   Kopieren Sie das Ergebnis oder notieren Sie es. Nichts wird irgendwohin gesendet.

About this tool

Choose the crawler, list the paths you do not want crawled and any paths to allow, and add your sitemap address. Copy the result into a file named robots.txt in the root of your site. Remember that robots.txt is a request to crawlers, not a way to hide private pages.

When to use it

Create a robots.txt file for your website, with sitemap and rules.

Tips

Do not block pages you want indexed. Test the file.

Privacy

Everything runs in your browser, so your data is not uploaded or stored.

Rechenbeispiel

With the boxes at their starting values (Crawler (user-agent): All crawlers (*); Allow everything when no paths are listed: Yes; Paths to block (one per line): /admin /private/), the tool shows: User-agent: * Disallow: /admin Disallow: /private/. Change any box to see your own numbers. The result updates as you type, and nothing leaves your browser.

Tipps für beste Ergebnisse

Prüfen Sie jedes Feld, bevor Sie sich auf ein Ergebnis verlassen, denn eine falsche Ziffer ändert die ganze Antwort. Verwenden Sie die genauen Zahlen aus Gehaltsabrechnung, Rechnung, Zeugnis oder Vertrag und notieren Sie das Datum der Berechnung. Sätze, Schwellen und Regeln ändern sich von Zeit zu Zeit; behandeln Sie das Ergebnis bei Steuern, Gebühren und rechtlichen Fragen als Schätzung und bestätigen Sie es mit der auf dieser Seite genannten offiziellen Quelle. Sie können beliebig viele Szenarien durchrechnen; nichts wird gespeichert oder gesendet, und Neuladen der Seite leert die Felder.