Gerador de robots.txt

Como fazer

1. 1
   Preencha os campos

   Digite seus números ou escolha as opções que precisar.

2. 2
   Veja o resultado

   A resposta se atualiza na hora quando você muda um valor.

3. 3
   Use

   Copie o resultado ou anote. Nada é enviado a lugar nenhum.

Sobre esta ferramenta

Choose the crawler, list the paths you do not want crawled and any paths to allow, and add your sitemap address. Copy the result into a file named robots.txt in the root of your site. Remember that robots.txt is a request to crawlers, not a way to hide private pages.

When to use it

Create a robots.txt file for your website, with sitemap and rules.

Tips

Do not block pages you want indexed. Test the file.

Privacy

Everything runs in your browser, so your data is not uploaded or stored.

Exemplo prático

With the boxes at their starting values (Crawler (user-agent): All crawlers (*); Allow everything when no paths are listed: Yes; Paths to block (one per line): /admin /private/), the tool shows: User-agent: * Disallow: /admin Disallow: /private/. Change any box to see your own numbers. The result updates as you type, and nothing leaves your browser.

Dicas para melhores resultados

Confira cada campo antes de confiar em um resultado, porque um dígito errado muda a resposta inteira. Use os valores exatos do seu holerite, conta, certificado ou contrato e anote a data em que calculou. Alíquotas, limites e regras mudam de tempos em tempos, então em impostos, taxas e assuntos legais trate o resultado como estimativa e confirme com a fonte oficial indicada nesta página. Você pode testar quantos cenários quiser; nada é guardado nem enviado, e atualizar a página limpa os campos.