Gerador de Robots.txt

Para que serve

Gere um arquivo robots.txt profissional para controlar o que o Google e outros bots podem indexar no seu site.

• Gratuito — use sem cadastro e sem limite artificial.
• Privado — o processamento acontece no seu navegador.
• Pronto para produção — copie ou baixe o resultado e use no seu site.

Como usar

Siga os passos abaixo para obter o melhor resultado com o Gerador de Robots.txt.

1. 1 Escolha o User-agent (* para todos os bots).
2. 2 Adicione caminhos para bloquear (ex.: /admin/, /includes/).
3. 3 Informe a URL do seu sitemap.xml.
4. 4 Baixe o robots.txt e envie para a raiz do domínio.

Benefícios

Por que vale a pena usar esta ferramenta no seu fluxo.

• Evita indexar páginas privadas ou duplicadas.
• Aponta o Sitemap para o Google encontrar seu conteúdo.
• Arquivo gerado segue a especificação padrão.