Gerador e Validador de Robots.txt
Crie regras de crawler, adicione diretivas de sitemap e valide a sintaxe robots.txt localmente antes de publicar o ficheiro na raiz do seu website.
Resultados da validação
- Gere ou cole o conteúdo robots.txt e, em seguida, valide-o.
Geração de regras de crawler
Crie diretivas User-agent, Allow, Disallow, Sitemap e Host opcionais sem memorizar a formatação robots.txt.
Validação de sintaxe
Verifique erros comuns, como user-agents em falta, URLs de sitemap relativos, caminhos malformados, regras duplicadas e nomes de diretivas não suportados.
Processamento local privado
O gerador e o validador são executados no seu navegador. O conteúdo robots.txt não é carregado para os servidores Convertr.
Frequently asked questions
O meu ficheiro robots.txt é carregado para validação?
Não. A geração e a validação são executadas no seu navegador com JavaScript. O texto que introduz não é enviado para os servidores Convertr.
Onde devo colocar o robots.txt?
Coloque o robots.txt na raiz do host ao qual se aplica, como https://example.com/robots.txt.
O robots.txt remove páginas do Google?
Não. O Robots.txt controla o acesso do crawler. Use diretivas noindex na página ou remova a página se precisar de desindexação.