Gerador de Robots.txt
Gere arquivos robots.txt com regras de user-agent, referências de sitemap e diretivas de crawl-delay
Todo o processamento acontece no seu navegador. Nenhum dado é enviado.
Gerador de Robots.txt
Gere arquivos robots.txt com regras de user-agent, referências de sitemap e diretivas de crawl-delay
🔒Todo o processamento acontece no seu navegador. Nenhum dado é enviado.
Predefinições
Grupo de Regras #1
/caminho/para/bloquear/
URLs de Sitemap
https://exemplo.com/sitemap.xml
Diretiva de Host
www.exemplo.com
robots.txt Gerado
robots.txt
User-agent: * Disallow: