Robots.txt генератор

Генеришите robots.txt фајлове са правилима за корисничке агенте, референцама на сајтмапу и директивама задршке пузања

Сва обрада се дешава у вашем прегледачу. Никакви подаци се не отпремају.
Offline Ready

Robots.txt генератор

Генеришите robots.txt фајлове са правилима за корисничке агенте, референцама на сајтмапу и директивама задршке пузања

🔒Сва обрада се дешава у вашем прегледачу. Никакви подаци се не отпремају.
Шаблони
Група правила #1
* (All bots)
/path/to/disallow/
URL-ови сајтмапе
https://example.com/sitemap.xml
Host директива
www.example.com
Опционо. Користи Yandex за одређивање преферираног домена (нпр., www наспрам без www).
Генерисан robots.txt
robots.txt
User-agent: *
Disallow: