Генератор файла robots.txt
Генератор robots.txt позволяет визуально составить файл, задав правила Allow и Disallow для каждого поискового робота (User-agent) и добавив ссылку на карту сайта, а затем скопировать или скачать готовый файл для загрузки на сайт.
SEO и маркетинг Полностью работает в вашем браузере
Файл создаётся полностью на вашем устройстве — ничего не отправляется на сервер.
Сгенерированный robots.txt
User-agent: * Allow: / Disallow: /admin Disallow: /api/
Похожие инструменты
Хотите попробовать Uddatak?
Просмотрите полную библиотеку инструментов и начните пользоваться тем, что нужно прямо сейчас — бесплатно, без регистрации.
Смотреть все инструменты