Генератор robots.txt

Выберите CMS, тип сайта и служебные разделы. Сервис соберет аккуратную заготовку robots.txt и объяснит, за что отвечает каждая строка.

Адрес сайта для Sitemap

Sitemap можно оставить автозаполнение

CMS Тип сайта

закрыть админку и служебный вход закрыть внутренний поиск закрыть корзину, заказ и кабинет закрыть URL с параметрами оставить доступ к CSS, JS и картинкам CMS добавить Clean-param для рекламных меток

Это заготовка. Перед публикацией проверьте, что нужные фильтры, пагинация и личный кабинет не должны попадать в индекс.

Как пользоваться

Сервис не пытается угадать всю структуру сайта. Он собирает безопасную отправную точку: базовые правила для CMS, служебных разделов, поиска, корзины, параметров и карты сайта. Справа от результата есть пояснение по каждой строке.

Нужен robots.txt без риска закрыть важные страницы?

Проверим текущий файл, карту сайта, индексацию и технические SEO-настройки перед запуском или после переезда.

Написать в Telegram Написать в MAX Написать в ВК