Валидатор robots.txt
Проверьте, что поисковые роботы видят на вашем сайте именно то, что нужно. Укажите домен или вставьте свой robots.txt — за пару секунд покажем правила, доступ ботов и подскажем, всё ли открыто для индексации.
Как это работает
- 1
Укажите сайт или файл
Введите домен — мы сами найдём robots.txt, либо вставьте содержимое вручную.
- 2
Смотрим правила вместе
За пару секунд покажем группы User-agent, разрешения и запреты, карты сайта и задержки — наглядно и по полочкам.
- 3
Проверьте важные страницы
Введите адреса ключевых страниц и убедитесь, что они открыты для поисковиков.
Что покажет проверка
Правила по каждому боту
Разбираем директивы Allow и Disallow отдельно для каждого User-agent — Googlebot, YandexBot и любых других, — чтобы вы точно знали, кому и что открыто.
Проверка конкретных URL
Введите любой адрес и сразу увидите, разрешён ли он к обходу и каким именно правилом. Отличный способ проверить важные страницы перед релизом.
Sitemap и Crawl-delay
Подсветим ссылки на карту сайта и указанную задержку обхода — так роботы находят свежий контент быстрее и обходят сайт бережно.
Понятные подсказки
Каждое правило объясняем простым языком: не нужно держать в голове синтаксис robots.txt — мы всё расшифруем за вас.
Черновик или живой сайт
Проверяйте будущий robots.txt ещё до публикации или сразу боевой файл по адресу сайта — как удобнее именно вам.
Частые вопросы
Все инструменты для SEO — в одном месте
Аудит, конвертация, отслеживание позиций и AI-видимость — весь набор SiteVisor под рукой.
Техническое SEO
Индексация, доступность, разметка
PDF-инструменты
Конвертация и метаданные PDF
Поисковая видимость
Видимость в поиске и в ответах ИИ
Готовы к полному набору?
Бесплатные проверки, отслеживание позиций и AI-видимость — начните бесплатно и подключайте платные возможности по мере роста.