WEBPOT / SEO / ИНСТРУМЕНТ

Проверка robots.txt

Доступность robots, sitemap-директивы и блокировки важных разделов.

ХОД ПРОЦЕССА / 06РЕЗУЛЬТАТ НА СТРАНИЦЕ
  1. Введите исходные данные

    Поля и проверки остаются внутри этого инструмента.

  2. Получите базовый результат

    Результат появляется без обязательного телефона или email.

  3. Оцените границы

    Ручной разбор нужен только там, где автоматической проверки недостаточно.

WEBPOT / РАБОЧИЙ КОНТУРRU / 2026
0 ₽базовый результат
0контактов до результата
SEOкатегория инструмента

Рабочая поверхность / результат на странице

Запустите инструмент

Заполните поля, проверьте вывод и только затем решайте, требуется ли платный ручной разбор.

Три шага / без заявки

Проверить до обращения

01. Заполните поля или пункты проверки.

02. Получите базовый результат на этой странице.

03. Используйте платный разбор только как отдельный следующий шаг.

Автоматический вывод ограничен данными, которые доступны этому инструменту.

Автопроверка по URL

Проверим публичный HTML, headers и служебные файлы. Ниже останется ручной чек-лист для спорных пунктов.

Загружаем инструмент...

Быстрая проверка

Ответьте на вопросы. «Не знаю» останется вопросом для уточнения; неприменимые пункты не снижают оценку. Результат доступен без контакта.

Файл robots.txt открывается по корню сайта

Робот должен получать понятные правила без редиректов на ошибку.

Важные разделы не закрыты через Disallow

Случайная блокировка услуг, каталога или блога убивает индексацию.

Служебные разделы закрыты от обхода

API, поиск, админка и результаты проверок не должны попадать в индекс.

В robots указана ссылка на sitemap.xml

Это помогает роботам быстрее найти карту сайта.

Не заблокированы Googlebot и YandexBot

Базовые поисковые роботы должны видеть публичные страницы.

AI-краулеры разрешены согласно политике сайта

Для AI-поиска важно отдельно решить OAI-SearchBot, YandexAdditionalBot и GPTBot.

Запустить полную проверку сайта

Следующий шаг / только после результата

Нужен более широкий контекст?

Полная проверка сайта объединяет несколько групп признаков, но не заменяет юридическое заключение или экспертный аудит.

Если результат спорный или затрагивает несколько систем, сохраните факты и переходите к профильной проверке или консультации.