Индексация · ROBOTS_DISALLOW_ALL
robots.txt запрещает обход стартового URL
Политика robots запрещает обход стартового URL для краулера.
Приоритет в аудите: Высокий
Что проверяется
Проверяется стартовый URL для SeolupaBot. Совпавшее правило попадает в evidence.matchingRule. Это не доказательство блокировки Googlebot (см. ROBOTS_INDEXING_DISALLOW) и не директива noindex.
Частые причины
Стейджинг-правила попали на прод
Плагин «закрыть от индекса»
Как исправить
Для продакшена разрешите нужные разделы. Закрытые контуры держите на отдельном хосте.
Критерий приёмки
Доступ SeolupaBot к стартовому URL соответствует намерениям владельца.