#117 · Технические основы

Страницы с meta robots noindex

Что это, почему влияет на SEO, как проверить и исправить. Параметр #117из 150 в нашем чек-листе аудита.

Что это

meta robots noindex — HTML-тег, который размещается в секции <head> страницы и запрещает поисковым роботам добавлять её в индекс. Когда Яндекс или Google видят эту директиву, они могут обойти страницу, но не покажут её в результатах поиска. Технически директива выглядит так:

<meta name="robots" content="noindex">

Вариации: noindex, nofollow (запрет индексации и обхода ссылок), noindex, follow (запрет индексации, но разрешение следовать по ссылкам).

---

Почему это важно для SEO

Директива noindex — один из главных инструментов управления краулинговым бюджетом. Если на сайте сотни страниц с noindex, поисковый бот тратит ресурсы на их обход, но не получает пользы ни сайт, ни пользователь. Для крупных интернет-магазинов с сотнями тысяч URL это критично: Яндекс выделяет краулинговый бюджет пропорционально ИКС (Индексу качества сайта), и его нецелевой расход напрямую замедляет индексацию новых страниц.

Вторая проблема — случайный noindex на коммерчески важных страницах. Достаточно одной ошибки в шаблоне CMS, чтобы категория товаров или посадочная страница выпала из индекса обоих поисковиков. По данным аудитов крупных e-commerce проектов, подобная ошибка в шаблоне карточки товара приводила к потере 15–40% органического трафика в течение 2–3 недель до обнаружения проблемы. В Google ситуацию усугубляет рост AI Overviews: страница вне индекса не может попасть в AI-блок с ответами, теряя дополнительный канал видимости.

---

Как проверить вручную

  1. Я.Вебмастер — раздел «Индексирование» → «Страницы в поиске». Если видите резкое падение числа проиндексированных страниц, смотрите отчёт «Исключённые страницы» → фильтр «noindex».
  1. Google Search Console — раздел «Индексирование страниц» → вкладка «Причины исключения» → строка «Исключена тегом noindex». Здесь же можно запросить проверку URL через «Инспектор URL».
  1. Screaming Frog SEO Spider — запустите краулинг сайта, затем: вкладка «Response Codes» → 200 OK, далее «Directives» → фильтр noindex. Получите полный список URL с активной директивой за один проход. Можно экспортировать в CSV.
  1. Быстрая проверка в браузере — откройте страницу → Ctrl+U (исходный код) → Ctrl+F → ищите noindex. Подходит для точечной проверки конкретного URL.
  1. Топвизор или Netpeak Spider — для регулярного мониторинга: настройте проверку тегов meta robots как отдельный параметр в расписании аудита.

---

Как исправить

Определите, должна ли директива быть на этой странице. Если нет — удалите её или замените на корректное значение.

Стандартное исправление:

<!-- Было -->
<meta name="robots" content="noindex, follow">

<!-- Стало -->
<meta name="robots" content="index, follow">

WordPress (Yoast SEO / Rank Math): Зайдите в редактор страницы → блок «SEO» → вкладка «Дополнительно» → снимите галочку «Не показывать в результатах поиска». Если noindex стоит массово на категориях — проверьте настройки Yoast: «SEO» → «Поиск» → «Таксономии».

Tilda: В настройках страницы: «SEO» → убедитесь, что поле «Запрет индексации» не активировано. Tilda добавляет noindex автоматически на страницы, помеченные как «Скрытые».

1C-Bitrix: Административная панель → «Контент» → нужная страница → вкладка «SEO» → поле «Robots». Для массового изменения используйте инфоблоки: настройки SEO на уровне типа инфоблока.

Webflow: Page Settings → SEO → снимите чекбокс «Exclude this page from search results (noindex, nofollow)».

После исправления отправьте страницы на переобход:

  • Я.Вебмастер: «Инструменты» → «Переобход страниц»
  • GSC: «Инспектор URL» → «Запросить индексирование»

---

Типичные ошибки

  • Noindex в шаблоне при разработке. Разработчики закрывают сайт от индексации на тестовом стенде, а при переносе на прод забывают убрать директиву из шаблона <head>. Решение: добавьте проверку noindex в чек-лист деплоя.
  • Конфликт плагинов. В WordPress два SEO-плагина одновременно (например, Yoast + All in One SEO) могут добавить noindex непредсказуемо. Используйте только один инструмент управления мета-тегами.
  • Noindex на страницах пагинации. Часто закрывают /page/2/, /page/3/ и т.д. Если ссылки на эти страницы есть в sitemap и внутренней перелинковке — это сигнал противоречия для краулера. Определитесь: либо noindex + rel="canonical" на первую страницу, либо полноценная индексация.
  • Noindex вместо закрытия через robots.txt. Директива noindex требует, чтобы бот всё равно зашёл на страницу и прочитал тег. Если страница закрыта в robots.txt, бот не увидит noindex — страница может остаться в индексе без сниппета. Для полного исключения используйте noindex без блокировки в robots.txt.
  • Массовый noindex на фильтрах без анализа. Закрывать все фильтры «на всякий случай» — распространённая практика, которая режет потенциальный низкочастотный трафик. Анализируйте частотность через Яндекс.Вордстат перед принятием решения.

---

Влияние на разные типы сайтов

Интернет-магазины страдают больше всего: шаблонная ошибка мгновенно закрывает от индексации сотни карточек или целые категории. Особенно опасно при миграции на новую CMS или смене SEO-плагина. Рекомендуется настроить автоматический мониторинг через Screaming Frog в связке с Google Sheets — проверка раз в неделю по всему каталогу.

Контентные сайты и SaaS рискуют другим: noindex на лендингах фич или страницах блога с высоким потенциалом ранжирования означает прямые потери трафика без очевидных симптомов в метриках (позиции просто не растут, а причина не видна без аудита). Для лендингов на Tilda и Webflow особенно важно проверять настройку при каждом дублировании страницы — флаг noindex копируется вместе с шаблоном.

Проверить этот параметр на вашем сайте

Бесплатно. Без регистрации. Проверим этот и ещё 49 параметров за 60 секунд.

Получить SEO-аудит →