Директива noindex — самый распространённый способ «убрать страницу из поиска». Но из-за шаблонов она часто попадает туда, где не нужна.
Как это работает
Мета-тег <meta name="robots" content="noindex"> сообщает поисковым системам: «эту страницу можно анализировать, но показывать в выдаче нельзя».
Пара ключевых отличий:
| Директива | Что делает | Аналог |
|---|---|---|
| noindex | не показывать в выдаче | «не продавайте этот товар» |
| Disallow | не обходить страницу | «не заходите в этот отдел» |
Для закрытия служебных страниц (спасибо, корзина, ЛК) используют noindex. Disallow оставляет страницу вне обхода, но не гарантирует, что она исчезнет из выдачи.
Как проверить страницу
- Откройте страницу.
- Ctrl+U или «Просмотреть код».
- Найдите
name="robots"илиname="yandex"/name="googlebot". - Посмотрите значение:
noindex,noindex, nofollow,indexили ничего.
Валидная норма для публичной страницы — либо отсутствие мета-тега, либо index, follow.
Что ещё стоит проверить
Заголовок X-Robots-Tag. Некоторые панели управления и CDN отдают noindex через HTTP-заголовок. В исходном коде его не видно — нужен взгляд в DevTools → Network → Response Headers.
Дубли с параметрами. Страница без ?utm_ индексируется, а с параметром — нет. Это выглядит странно и создаёт дубли.
Редиректы. Если страница редиректится на другую — noindex применяется к итоговой странице, а не к исходному адресу.
Частые ситуации
- Шаблон «спасибо за заявку» с noindex — это правильно.
- Коммерческая страница со noindex из старого шаблона — это ошибка: вы платите за трафик, а страница закрыта.
- «Тестовая» страница без noindex в индексе — противоположная ошибка.
- noindex на главной — обычно катастрофа: главная исчезает из выдачи.
Порядок действий
- Соберите список URL с noindex (вручную или через проверку Auteh).
- Разделите: служебные (нужно) и коммерческие (ошибка).
- Уберите noindex с коммерческих страниц через шаблон/CMS.
- Отправьте изменённые URL на переобход.
> Auteh читает публичные SEO-сигналы и не подключается к кабинетам вебмастеров. Проверьте сайт в поиске бесплатно.