Главная → Блог → Noindex: как работает мета-тег и чем он отличается от robots.txt
Техническое SEO · справочник

Noindex: как работает мета-тег и чем он отличается от robots.txt

Артём АринкинОбновлено: ноябрь 2026~8 минут
Тег noindex — как работает meta robots и чем отличается от robots.txt

Noindex — это правило, которое запрещает поисковику добавлять страницу в индекс и показывать её в выдаче. Его задают мета-тегом <meta name="robots" content="noindex"> в коде страницы или HTTP-заголовком X-Robots-Tag: noindex. В отличие от robots.txt, noindex не мешает роботу загрузить страницу — наоборот, робот должен её загрузить, чтобы увидеть запрет.

В аудитах noindex встречается мне чаще, чем кажется: где-то он закрывает мусор и работает как надо, а где-то случайно висит на страницах услуг после разработки. Ниже — как устроено правило, где его ставить и как убедиться, что оно не закрыло лишнее. Про все способы закрыть сайт целиком (пароль, robots.txt, удаление) я писал отдельно в статье как закрыть сайт от индексации, здесь — только сам тег.

Как выглядит noindex: мета-тег и X-Robots-Tag

Мета-тег robots в HTML

Тег размещают внутри <head> страницы:

<meta name="robots" content="noindex">

Атрибут name="robots" обращается ко всем поисковым роботам. Если нужно закрыть страницу только для одного поисковика, вместо robots указывают имя робота: name="yandex" для Яндекса или name="googlebot" для Google. Значения можно перечислять через запятую: content="noindex, nofollow".

HTTP-заголовок X-Robots-Tag

Для файлов, в которые нельзя вставить HTML, — PDF, документов, изображений — то же правило передают в ответе сервера:

X-Robots-Tag: noindex

Заголовок настраивают на сервере (например, в конфигурации nginx или Apache) и могут применить сразу к группе файлов, скажем, ко всем PDF в папке с прайсами. Оба поисковика, Яндекс и Google, поддерживают и мета-тег, и заголовок.

Основные значения

Значение Что делает
noindex не добавлять страницу в индекс, не показывать в поиске
nofollow не переходить по ссылкам на странице
none то же, что noindex, nofollow
index, follow, all разрешающие значения; действуют по умолчанию, писать их не обязательно
noarchive не показывать сохранённую копию страницы (Яндекс)
nosnippet не показывать описание страницы в сниппете (Google)

Если тега на странице нет, поисковик считает, что индексировать её можно. Поэтому <meta name="robots" content="index, follow"> ничего не меняет — это значение по умолчанию.

Важно. Яндекс и Google по-разному решают противоречия. Если на странице одновременно стоят index и noindex (например, один тег от темы сайта, другой от SEO-плагина), Яндекс учитывает разрешающее значение, а Google — более строгое. Одна и та же страница может оказаться в индексе Яндекса и пропасть из Google. Дубли мета-тегов нужно убирать, а не надеяться на правила разрешения конфликтов.

Noindex, robots.txt и canonical: в чём разница

Три инструмента часто путают, хотя они решают разные задачи.

Robots.txt управляет обходом: запрещает роботу загружать адрес. Страница, закрытая только в robots.txt, всё равно может попасть в индекс Google без описания, если на неё ведут ссылки, — робот знает адрес, но не видел содержимого. Подробно о файле — в статье про robots.txt.

Noindex управляет индексом: робот загружает страницу, видит запрет и не показывает её в поиске. Если страница уже была в индексе, она выпадет после следующего обхода.

Canonical — подсказка, а не запрет: «эта страница — копия, главная версия вот здесь». Сигналы дубля передаются основной странице. Подробнее — в статье про canonical.

Почему noindex не срабатывает, если страница закрыта в robots.txt
Почему noindex не срабатывает, если страница закрыта в robots.txt
Задача Чем решать
Убрать страницу из поиска, но оставить доступной людям noindex
Не тратить ресурсы робота на тысячи технических адресов robots.txt (Disallow)
Есть копии одной страницы с параметрами, основная должна ранжироваться canonical на основную
Закрыть PDF или картинки от индексации X-Robots-Tag: noindex
Скрыть сайт в разработке пароль на сервере, а не noindex
Риск. Самая частая ошибка с этой тройкой — поставить на страницу noindex и одновременно закрыть её в robots.txt. Робот не может загрузить страницу, поэтому не видит noindex, и адрес может остаться в индексе. Google прямо пишет об этом в документации: чтобы правило noindex сработало, страница не должна быть заблокирована в robots.txt.

Второе противоречие — noindex и canonical на одной странице. Canonical говорит «склей меня с основной версией», noindex — «не индексируй меня». Поисковик получает два разных сигнала. Для дублей выбирайте что-то одно, обычно canonical.

Какие страницы закрывать noindex

Общий принцип: noindex нужен страницам, которые полезны посетителю на сайте, но бесполезны или вредны в выдаче. По опыту аудитов, это обычно:

Чего noindex не ставить: на страницы услуг и категорий, которые приносят заявки, на страницы пагинации каталога «по привычке» (через них робот находит товары) и на страницы, которые вы пытаетесь продвигать. Звучит очевидно, но я регулярно нахожу noindex именно на таких.

Важно. Решение «закрыть страницу» лучше принимать по данным: сначала посмотрите в Вебмастере и Search Console, приносит ли она показы и клики. Страница фильтра, которая кажется мусорной, иногда собирает трафик по низкочастотным запросам.

HTML-тег noindex для части текста в Яндексе

Отдельная история — HTML-тег <noindex>, который понимает только Яндекс. Он закрывает от индексации не страницу, а фрагмент текста:

<noindex>текст, который не нужно индексировать</noindex>

Тег не входит в стандарт HTML, поэтому валидаторы ругаются на него. Яндекс поддерживает и вариант в виде комментариев, который валидатор не трогает:

```

текст ```

Google тег <noindex> игнорирует. Сам я применяю его редко: закрыть повторяющийся юридический текст в подвале можно, но чаще проще убрать такой текст или сократить. Ссылки тег <noindex> не закрывает — для ссылок служит атрибут rel="nofollow".

Как поставить noindex на сайте

Через CMS и SEO-плагины

В WordPress noindex для отдельной записи задают в настройках SEO-плагина (Yoast SEO, Rank Math) на странице редактирования, для типов страниц — в общих настройках плагина. В 1С-Битриксе мета-теги задают в свойствах страницы или раздела, в Тильде — в настройках страницы, раздел SEO. Конкретные пункты меню меняются от версии к версии, но логика одна: галочка «запретить индексацию» добавляет мета-тег в код.

Вручную в шаблоне

Если CMS не даёт настройки, тег прописывают в шаблоне с условием: например, выводить noindex только для страниц с параметром ?s= или только для корзины. Здесь главный риск — ошибиться в условии и вывести тег на все страницы шаблона.

Через сервер

X-Robots-Tag настраивают в конфигурации веб-сервера. Это удобно для файлов и целых разделов, но заголовок не видно в коде страницы, поэтому про него легко забыть. Если страница пропала из индекса, а в HTML noindex нет, — проверьте заголовки ответа.

Как проверить, что noindex стоит там, где нужно

Для сайтов на сотни страниц удобнее прогнать краулер (Screaming Frog, Netpeak Spider и аналоги): он покажет все адреса с noindex списком, и случайно закрытые страницы сразу видны. Как в целом проверить индекс, я разбирал в статье индексация сайта: как проверить.

Шесть ошибок, которые я нахожу в аудитах

  1. Noindex остался после разработки. Сайт делали на тестовом домене с галочкой «скрыть от поисковиков», при переносе её забыли снять. Симптом: новый сайт месяцами не появляется в поиске.
  2. Тег в общем шаблоне. Noindex поставили на одну страницу, а он попал в шаблон и закрыл весь раздел, иногда — каталог целиком.
  3. Noindex плюс Disallow в robots.txt. Робот не видит тег, страница висит в индексе. Владелец уверен, что закрыл её.
  4. Два мета-тега robots с разными значениями. Один выводит тема, второй — плагин. Яндекс и Google трактуют конфликт по-разному.
  5. Закрытые страницы в sitemap. Сайт одновременно просит «проиндексируй» и «не индексируй». Поисковик тратит время, а в отчётах копятся предупреждения.
  6. Закрыли то, что приносило трафик. Например, страницы фильтров или тегов, по которым шли переходы, без сверки со статистикой.

Каждая из этих ошибок исправляется за минуты, но найти её без системной проверки сложно: сайт открывается, всё выглядит нормально, а страниц в поиске нет. Это один из первых пунктов моего технического чек-листа на SEO-аудите.

Проверю, не закрыто ли лишнее на вашем сайте

Пришлите ссылку — найду страницы с noindex, конфликты с robots.txt и sitemap и скажу, что из этого мешает заявкам

Получить разборили оставьте заявку на бесплатный разбор
Артём Аринкин
Артём Аринкин
Основатель SEO Control System

Строю бизнесу управляемый канал клиентов из поиска: спрос → выдача → структура → упаковка → заявки. Кейсы в цифрах.

Источники

  1. Мета-тег robots и HTTP-заголовок X-Robots-Tag — справка Яндекс Вебмастера
  2. Как запретить индексирование сайта или страниц — справка Яндекс Вебмастера
  3. Блокировка индексирования с помощью директивы noindex — Google Search Central
  4. Метатег robots и HTTP-заголовок X-Robots-Tag — Google Search Central

Частые вопросы

Что значит noindex, nofollow?

Это два правила в одном мета-теге: noindex запрещает добавлять страницу в индекс, nofollow — переходить по ссылкам на ней. Такое же действие даёт одно значение none. Для большинства служебных страниц достаточно noindex: ссылки с них пусть остаются доступными роботу.

Как долго страница с noindex выпадает из поиска?

Страница исчезнет из выдачи после того, как робот снова её загрузит и увидит тег. Обычно это от нескольких дней до нескольких недель. Ускорить можно запросом переобхода в Вебмастере и в Search Console.

Что лучше для удаления страницы из поиска: noindex или robots.txt?

Noindex. Robots.txt запрещает загрузку, но не гарантирует удаление адреса из индекса: Google может показывать закрытую страницу без описания, если на неё есть ссылки. Если страница не нужна совсем, лучше отдавать код 404 или 410.

Можно ли поставить noindex только для Яндекса или только для Google?

Да. Вместо name="robots" укажите имя робота: name="yandex" для Яндекса или name="googlebot" для Google. Правило подействует только на этого робота, остальные поисковики будут индексировать страницу.

Передаёт ли страница с noindex вес по ссылкам?

Если в теге нет nofollow, робот может переходить по ссылкам на странице и находить через неё другие адреса. Но строить на закрытых страницах важную перелинковку не стоит: ключевые разделы должны получать ссылки со страниц, которые сами есть в индексе.