Как запретить индексирование сайта

Иногда нужно, чтобы страницы сайта или размещенные на них ссылки не появлялись в результатах поиска. Скрыть содержимое сайта от индексирования можно с помощью файла robots.txt и HTML-элементов.

Запретить индексирование всего сайта, раздела или страницы

Сделать это можно несколькими способами:

  • В файле robots.txt укажите директиву Disallow.
  • В HTML-коде страниц сайта укажите мета-тег noindex или none. Подробнее см. в разделе Мета-теги.
Скрыть от индексирования часть текста страницы

В HTML-коде страницы добавьте элемент noindex. Например:

<noindex>текст, индексирование которого нужно запретить</noindex>
Скрыть от индексирования ссылку на странице

В HTML-коде страницы в элемент a добавьте атрибут rel со значением nofollow. Например:

<a href="url" rel="nofollow">текст ссылки</a>