Сайт пропал из поиска из-за запрета в файле robots.txt

Если раньше страницы были недоступны для индексирующего робота, например, из-за запрета в файле robots.txt или технических работ на сервере, они будут исключены из поиска. Страницы появятся в поисковой выдаче в течение двух недель, после того, как станут доступны при очередном обращении робота.

Проверить доступность страниц для робота можно с помощью инструмента Проверка ответа сервера.

Инструмент Проверка ответа сервера может не выявить проблему, так как имитирует работу индексирующего робота и имеет IP-адрес, отличающийся от IP-адреса робота.

Примечание. Если вы самостоятельно не размещали запрет в файле robots.txt, обратитесь к хостинг-провайдеру или регистратору доменного имени для выяснения подробностей. Проверьте также, не было ли блокировки доменного имени в связи с истечением срока регистрации.

Если сейчас индексирование страниц не запрещено и сервер возвращает код HTTP 200, отправьте страницы на переобход. Это позволит ускорить обновление данных об этих страницах в базе робота и результатах поиска.

Информация в Яндекс.Вебмастере обновится автоматически после возврата страниц в поисковую выдачу.