Анализ robots.txt

Файл robots.txt является для робота строгой инструкцией при индексировании сайта, подробную информацию об этом файле см. в разделе Помощи.

Если у вас возникают другие вопросы при работе с файлом robots.txt, перейдите в раздел Вопрос о файле robots.txt.