Вебмайстер
Яндекс для вебмайстрів
Як Яндекс індексує сайти
Сайт на сторінці результатів пошуку
Сервіс «Яндекс.Вебмайстер»
Налаштування індексування
Вміст сайту
Сайт у результатах пошуку
Безпека сайтів
Сервіси Яндекса на вашому сайті

Довідник помилок аналізу robots.txt

Помилки

Перелік помилок, що виникають під час аналізу robots.txt.

ПомилкаРозширення Яндекса?Опис
Правило розпочинається не з символу '/' та не з символу '*'.Так

Правило може розпочинатися лише з символу '/' або '*'.

Знайдено кілька правил виду User-agent: *.Ні

Допускається лише одне правило такого типу.

Знайдено декілька директив Host.Так

Допускається лише одна директива Host.

Перевищено допустимий розмір robots.txt.Так

Кількість правил у файлі перевищує 2048.

Перед правилом немає директиви User-agent.Ні

Правило повинно завжди йти за директивою User-agent. Можливо, вставлено пустий рядок після User-agent.

Занадто довге правило.Так

Правило перевищує допустиму довжину (1024 символи).

Некоректне ім'я головного дзеркала сайту.Так

Ім'я головного дзеркала сайту в директиві Host містить синтаксичну помилку.

Некоректний формат URL файлу Sitemap.Так

Як URL файлу Sitemap повинно бути зазначено повний URL, що включає схему http://. Наприклад, http://www.mysite.ua/sitemap.xml

Некоректний формат директиви Crawl-delay.Так

Час в директиві Crawl-delay зазначено неправильно.

Знайдено кілька директив Crawl-delay.Так

Допускається не більше однієї директиви Crawl-delay.

Некоректний формат директиви Clean-param.Так

У директиві Clean-param зазначається один або декілька параметрів, які робот ігноруватиме, і префікс шляху. Параметри перераховуються через '&' і відокремлюються від префікса шляху пробілом.

Попередження

Перелік попереджень, що виникають під час аналізу robots.txt.

ПопередженняРозширення Яндекса?Опис
Можливо, було використано неприпустимий символ.Так

Виявлено спецсимвол, відмінний від "*" та "$".

Виявлено невідому директиву.Так

Виявлено директиву, не описану в правилах використання robots.txt. Можливо, ця директива використовується роботами інших пошукових систем.

Синтаксична помилка.Так

Рядок не може бути інтерпретований як директива robots.txt.

Невідома помилка.Так

Під час аналізу robots.txt виникла невідома помилка. Зверніться у службу підтримки.

Помилки перевірки URL

Перелік помилок перевірки URL в аналізаторі robots.txt

ПомилкаОпис
Синтаксична помилка.

Помилка синтаксису URL.

Цей URL не належить вашому домену

Заданий URL не належить сайту, для якого здійснюється аналіз robots.txt. Можливо, ви зазначили адресу одного із дзеркал вашого сайту або припустилися помилки в написанні імені домену.

Оцініть статтю
Дякуємо за ваш відгук!