1

Topic: Ошибки в файле robots.txt

Если Ошибки в файле robots.txt то их нужно устранить как можно скорее.

Сообщение в Вебмастере:

Файл robots.txt содержит ошибки. Это может привести к некорректному обходу и индексированию сайта.

Проверьте robots.txt с помощью специального инструмента

В блоке Результаты анализа robots.txt перечислены директивы, которые будет учитывать робот при индексировании сайта.

Чтобы проверить наличие разрешения или запрета на индексирование определенных страниц, в поле Список URL укажите эти страницы.