Опубликовано: 26 августа 200916 г В панели вебмастера Яндекса видны ошибки, возникающие при обходе ботом страниц форума.В качестве одной из ошибок фигурирует такая: "Документ запрещен в файле robots.txt" Разве запрет страницы для индексации считается ошибкой?
Опубликовано: 26 августа 200916 г Разве запрет страницы для индексации считается ошибкой?Да. Робот не может прочитать, значит ошибка.
Опубликовано: 26 августа 200916 г Это "информация", а не ошибка.В списке ошибок выводится как информация, так и ошибки. Разным цветом обозначены только.
В панели вебмастера Яндекса видны ошибки, возникающие при обходе ботом страниц форума.
В качестве одной из ошибок фигурирует такая:
"Документ запрещен в файле robots.txt"
Разве запрет страницы для индексации считается ошибкой?