August 26, 200916 yr В панели вебмастера Яндекса видны ошибки, возникающие при обходе ботом страниц форума.В качестве одной из ошибок фигурирует такая: "Документ запрещен в файле robots.txt" Разве запрет страницы для индексации считается ошибкой?
August 26, 200916 yr Разве запрет страницы для индексации считается ошибкой?Да. Робот не может прочитать, значит ошибка.
August 26, 200916 yr Это "информация", а не ошибка.В списке ошибок выводится как информация, так и ошибки. Разным цветом обозначены только.
В панели вебмастера Яндекса видны ошибки, возникающие при обходе ботом страниц форума.
В качестве одной из ошибок фигурирует такая:
"Документ запрещен в файле robots.txt"
Разве запрет страницы для индексации считается ошибкой?