plutishe 1 02/10/13 21:37 Доброй ночи.Как добавить бота яндекса, чтобы было видно его наравне с Google, Bing. 1 Поделиться сообщением Ссылка на сообщение
plutishe 1 02/10/13 23:18 Разобрался, может кому поможет: User Agent: Yandex yandex поисковик Yandex(Blog)?[ /]([0-9.]{1,10}) 1 Поделиться сообщением Ссылка на сообщение
siv1987 2628 02/11/13 09:37 Яндекс давно больше не использует такой юзер агент - http://help.yandex.ru/webmaster/?id=995329Лучше написать Yandex или одно из этих регулярных выражений http://ipbskins.ru/forum/topic3111.html/page__view__findpost__p__38097 Поделиться сообщением Ссылка на сообщение
plutishe 1 02/11/13 12:22 Яндекс давно больше не использует такой юзер агент http://help.yandex.ru/webmaster/?id=995329Лучше написать Yandex или одно из этих регулярных выражений http://ipbskins.ru/forum/topic3111.html/page__view__findpost__p__38097 ТАк работает, по ссылке не понял что нужно добавлять, но последний пользователь сообщает что сделал тоже самое и заработало. Поделиться сообщением Ссылка на сообщение
siv1987 2628 02/11/13 14:08 @plutishe, объясняю популярнее. У основного индексирующего бота юзер-агент - YandexBot/3.0. Регулярное выражение которое вы привели выше - Yandex(Blog)?[ /]([0-9.]{1,10}) - не подходит для него, оно соответствует старому боту Yandex/1.0 или YandexBlog/1.0. Если посмотреть у того же последнего пользователя, у него рядом с Blog есть еще и Bot. http://ipbskins.ru/forum/topic3111.html/page__st__60__p__38097#entry38097 1 Поделиться сообщением Ссылка на сообщение
Saygo 3 01/21/14 07:42 У меня в онлайн-списке показывает неимоверную активность этих самых ботов, можно ли сделать, чтобы там отображалось одно действие бота, а не десятки и сотни? Поделиться сообщением Ссылка на сообщение
siv1987 2628 01/21/14 08:43 У меня в онлайн-списке показывает неимоверную активность этих самых ботов, можно ли сделать, чтобы там отображалось одно действие бота, а не десятки и сотни?Ну сотни там врядли, столько сессий одновременно боты не создают, если вы конечно не установили время жизни сессии по несколько часов и более. Сделать можно, но только правкой исходного кода, и это было бы не логично, так как это разные сессии бота, и просматривает он соответственно разные ссылки. Лучше настройте роботс чтобы они на гуляли по дублям и всяким служебным страницам. Поделиться сообщением Ссылка на сообщение
siv1987 2628 01/21/14 09:54 У вас там пиз*ец что творится и с индексацией - https://www.google.ru/search?client=opera&rls=ru&q=site:http://svitoc.ru/&sourceid=opera&ie=utf-8&oe=utf-8&channel=suggest 26k адресов в индексе, из которых больше половина мусора - календарь, статистика, ссылки старой версии, и прочие ужасы. Советую серьезно заняться настройкой индексацией форума и исключить из индекса весь этот мусор. Поделиться сообщением Ссылка на сообщение
Saygo 3 01/21/14 10:50 Я только вчера роботс отправил, гугл его кажется еще не учел. Поделиться сообщением Ссылка на сообщение
siv1987 2628 01/21/14 10:58 Вы для начала нормально его настройте. Во первых прочитайте внимательно инструкцию вверху файла "HOW TO USE THIS FILE", особо обратив внимания на первый пункт 1) Edit this file to change "/forum/" to the correct relative path from your base URL, for example if your forum was at "domain.com/sites/community", then you'd use "/sites/community/"во вторых, там не все правила чтобы исключить старые ссылки. Как минимум для act= нужно еще добавить Disallow: /*?act= ПСВсе вопросы, не касающиеся сабжа "Как добавить бота Yandex" задаем в отдельную темы. Поделиться сообщением Ссылка на сообщение