Доброй ночи.

Как добавить бота яндекса, чтобы было видно его наравне с Google, Bing.

Разобрался, может кому поможет:

 

User Agent:

 

Yandex

yandex

поисковик

Yandex(Blog)?[ /]([0-9.]{1,10})

1

Яндекс давно больше не использует такой юзер агент - http://help.yandex.ru/webmaster/?id=995329

Лучше написать Yandex или одно из этих регулярных выражений http://ipbskins.ru/forum/topic3111.html/page__view__findpost__p__38097

Яндекс давно больше не использует такой юзер агент http://help.yandex.ru/webmaster/?id=995329

Лучше написать Yandex или одно из этих регулярных выражений http://ipbskins.ru/forum/topic3111.html/page__view__findpost__p__38097

 

ТАк работает, по ссылке не понял что нужно добавлять, но последний пользователь сообщает что сделал тоже самое и заработало.

@plutishe, объясняю популярнее. У основного индексирующего бота юзер-агент - YandexBot/3.0. Регулярное выражение которое вы привели выше - Yandex(Blog)?[ /]([0-9.]{1,10}) - не подходит для него, оно соответствует старому боту Yandex/1.0 или YandexBlog/1.0. Если посмотреть у того же последнего пользователя, у него рядом с Blog есть еще и Bot. http://ipbskins.ru/forum/topic3111.html/page__st__60__p__38097#entry38097

У меня в онлайн-списке показывает неимоверную активность этих самых ботов, можно ли сделать, чтобы там отображалось одно действие бота, а не десятки и сотни?

У меня в онлайн-списке показывает неимоверную активность этих самых ботов, можно ли сделать, чтобы там отображалось одно действие бота, а не десятки и сотни?

Ну сотни там врядли, столько сессий одновременно боты не создают, если вы конечно не установили время жизни сессии по несколько часов и более. Сделать можно, но только правкой исходного кода, и это было бы не логично, так как это разные сессии бота, и просматривает он соответственно разные ссылки. Лучше настройте роботс чтобы они на гуляли по дублям и всяким служебным страницам.

У вас там пиз*ец что творится и с индексацией - https://www.google.ru/search?client=opera&rls=ru&q=site:http://svitoc.ru/&sourceid=opera&ie=utf-8&oe=utf-8&channel=suggest 26k адресов в индексе, из которых больше половина мусора - календарь, статистика, ссылки старой версии, и прочие ужасы. Советую серьезно заняться настройкой индексацией форума и исключить из индекса весь этот мусор.

Я только вчера роботс отправил, гугл его кажется еще не учел.

Вы для начала нормально его настройте. Во первых прочитайте внимательно инструкцию вверху файла "HOW TO USE THIS FILE", особо обратив внимания на первый пункт

 

1) Edit this file to change "/forum/" to the correct relative path from your base URL, for example if your forum was at "domain.com/sites/community", then you'd use "/sites/community/"

во вторых, там не все правила чтобы исключить старые ссылки. Как минимум для act= нужно еще добавить Disallow: /*?act=

 

ПС

Все вопросы, не касающиеся сабжа "Как добавить бота Yandex" задаем в отдельную темы.