Google борзеет! - Дизайн и модификация Invision Power Board

Перейти к содержимому

 

Правила раздела

Здесь обсуждаются проблемы поисковой оптимизации и индексирования форумов.
Если зашли сюда случайно, пожалуйста, не оффтопьте и обратите внимание на другие разделы.
Оформление форумов, включая верстку скинов.
Настройка форумов, установка и администрирование.
Размещение рекламы на форумах.
Техническая поддержка наших скинов и модов.

СвернутьПрикрепленные теги

Теги не найдены

Страница 1 из 1
  • Вы не можете создавать новые темы
  • Вы не можете отвечать в этой теме

Google борзеет!

#1 Пользователь не на сайте   Одмин ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 574
  • Регистрация: 21-Апрель 13
  • Репутация: 42
  • IPB version:3.4.x
 

Отправлено 04 Апрель 2015 - 11:14

В общем, прилагаю скрин, а дело, собственно, вот в чем...

В robots.txt форума выставлено:
User-agent: *
Crawl-delay: 50

, однако, Гугл читает форум ежеминутно, да причем с таким напором, что сервер работает на грани падения. Как можно усмирить аппетиты Google-a помимо стандартных директив роботса?

Вложение  proof.JPG (47,68К)
Количество загрузок: 18
0

#2 Пользователь не на сайте   Viktar83 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 120
  • Регистрация: 10-Декабрь 14
  • Репутация: 73
  • Откуда:РБ
  • IPB version:3.4.x
 

Отправлено 04 Апрель 2015 - 12:33

Где-то читал, что их бот игнорирует Crawl-delay. Правда это можно настроить где-то через панель Инструмента Вебмастера (сканирование - Параметры URL ?).
Вложение  Буфер обмена-1.jpg (6,03К)
Количество загрузок: 13
ну цитата из справки

Цитата

Инструкции robots.txt носят рекомендательный характер

Вот, что еще пишут
Изменение скорости сканирования Google
0

#3 Пользователь не на сайте   Viktar83 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 120
  • Регистрация: 10-Декабрь 14
  • Репутация: 73
  • Откуда:РБ
  • IPB version:3.4.x
 

Отправлено 04 Апрель 2015 - 18:52

Виноват, не ту ссылку дал, там про скорость...
Частота сканирования
А частоту сканирования можно указать в настройках сайта:
Вложение  Захват-2.jpg (41,42К)
Количество загрузок: 15
0

#4 Пользователь не на сайте   siv1987 ответил: »

 
 
  • Advanced
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: IPB Skins Team
  • Сообщений: 9 075
  • Регистрация: 20-Март 09
  • Репутация: 2 435
  • IPB version:3.1.x
 

Отправлено 04 Апрель 2015 - 22:26

Crawl-delay слишком большой, врядли бот будет соблюдать такой интервал, имхо. Хотя со времен ситуация может и изменится, зависит сколько времени прошло после установки лимита.
0

#5 Пользователь не на сайте   Одмин ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 574
  • Регистрация: 21-Апрель 13
  • Репутация: 42
  • IPB version:3.4.x
 

Отправлено 05 Апрель 2015 - 09:59

siv1987, Вы хотите сказать, если Crawl-delay сделать поменьше, бот таки начнет придерживаться его значений?
0

#6 Пользователь не на сайте   siv1987 ответил: »

 
 
  • Advanced
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: IPB Skins Team
  • Сообщений: 9 075
  • Регистрация: 20-Март 09
  • Репутация: 2 435
  • IPB version:3.1.x
 

Отправлено 05 Апрель 2015 - 22:01

Это более реальные значения, в целом увеличить время сканирования он должен. Также попробуйте как подсказал viktar через панель вебмастера задать его.
1

Сообщить об этой теме:


Страница 1 из 1
  • Вы не можете создавать новые темы
  • Вы не можете отвечать в этой теме

1 пользователей читают эту тему
0 зарегистрированных, 1 гостей, 0 скрытых


Контактная информация

Вопросы по работе сайта

+7 (917) 501-4765
C 10 до 20 в рабочие дни (время московское)

Техническая поддержка

Контактные данные специалистов

Дизайн форумов

IPB 3.x ¦ IPB 2.x

Бесплатные шаблоны

IPB 3.2 – 3.4 ¦ IPB 3.1 ¦ IPB 3.0 ¦ IPB 2.2 – 2.3 ¦ IPB 2.1 ¦ Клипарт
Лицензия на использование ¦ Ваша поддержка ¦ О проекте
Copyright © 2005-2018 IPBSkins.ru Team
При копировании материалов с сайта
прямая ссылка на источник обязательна