Как закрыть от индексации профили? - Дизайн и модификация Invision Power Board

Перейти к содержимому

 

Правила раздела

Здесь обсуждаются вопросы по настройке и администрированию форумов IPB 3.x.
Пожалуйста, не оффтопьте, если зашли сюда случайно, и обратите внимание на соседние разделы.
Установка, настройка и обслуживание форумов IPB 2.x.
Оформление форумов, включая верстку скинов.
Размещение рекламы на форумах.
SEO оптимизация форума.
Техническая поддержка наших скинов и модов.

СвернутьПрикрепленные теги

Теги не найдены

Страница 1 из 1

Как закрыть от индексации профили?

#1 Пользователь не на сайте   Alex222 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 405
  • Регистрация: 04-Сентябрь 14
  • Репутация: 1
  • IPB version:3.4.x
 

Отправлено 04 Июль 2016 - 12:46

Всем привет! Подскажите, как правильно в файле robots.txt закрыть профили пользователей от индексации всеми поисковиками? Дело в том, что перерыл весь инет, везде по разному и пробовал ставить как рекомендуют, но при проверке через онлайн сервис на индексацию профиля выходит сообщение такого вида: Ссылка «http://site.ru/user/1-alex/» найдена на странице «site.ru» и доступна для индексации поисковыми роботами.
В файле robots.txt у меня так:
Disallow: /index.php/user/
до этого было просто так:
Disallow: /user/
Как на самом деле долно быть?
Ссылка на профили такого вида: http://site.ru/user/656-river/

Сообщение изменено: Alex222 (04 Июль 2016 - 12:51)

0

#2 Пользователь не на сайте   Атаман ответил: »

 
 
  • Advanced
  • Смотреть блог
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: IPB Skins.ru Team
  • Сообщений: 2 142
  • Регистрация: 13-Апрель 12
  • Репутация: 326
  • Откуда:no
  • IPB version:1.x
 

Отправлено 04 Июль 2016 - 15:24

У вас все правильно настроено.
скорее всего сайт еще не переиндексирован.
1

#3 Пользователь не на сайте   Alex222 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 405
  • Регистрация: 04-Сентябрь 14
  • Репутация: 1
  • IPB version:3.4.x
 

Отправлено 04 Июль 2016 - 15:31

Понял, спасибо за ответ!
0

#4 Пользователь не на сайте   Alex222 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 405
  • Регистрация: 04-Сентябрь 14
  • Репутация: 1
  • IPB version:3.4.x
 

Отправлено 04 Июль 2016 - 15:39

Сейчас попробовал через вебмастер яндекса проверить индексацию. Пробно взял урлы пары профилей, попробовал проверить, выходит тоже "Разрешён" к индексации.
0

#5 Пользователь не на сайте   Атаман ответил: »

 
 
  • Advanced
  • Смотреть блог
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: IPB Skins.ru Team
  • Сообщений: 2 142
  • Регистрация: 13-Апрель 12
  • Репутация: 326
  • Откуда:no
  • IPB version:1.x
 

Отправлено 04 Июль 2016 - 16:19

Нужна переиндексация, у яндекса она не мгновенная. А проверку вроде делает со старых показаний.
Целиком путь на ваш робот предоставьте.
1

#6 Пользователь не на сайте   Alex222 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 405
  • Регистрация: 04-Сентябрь 14
  • Репутация: 1
  • IPB version:3.4.x
 

Отправлено 04 Июль 2016 - 16:23

Ещё раз понял, спасибо! Буду надеяться, что это так.
0

#7 Пользователь не на сайте   siv1987 ответил: »

 
 
  • Advanced
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: IPB Skins Team
  • Сообщений: 8 694
  • Регистрация: 20-Март 09
  • Репутация: 2 262
  • IPB version:3.1.x
 

Отправлено 04 Июль 2016 - 17:45

Цитата

Как на самом деле долно быть?
Ссылка на профили такого вида:

Для такого формата запрет на индексацию ссылки должен выглядеть как было "до этого"
Disallow: /user/
1

#8 Пользователь не на сайте   Alex222 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 405
  • Регистрация: 04-Сентябрь 14
  • Репутация: 1
  • IPB version:3.4.x
 

Отправлено 04 Июль 2016 - 18:10

Хорошо, спасибо, сейчас переделаю.
Скажите, а вот остальное, ниже пример, тоже получается по аналогии /index.php убирать?
Disallow: /index.php/members/
Disallow: /index.php/calendar/
Disallow: /index.php/register/
Disallow: /index.php/lostpass/
Disallow: /index.php/login/

Сообщение изменено: Alex222 (04 Июль 2016 - 18:16)

0

#9 Пользователь не на сайте   Alex222 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 405
  • Регистрация: 04-Сентябрь 14
  • Репутация: 1
  • IPB version:3.4.x
 

Отправлено 04 Июль 2016 - 18:32

Да, уже сам понял. Проверил через вебмастер, всё теперь не индексируется. Спасибо, вопрос снят!
0

#10 Пользователь не на сайте   Alex222 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 405
  • Регистрация: 04-Сентябрь 14
  • Репутация: 1
  • IPB version:3.4.x
 

Отправлено 04 Июль 2016 - 18:57

Пардон, ещё вопрос один образовался. А вот такого вида (ниже) как будет правильно? Вроде по аналогии также /index.php убрать, но боюсь что может не правильно быть. Как подобная закрывашка будет выглядеть для моего формата ссылок?
Disallow: /index.php?app=forums&module=moderate&section=moderate
и вот это /*app=core&module=usercp

Или выложу вот полностью как выглядит. Боюсь, что много чего не правильно закрыто. Помогите правильно закрыть от индексации. Некоторое закрыл по вашей подсказке, а вот остальное... Дело в том, что в анализаторе htool раньше выдовало 10% заспенность ссылками и 15% Вероятность фильтра
на исх. ссылки (beta). Потом несколько дней назад начало выдавать 0% заспеменость ссылками, но зато появилось чего раньше небыло,такая инфо "Некачественные исходящие ссылки, Непот" и "Вероятность фильтра
на исх. ссылки (beta):" 50%, вот я и решил перетрясти файл robots.txt

User-agent: *
Disallow: /cache/
Disallow: /converge_local/
Disallow: /hooks/
Disallow: /ips_kernel/
Disallow: /retail/
Disallow: /public/style_captcha/
Disallow: /index.php?app=core&module=task
Disallow: /index.php?app=forums&module=moderate&section=moderate
Disallow: /index.php?app=forums&module=extras&section=forward
Disallow: /index.php?app=members&module=messaging
Disallow: /index.php?app=members&module=chat
Disallow: /index.php?app=members&module=search
Disallow: /index.php?app=members&module=search&do=active
Disallow: /index.php?&unlockUserAgent=1
Disallow: /*app=core&module=global&section=reputation
Disallow: /*app=core&module=usercp
Disallow: /*app=core&module=usercp
Disallow: /*app=members&module=messaging
Disallow: /*&p=
Disallow: /*&pid=
Disallow: /*&hl=
Disallow: /*&start=
Disallow: /*view__getnewpost$
Disallow: /*view__getlastpost$
Disallow: /*view__old$
Disallow: /*view__new$
Disallow: /*view__getfirst$
Disallow: /*view__getprevious$
Disallow: /*view__getnext$
Disallow: /*view__getlast$
Disallow: /*&view=getnewpost$
Disallow: /*&view=getlastpost$
Disallow: /*&view=old$
Disallow: /*&view=new$
Disallow: /*&view=getfirst$
Disallow: /*&view=getprevious$
Disallow: /*&view=getnext$
Disallow: /*&view=getlast$
Disallow: /*?s=
Disallow: /*&s=
Disallow: /index.php?app=core&module=global&section=login&do=deleteCookies
Disallow: /index.php?app=forums&module=extras&section=rating
Disallow: /index.php?app=forums&module=forums&section=markasread
Disallow: /*&do=who
Disallow: /*&section=dname
Disallow: /user/
Disallow: /members/
Disallow: /calendar/
Disallow: /register/
Disallow: /lostpass/
Disallow: /login/
Host: site.ru
Sitemap: http://site.ru/sitemap.xml

Сообщение изменено: Alex222 (04 Июль 2016 - 19:17)

0

#11 Пользователь не на сайте   siv1987 ответил: »

 
 
  • Advanced
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: IPB Skins Team
  • Сообщений: 8 694
  • Регистрация: 20-Март 09
  • Репутация: 2 262
  • IPB version:3.1.x
 

Отправлено 05 Июль 2016 - 17:17

Это не чпу ссылки, а значит убирать index.php не нужно.
1

#12 Пользователь не на сайте   Alex222 ответил: »

 
 
  • Advanced
  • ***
  • Insert nick to fast reply form
  • Quote selected text to fast reply form
  • Группа: Пользователи
  • Сообщений: 405
  • Регистрация: 04-Сентябрь 14
  • Репутация: 1
  • IPB version:3.4.x
 

Отправлено 05 Июль 2016 - 17:30

Понятно, спасибо!
0

Сообщить об этой теме:


Страница 1 из 1


Быстрый ответ

  

1 пользователей читают эту тему
0 зарегистрированных, 1 гостей, 0 скрытых


Контактная информация

Вопросы по работе сайта

+7 (917) 501-4765
C 10 до 20 в рабочие дни (время московское)

Техническая поддержка

Контактные данные специалистов

Дизайн форумов

IPB 3.x ¦ IPB 2.x

Бесплатные шаблоны

IPB 3.2 – 3.4 ¦ IPB 3.1 ¦ IPB 3.0 ¦ IPB 2.2 – 2.3 ¦ IPB 2.1 ¦ Клипарт
Лицензия на использование ¦ Ваша поддержка ¦ О проекте
Copyright © 2005-2016 IPBSkins.ru Team
При копировании материалов с сайта
прямая ссылка на источник обязательна