Не было индексации.
По поиску ничего не находится. Или помогите избавиться от ?act=idx
Сообщение изменено: olaa (02 Январь 2009 - 00:06)
Избавиться от ?act=idx на главной странице. Или как избавиться от дублей
#1
olaa ответил: 
- Member
-
- Группа: Пользователи
- Сообщений: 18
- Регистрация: 25-Июнь 08
- Репутация: 0
- IPB version:2.3.x
Отправлено 02 Январь 2009 - 00:06
Помогите найти тему, где из – за того что адрес главной страницы форума выглядел как forum/index.php?act=idx
Не было индексации.
По поиску ничего не находится. Или помогите избавиться от ?act=idx
Не было индексации.
По поиску ничего не находится. Или помогите избавиться от ?act=idx
#2
Fisana ответил:
- На PM не отвечаю
-
- Группа: IPB Skins Team
- Сообщений: 13 192
- Регистрация: 21-Ноябрь 05
- Репутация: 699
- Откуда:Из интернетов
- IPB version:3.1.x
Отправлено 02 Январь 2009 - 08:16
Может стоит поставить ЧПУ (PHP > HTML) от Urisoft ?
http://ipbskins.ru/f.../topic2005.html
Будет как здесь.
Правда, тогда вылезает main.html, от которого тут мы с трудом, но не окончательно, избавились.
http://ipbskins.ru/f.../topic2005.html
Будет как здесь.
Правда, тогда вылезает main.html, от которого тут мы с трудом, но не окончательно, избавились.
#3
olaa ответил:
- Member
-
- Группа: Пользователи
- Сообщений: 18
- Регистрация: 25-Июнь 08
- Репутация: 0
- IPB version:2.3.x
Отправлено 12 Январь 2009 - 19:26
Может не в этой теме нужно было задавать вопрос но все же.....
Почему некоторые ссылки форума выглядят как /forum/index.php?showtopic=123
а некоторые /forum/index.php?showtopic=32&st=0
Почему адреса страниц отличаются - одна тема с таким адресом, другая с более длинным?
Почему некоторые ссылки форума выглядят как /forum/index.php?showtopic=123
а некоторые /forum/index.php?showtopic=32&st=0
Почему адреса страниц отличаются - одна тема с таким адресом, другая с более длинным?
#4
Fisana ответил:
- На PM не отвечаю
-
- Группа: IPB Skins Team
- Сообщений: 13 192
- Регистрация: 21-Ноябрь 05
- Репутация: 699
- Откуда:Из интернетов
- IPB version:3.1.x
Отправлено 12 Январь 2009 - 20:22
Это дубли. Каждой странице форум назначает несколько адресов.
/forum/index.php?showtopic=32 - нормальный адрес темы
/forum/index.php?showtopic=32&st=0 - адрес первой страницы темы.
Поскольку это одно и то же, дубль надо закрывать в роботс txt
Вот только небольшая часть запретов из robots.txt этого сайта.
Созданы для исключения дублей.
/forum/index.php?showtopic=32 - нормальный адрес темы
/forum/index.php?showtopic=32&st=0 - адрес первой страницы темы.
Поскольку это одно и то же, дубль надо закрывать в роботс txt
Цитата
Disallow: /*act=SF&s=&f
Disallow: /*?s=
Disallow: /*s0.html
Disallow: /*st=
Disallow: /*pid=
Disallow: /*?start=
Disallow: /*?s=
Disallow: /*s0.html
Disallow: /*st=
Disallow: /*pid=
Disallow: /*?start=
Вот только небольшая часть запретов из robots.txt этого сайта.
Созданы для исключения дублей.
#8
Fisana ответил:
- На PM не отвечаю
-
- Группа: IPB Skins Team
- Сообщений: 13 192
- Регистрация: 21-Ноябрь 05
- Репутация: 699
- Откуда:Из интернетов
- IPB version:3.1.x
Отправлено 12 Январь 2009 - 22:14
Все страницы, кроме первой, имеют с чпу другие адреса
Я там перепутала
Disallow: /*s0.html - это запрет дубля первой страницы
А Disallow: /*st= запрещает не помню уже чего.
Обнаруживаю дубли, тут же запрещаю.
В итоге в индексе их почти нет. Все чисто. А если бы запретов не было совсем, минимум 60 000 url болталось бы в индексе.
Более 90-95% – мусор...
Я там перепутала
Disallow: /*s0.html - это запрет дубля первой страницы
А Disallow: /*st= запрещает не помню уже чего.
Обнаруживаю дубли, тут же запрещаю.
В итоге в индексе их почти нет. Все чисто. А если бы запретов не было совсем, минимум 60 000 url болталось бы в индексе.
Более 90-95% – мусор...
#10
olaa ответил:
- Member
-
- Группа: Пользователи
- Сообщений: 18
- Регистрация: 25-Июнь 08
- Репутация: 0
- IPB version:2.3.x
Отправлено 19 Январь 2009 - 16:54
Наверно гугл сведет меня с ума
Теперь он индексирует вот так
showtopic=154&st=0&p=969&
showtopic=154&st=0&p=970&
showtopic=154&st=0&p=963&
То есть это каждое сообщение темы - так и должно быть или Disallow: /*st=0 должно было закрыть эти ссылки и достаточно индексации вида showtopic=154 ?
Еще хочу добавить что проиндексировав страницу вида _http://www.мойсайт.com/forum/index.php?act=idx именно с ?act=idx гугл стал чаще заходить на форум. Хотя возможно что он стал лишь видеть только те ссылки форума, которые есть на главной странице mkportal - (новости форума, последнии темы). Но ведь стал видеть!
Теперь он индексирует вот так
showtopic=154&st=0&p=969&
showtopic=154&st=0&p=970&
showtopic=154&st=0&p=963&
То есть это каждое сообщение темы - так и должно быть или Disallow: /*st=0 должно было закрыть эти ссылки и достаточно индексации вида showtopic=154 ?
Еще хочу добавить что проиндексировав страницу вида _http://www.мойсайт.com/forum/index.php?act=idx именно с ?act=idx гугл стал чаще заходить на форум. Хотя возможно что он стал лишь видеть только те ссылки форума, которые есть на главной странице mkportal - (новости форума, последнии темы). Но ведь стал видеть!
Сообщение изменено: olaa (19 Январь 2009 - 16:55)
#11
Fisana ответил:
- На PM не отвечаю
-
- Группа: IPB Skins Team
- Сообщений: 13 192
- Регистрация: 21-Ноябрь 05
- Репутация: 699
- Откуда:Из интернетов
- IPB version:3.1.x
Отправлено 19 Январь 2009 - 17:20
Каждое сообщение темы не должно быть.
Запретите &p=
Если посмотрите мой роботс, увидите, с каким трудом я избавлялась от дублей
Гугль приручить просто. Но надо добиться, чтобы он ходил по внутренним адресам и не индексировал дубли.
Запретите &p=
Если посмотрите мой роботс, увидите, с каким трудом я избавлялась от дублей
Гугль приручить просто. Но надо добиться, чтобы он ходил по внутренним адресам и не индексировал дубли.
#12
Neopolitan ответил:
- Newbie
-
- Группа: Пользователи
- Сообщений: 3
- Регистрация: 22-Ноябрь 08
- Репутация: 0
- IPB version:1.x
Отправлено 01 Март 2009 - 15:04
Полный роботс для ЧПУ
Цитата
User-agent: *
Disallow: /*?act=module&module=gallery
Disallow: /*?autocom=tags
Disallow: /forum/index.php
Disallow: /forum/index.html
Disallow: /clipart/index.html
Disallow: /*03&id
Disallow: /*lofiversion
Disallow: /*ipbskins.ru
Disallow: /*?s=
Disallow: /*?automodu...
Disallow: /*?act=dscr...
Disallow: /http
Disallow: /banners
Disallow: /*ptopic
Disallow: /*act=SF&s=&f
Disallow: /*main.html
Disallow: /*s0.html
Disallow: /*st=
Disallow: /*pid=
Disallow: /*?start=
Disallow: /*Print
Disallow: /*print
Disallow: /forum/user
Disallow: /forum/User
Disallow: /*UserCP&CODE
Disallow: /forum/?
Disallow: /*js
Disallow: /*tags/.html
Disallow: /*style_images
Disallow: /*java
Disallow: /forum/cache
Disallow: /*?showuser
Disallow: /*showuser
Disallow: /*?act=dscript
Disallow: /*?Showuser
Disallow: /*?act=act=attach
Disallow: /*?act=act=Attach
Disallow: /*aboutme&mid
Disallow: /*?act=calendar
Disallow: /*?act=Calendar
Disallow: /*?act=login
Disallow: /*?act=Login
Disallow: /*?act=post
Disallow: /*?act=reg
Disallow: /*?act=Reg
Disallow: /*?act=online
Disallow: /*?act=Online
Disallow: /*?act=members
Disallow: /*?act=Members
Disallow: /*?act=help
Disallow: /*?act=Help
Disallow: /*?act=search
Disallow: /*?act=Search
Disallow: /*?act=forward
Disallow: /*?act=Forward
Disallow: /*?act=mail
Disallow: /*?act=Mail
Disallow: /*?act=boardrules
Disallow: /*?act=report
Disallow: /*?act=chat
Disallow: /*?act=msg
Disallow: /*?act=usercp
Disallow: /*?act=Usercp
Disallow: /*?act=profile
Disallow: /*?act=track
Disallow: /*?act=stats
Disallow: /*?act=Stats
Disallow: /*?act=attach
Disallow: /*?act=legends
Disallow: /*?act=mmod
Disallow: /*?act=warn
Disallow: /*?act=task
Disallow: /*?act=findpost
Disallow: /*?act=paysubs
Disallow: /*?&setskin
Disallow: /*view=getnewpost$
Disallow: /*view=getlastpost$
Disallow: /*view=old$
Disallow: /*view=new$
Disallow: /*view=getfirst$
Disallow: /*view=getprevious$
Disallow: /*view=getnext$
Disallow: /*view=getlast$
Disallow: /*mode=linear
Disallow: /*mode=threaded
Disallow: /*mode=linearplus
Disallow: /*&p=
Disallow: /*?p=
Disallow: /*&gopid=
Disallow: /*?gopid=
Disallow: /*&hl=
Disallow: /*?hl=
Disallow: /*&showtopic
Disallow: /*?showtopic
Disallow: /*&show=nextoldest
Disallow: /*&show=nextnewest
Disallow: /*&show=lastcomment
Disallow: /*&show=newcomment
Disallow: /*&show=comment
Disallow: /*slideshow
Disallow: /*&req=search
Disallow: /*automodule=gallery
Disallow: /*findlink
Disallow: /*reportimage
Disallow: /*postcomment
Disallow: /*req=syndicate
Disallow: /javascript
Disallow: /lofiversion
Disallow: /*?act=module&module=gallery
Disallow: /*?autocom=tags
Disallow: /forum/index.php
Disallow: /forum/index.html
Disallow: /clipart/index.html
Disallow: /*03&id
Disallow: /*lofiversion
Disallow: /*ipbskins.ru
Disallow: /*?s=
Disallow: /*?automodu...
Disallow: /*?act=dscr...
Disallow: /http
Disallow: /banners
Disallow: /*ptopic
Disallow: /*act=SF&s=&f
Disallow: /*main.html
Disallow: /*s0.html
Disallow: /*st=
Disallow: /*pid=
Disallow: /*?start=
Disallow: /*Print
Disallow: /*print
Disallow: /forum/user
Disallow: /forum/User
Disallow: /*UserCP&CODE
Disallow: /forum/?
Disallow: /*js
Disallow: /*tags/.html
Disallow: /*style_images
Disallow: /*java
Disallow: /forum/cache
Disallow: /*?showuser
Disallow: /*showuser
Disallow: /*?act=dscript
Disallow: /*?Showuser
Disallow: /*?act=act=attach
Disallow: /*?act=act=Attach
Disallow: /*aboutme&mid
Disallow: /*?act=calendar
Disallow: /*?act=Calendar
Disallow: /*?act=login
Disallow: /*?act=Login
Disallow: /*?act=post
Disallow: /*?act=reg
Disallow: /*?act=Reg
Disallow: /*?act=online
Disallow: /*?act=Online
Disallow: /*?act=members
Disallow: /*?act=Members
Disallow: /*?act=help
Disallow: /*?act=Help
Disallow: /*?act=search
Disallow: /*?act=Search
Disallow: /*?act=forward
Disallow: /*?act=Forward
Disallow: /*?act=mail
Disallow: /*?act=Mail
Disallow: /*?act=boardrules
Disallow: /*?act=report
Disallow: /*?act=chat
Disallow: /*?act=msg
Disallow: /*?act=usercp
Disallow: /*?act=Usercp
Disallow: /*?act=profile
Disallow: /*?act=track
Disallow: /*?act=stats
Disallow: /*?act=Stats
Disallow: /*?act=attach
Disallow: /*?act=legends
Disallow: /*?act=mmod
Disallow: /*?act=warn
Disallow: /*?act=task
Disallow: /*?act=findpost
Disallow: /*?act=paysubs
Disallow: /*?&setskin
Disallow: /*view=getnewpost$
Disallow: /*view=getlastpost$
Disallow: /*view=old$
Disallow: /*view=new$
Disallow: /*view=getfirst$
Disallow: /*view=getprevious$
Disallow: /*view=getnext$
Disallow: /*view=getlast$
Disallow: /*mode=linear
Disallow: /*mode=threaded
Disallow: /*mode=linearplus
Disallow: /*&p=
Disallow: /*?p=
Disallow: /*&gopid=
Disallow: /*?gopid=
Disallow: /*&hl=
Disallow: /*?hl=
Disallow: /*&showtopic
Disallow: /*?showtopic
Disallow: /*&show=nextoldest
Disallow: /*&show=nextnewest
Disallow: /*&show=lastcomment
Disallow: /*&show=newcomment
Disallow: /*&show=comment
Disallow: /*slideshow
Disallow: /*&req=search
Disallow: /*automodule=gallery
Disallow: /*findlink
Disallow: /*reportimage
Disallow: /*postcomment
Disallow: /*req=syndicate
Disallow: /javascript
Disallow: /lofiversion
#13
Fisana ответил:
- На PM не отвечаю
-
- Группа: IPB Skins Team
- Сообщений: 13 192
- Регистрация: 21-Ноябрь 05
- Репутация: 699
- Откуда:Из интернетов
- IPB version:3.1.x
Отправлено 01 Март 2009 - 15:53
Это мой роботс 
Вы даже это не догадались убрать:
Disallow: /*ipbskins.ru
(закрытие дублированного url в какой-то ссылке из файлового архива)
Какой смысл его было здесь публиковать, когда каждый посмотреть может и так?
У меня глюки возникают, уж не знаю отчего, поэтому там много лишнего.
+ есть специфика под моды.
Каждый должен свой роботс составлять.
Не только на основе моего, но и на основе рекомендаций из хелпов Яндекса.
Зы.
Пост тупой.
Может это просто спамер и отвечала зря.
Вы даже это не догадались убрать:
Disallow: /*ipbskins.ru
(закрытие дублированного url в какой-то ссылке из файлового архива)
Какой смысл его было здесь публиковать, когда каждый посмотреть может и так?
У меня глюки возникают, уж не знаю отчего, поэтому там много лишнего.
+ есть специфика под моды.
Каждый должен свой роботс составлять.
Не только на основе моего, но и на основе рекомендаций из хелпов Яндекса.
Зы.
Пост тупой.
Может это просто спамер и отвечала зря.
#14
Neopolitan ответил:
- Newbie
-
- Группа: Пользователи
- Сообщений: 3
- Регистрация: 22-Ноябрь 08
- Репутация: 0
- IPB version:1.x
Отправлено 02 Март 2009 - 04:29
Да нет, Fisana, я не спамер, это раз.
А разве я сказал, что это мой роботс? У меня совсем другой роботс.
Роботс скинул для новичков, которые не знаю, что нужно набрать domain.ru/robots.txt
А разве я сказал, что это мой роботс? У меня совсем другой роботс.
Роботс скинул для новичков, которые не знаю, что нужно набрать domain.ru/robots.txt
#15
Fisana ответил:
- На PM не отвечаю
-
- Группа: IPB Skins Team
- Сообщений: 13 192
- Регистрация: 21-Ноябрь 05
- Репутация: 699
- Откуда:Из интернетов
- IPB version:3.1.x
Отправлено 02 Март 2009 - 08:09
Тогда прошу прощения, если не спамер.
Спамеры иногда повторяют посты. Думала, может и роботс научились постить
Там правда много лишнего.
И при ЧПУ от urisoft, если форум без компонентов, многое автоматически закроется в htaccess, если выполнить инструкцию и прикрыть служебные адреса, включающие в url "ipb".
И если даже компоненты есть, можно в них тоже сделать ЧПУ нормальный.
А тут мы просто сразу не сделали, все с ipb открыто, приходится в роботсе кусками закрывать.
Спамеры иногда повторяют посты. Думала, может и роботс научились постить
Там правда много лишнего.
И при ЧПУ от urisoft, если форум без компонентов, многое автоматически закроется в htaccess, если выполнить инструкцию и прикрыть служебные адреса, включающие в url "ipb".
И если даже компоненты есть, можно в них тоже сделать ЧПУ нормальный.
А тут мы просто сразу не сделали, все с ipb открыто, приходится в роботсе кусками закрывать.
- ← Как убрать "page/articles.html/_/" в адресной строке IPB 3.4.1
- Настройка на сервере, оптимизация и SEO
- iis7 и ipb 404 ошибка →