olaa Posted January 1, 2009 Share Posted January 1, 2009 (edited) Помогите найти тему, где из – за того что адрес главной страницы форума выглядел как forum/index.php?act=idxНе было индексации. По поиску ничего не находится. Или помогите избавиться от ?act=idx Edited January 1, 2009 by olaa Link to comment Share on other sites More sharing options...
Fisana Posted January 2, 2009 Share Posted January 2, 2009 Может стоит поставить ЧПУ (PHP > HTML) от Urisoft ?http://ipbskins.ru/forum/topic2005.htmlБудет как здесь. Правда, тогда вылезает main.html, от которого тут мы с трудом, но не окончательно, избавились. Link to comment Share on other sites More sharing options...
olaa Posted January 12, 2009 Author Share Posted January 12, 2009 Может не в этой теме нужно было задавать вопрос но все же.....Почему некоторые ссылки форума выглядят как /forum/index.php?showtopic=123а некоторые /forum/index.php?showtopic=32&st=0 Почему адреса страниц отличаются - одна тема с таким адресом, другая с более длинным? Link to comment Share on other sites More sharing options...
Fisana Posted January 12, 2009 Share Posted January 12, 2009 Это дубли. Каждой странице форум назначает несколько адресов. /forum/index.php?showtopic=32 - нормальный адрес темы/forum/index.php?showtopic=32&st=0 - адрес первой страницы темы.Поскольку это одно и то же, дубль надо закрывать в роботс txtDisallow: /*act=SF&s=&fDisallow: /*?s=Disallow: /*s0.htmlDisallow: /*st=Disallow: /*pid=Disallow: /*?start=Вот только небольшая часть запретов из robots.txt этого сайта.Созданы для исключения дублей. Link to comment Share on other sites More sharing options...
andaril Posted January 12, 2009 Share Posted January 12, 2009 насколько мне известно символ * актуален лишь для яндекс бота Link to comment Share on other sites More sharing options...
Fisana Posted January 12, 2009 Share Posted January 12, 2009 Не только.Гугль тоже слушается. Link to comment Share on other sites More sharing options...
Sannis Posted January 12, 2009 Share Posted January 12, 2009 Disallow: /*st=Этак же мы закроем все страницы темы, кроме первой. Раве не стоит чётче писать:Disallow: /*st=0? :) Link to comment Share on other sites More sharing options...
Fisana Posted January 12, 2009 Share Posted January 12, 2009 Все страницы, кроме первой, имеют с чпу другие адресаЯ там перепуталаDisallow: /*s0.html - это запрет дубля первой страницыА Disallow: /*st= запрещает не помню уже чего.Обнаруживаю дубли, тут же запрещаю.В итоге в индексе их почти нет. Все чисто. А если бы запретов не было совсем, минимум 60 000 url болталось бы в индексе.Более 90-95% – мусор... Link to comment Share on other sites More sharing options...
Sannis Posted January 12, 2009 Share Posted January 12, 2009 Тогда ясно, спасибо :) Link to comment Share on other sites More sharing options...
olaa Posted January 19, 2009 Author Share Posted January 19, 2009 (edited) Наверно гугл сведет меня с умаТеперь он индексирует вот такshowtopic=154&st=0&p=969&showtopic=154&st=0&p=970&showtopic=154&st=0&p=963&То есть это каждое сообщение темы - так и должно быть или Disallow: /*st=0 должно было закрыть эти ссылки и достаточно индексации вида showtopic=154 ? Еще хочу добавить что проиндексировав страницу вида _http://www.мойсайт.com/forum/index.php?act=idx именно с ?act=idx гугл стал чаще заходить на форум. Хотя возможно что он стал лишь видеть только те ссылки форума, которые есть на главной странице mkportal - (новости форума, последнии темы). Но ведь стал видеть! Edited January 19, 2009 by olaa Link to comment Share on other sites More sharing options...
Fisana Posted January 19, 2009 Share Posted January 19, 2009 Каждое сообщение темы не должно быть.Запретите &p=Если посмотрите мой роботс, увидите, с каким трудом я избавлялась от дублей :) Гугль приручить просто. Но надо добиться, чтобы он ходил по внутренним адресам и не индексировал дубли. Link to comment Share on other sites More sharing options...
Neopolitan Posted March 1, 2009 Share Posted March 1, 2009 Полный роботс для ЧПУUser-agent: *Disallow: /*?act=module&module=galleryDisallow: /*?autocom=tagsDisallow: /forum/index.phpDisallow: /forum/index.htmlDisallow: /clipart/index.htmlDisallow: /*03&idDisallow: /*lofiversionDisallow: /*ipbskins.ruDisallow: /*?s=Disallow: /*?automodu...Disallow: /*?act=dscr...Disallow: /httpDisallow: /bannersDisallow: /*ptopicDisallow: /*act=SF&s=&fDisallow: /*main.htmlDisallow: /*s0.htmlDisallow: /*st=Disallow: /*pid=Disallow: /*?start=Disallow: /*PrintDisallow: /*printDisallow: /forum/userDisallow: /forum/UserDisallow: /*UserCP&CODEDisallow: /forum/?Disallow: /*jsDisallow: /*tags/.htmlDisallow: /*style_imagesDisallow: /*javaDisallow: /forum/cacheDisallow: /*?showuserDisallow: /*showuserDisallow: /*?act=dscriptDisallow: /*?ShowuserDisallow: /*?act=act=attachDisallow: /*?act=act=AttachDisallow: /*aboutme&midDisallow: /*?act=calendarDisallow: /*?act=CalendarDisallow: /*?act=loginDisallow: /*?act=LoginDisallow: /*?act=postDisallow: /*?act=regDisallow: /*?act=RegDisallow: /*?act=onlineDisallow: /*?act=OnlineDisallow: /*?act=membersDisallow: /*?act=MembersDisallow: /*?act=helpDisallow: /*?act=HelpDisallow: /*?act=searchDisallow: /*?act=SearchDisallow: /*?act=forwardDisallow: /*?act=ForwardDisallow: /*?act=mail Disallow: /*?act=MailDisallow: /*?act=boardrulesDisallow: /*?act=report Disallow: /*?act=chat Disallow: /*?act=msgDisallow: /*?act=usercp Disallow: /*?act=UsercpDisallow: /*?act=profileDisallow: /*?act=trackDisallow: /*?act=stats Disallow: /*?act=StatsDisallow: /*?act=attach Disallow: /*?act=legends Disallow: /*?act=mmod Disallow: /*?act=warn Disallow: /*?act=task Disallow: /*?act=findpost Disallow: /*?act=paysubsDisallow: /*?&setskinDisallow: /*view=getnewpost$ Disallow: /*view=getlastpost$ Disallow: /*view=old$ Disallow: /*view=new$Disallow: /*view=getfirst$ Disallow: /*view=getprevious$ Disallow: /*view=getnext$ Disallow: /*view=getlast$ Disallow: /*mode=linear Disallow: /*mode=threaded Disallow: /*mode=linearplus Disallow: /*&p=Disallow: /*?p= Disallow: /*&gopid= Disallow: /*?gopid=Disallow: /*&hl= Disallow: /*?hl= Disallow: /*&showtopic Disallow: /*?showtopicDisallow: /*&show=nextoldestDisallow: /*&show=nextnewestDisallow: /*&show=lastcommentDisallow: /*&show=newcommentDisallow: /*&show=commentDisallow: /*slideshow Disallow: /*&req=searchDisallow: /*automodule=gallery Disallow: /*findlinkDisallow: /*reportimage Disallow: /*postcommentDisallow: /*req=syndicateDisallow: /javascriptDisallow: /lofiversion Link to comment Share on other sites More sharing options...
Fisana Posted March 1, 2009 Share Posted March 1, 2009 Это мой роботс :DВы даже это не догадались убрать:Disallow: /*ipbskins.ru(закрытие дублированного url в какой-то ссылке из файлового архива) Какой смысл его было здесь публиковать, когда каждый посмотреть может и так? У меня глюки возникают, уж не знаю отчего, поэтому там много лишнего.+ есть специфика под моды. Каждый должен свой роботс составлять.Не только на основе моего, но и на основе рекомендаций из хелпов Яндекса. Зы.Пост тупой.Может это просто спамер и отвечала зря. Link to comment Share on other sites More sharing options...
Neopolitan Posted March 2, 2009 Share Posted March 2, 2009 Да нет, Fisana, я не спамер, это раз.А разве я сказал, что это мой роботс? У меня совсем другой роботс.Роботс скинул для новичков, которые не знаю, что нужно набрать domain.ru/robots.txt Link to comment Share on other sites More sharing options...
Fisana Posted March 2, 2009 Share Posted March 2, 2009 Тогда прошу прощения, если не спамер.Спамеры иногда повторяют посты. Думала, может и роботс научились постить :DТам правда много лишнего.И при ЧПУ от urisoft, если форум без компонентов, многое автоматически закроется в htaccess, если выполнить инструкцию и прикрыть служебные адреса, включающие в url "ipb".И если даже компоненты есть, можно в них тоже сделать ЧПУ нормальный. А тут мы просто сразу не сделали, все с ipb открыто, приходится в роботсе кусками закрывать. Link to comment Share on other sites More sharing options...
Recommended Posts
Create an account or sign in to comment
You need to be a member in order to leave a comment
Create an account
Sign up for a new account in our community. It's easy!
Register a new accountSign in
Already have an account? Sign in here.
Sign In Now