Я скоро сдамся, уже какой месяц пытаюсь отрегулировать нагрузку на сервер и все равно до конца не получается. Все настройки в админке по поводу нагрузки выставлены чуть ли не по максимуму ограничений и все равно время от времени бывают всплески нагрузки на сервер, а откуда они берутся понять не могу, вот к примеру скрин нагрузки за вчера , при этом предел нагрузки 4,5% и такое происходит частенько, задачи вроде все выставлены правильно :huh: Слышал как то "загоняют" страницы в кеш, к примеру главную. Подскажите как это делается и где? :rolleyes:

Лучше запретите поисковым ботам индексировать лишнее.

Нагрузка снизится.

вот мой robots.txt

 

User-agent: Yahoo!
Disallow: /

User-agent: *
Disallow: /search
Crawl-delay: 10 

User-agent: *
Disallow: /*lofiversion
Disallow: /*setlanguage
Disallow: /*?s=
Disallow: /*ptopic
Disallow: /*act=SF&s=&f
Disallow: /*s0
Disallow: /*pid=
Disallow: /*?start=
Disallow: /*Print
Disallow: /*print
Disallow: /*CP&CODE
Disallow: /*js
Disallow: /*style_images
Disallow: /*java
Disallow: /*cache
Disallow: /*?showuser
Disallow: /*showuser
Disallow: /*?Showuser
Disallow: /*?act=act=attach
Disallow: /*?act=act=Attach
Disallow: /*aboutme&mid
Disallow: /*?act=calendar
Disallow: /*?act=Calendar
Disallow: /*?act=login
Disallow: /*?act=Login
Disallow: /*?act=post
Disallow: /*?act=reg
Disallow: /*?act=Reg
Disallow: /*?act=online
Disallow: /*?act=Online
Disallow: /*?act=members
Disallow: /*?act=Members
Disallow: /*?act=help
Disallow: /*?act=Help
Disallow: /*?act=search
Disallow: /*?act=Search
Disallow: /*?act=forward
Disallow: /*?act=Forward
Disallow: /*?act=mail
Disallow: /*?act=Mail
Disallow: /*?act=report
Disallow: /*?act=chat
Disallow: /*?act=msg
Disallow: /*?act=usercp
Disallow: /*?act=Usercp
Disallow: /*?act=profile
Disallow: /*?act=track
Disallow: /*?act=stats
Disallow: /*?act=Stats
Disallow: /*?act=attach
Disallow: /*?act=legends
Disallow: /*?act=mmod
Disallow: /*?act=warn
Disallow: /*?act=task
Disallow: /*?act=findpost
Disallow: /*?act=paysubs
Disallow: /*view=getnewpost$
Disallow: /*view=getlastpost$
Disallow: /*view=old$
Disallow: /*view=new$
Disallow: /*view=getfirst$
Disallow: /*view=getprevious$
Disallow: /*view=getnext$
Disallow: /*view=getlast$
Disallow: /*mode=linear
Disallow: /*mode=threaded
Disallow: /*mode=linearplus
Disallow: /*&p=
Disallow: /*?p=
Disallow: /*&gopid=
Disallow: /*?gopid=
Disallow: /*&hl=
Disallow: /*?hl=
Disallow: /*&cal_id

 

чего там еще дописать?

Изменено 2 апреля 201016 г пользователем Майор

Два User-agent: * это не правельно. Первый уберите. Добавте Crawl-delay для второго.

напишите если нетрудно как правильно должно будет выглядеть

Изменено 2 апреля 201016 г пользователем Майор

http://ipb-ru.net/robots_txt_ipb.html

 

User-agent: Yahoo!

Disallow: /

Я скоро сдамся, уже какой месяц пытаюсь отрегулировать нагрузку на сервер и все равно до конца не получается. Все настройки в админке по поводу нагрузки выставлены чуть ли не по максимуму ограничений и все равно время от времени бывают всплески нагрузки на сервер, а откуда они берутся понять не могу, вот к примеру скрин нагрузки за вчера , при этом предел нагрузки 4,5% и такое происходит частенько, задачи вроде все выставлены правильно :rolleyes: Слышал как то "загоняют" страницы в кеш, к примеру главную. Подскажите как это делается и где? :huh:

у нас также реализовано, пишите в личку - расскажу.

Еще скажу что бот маила иногда конкретно глючит, начинает создавать реально ощутимые нагрузки, поэтому для таких вот пауков robots лучше юзать по старинке без символы подстановки.

ды с роботом ладно, мне главный вопрос как организовывается кеш

http://ipbnet.ru/topic/99-kashirovanie-dan...-prilozhenijah/

спасибо