ПРОЕКТЫ 


  АРХИВ 


Apache-Talk @lexa.ru 

Inet-Admins @info.east.ru 

Filmscanners @halftone.co.uk 

Security-alerts @yandex-team.ru 

nginx-ru @sysoev.ru 


  СТАТЬИ 


  ПЕРСОНАЛЬНОЕ 


  ПРОГРАММЫ 



ПИШИТЕ
ПИСЬМА












     АРХИВ :: nginx-ru
Nginx-ru mailing list archive (nginx-ru@sysoev.ru)

[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

Re: Как сделать задер жку при передаче соед инения бакэнду



On 01.09.2008 18:14, Виктор Вислобоков wrote:
Собственно сабж?

Для чего это нужно?
Например, для того, что всякие внешние индексаторы черезмерно не
загружали сервер. Т.е. мы индексатору отдаём конечно странички, но
скажем с задержечкой секунд так на 5-10. Т.е. задержка нужна не на
всё, а желательной с возможностью задавать её для внешних IP.

Для многих роботов можно ограничить скорость через Crawl-delay в robots.txt:
http://help.yandex.ru/webmaster/?id=996567#1022359
http://help.yahoo.com/l/us/yahoo/search/webcrawler/slurp-03.html

--
 Anton Yuzhaninov



 




Copyright © Lexa Software, 1996-2009.