Nginx-ru mailing list archive (nginx-ru@sysoev.ru)
[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]
Re: limit_req_zone /24
- To: nginx-ru@xxxxxxxxx
- Subject: Re: limit_req_zone /24
- From: Gena Makhomed <gmm@xxxxxxxxx>
- Date: Fri, 11 Nov 2011 15:21:27 +0200
- Dkim-signature: v=1; a=rsa-sha256; c=relaxed/relaxed; d=csdoc.com; s=dkim; t=1321017688; bh=W/Glc7aNiKoHb66YuZ+q/quIkOOBJvvsqakulkxr6tQ=; h=Message-ID:Date:From:MIME-Version:To:Subject:References: In-Reply-To:Content-Type:Content-Transfer-Encoding; b=Uap9tM+5190JSgCHK77F7i7NSCsFIPx/AS7h3wEnN1gET0ZnJ0zzsvMKXH4R0xEp3 LNcb2JMJZHZetz4MJoplC/S1+gwZlKuwusmE0Urr8y/3cJK0bZmi8LlqIeH0EDlInX 0Y3abjGw3gfaCHqjt5obZfAZSoPOwwO3dXWzx7Vk=
- In-reply-to: <495231321016574@xxxxxxxxxxxxxx>
- References: <495231321016574@xxxxxxxxxxxxxx>
On 11.11.2011 15:02, Leonid Pauzner wrote:
Иногда хочется иметь возможность придерживать запросы не для уникального
IP а по маске, например /24 или /28
есть и более простой способ:
http://www.google.com/support/webmasters/bin/answer.py?answer=48620
Changing Google's crawl rate
некоторые боты понимают Request-rate или Crawl-delay в robots.txt
4163 66.249.71.52 Mozilla/5.0 (compatible; Googlebot/2.1
4119 66.249.71.46 Mozilla/5.0 (compatible; Googlebot/2.1
4118 66.249.71.54 Mozilla/5.0 (compatible; Googlebot/2.1
Есть конечно обходные пути (отлавливать по user_agent, делать еще один
уровень проксирования 127.0.0.1:81 и придерживать там), но как-то не
очень красиво.
отлавливать по user_agent - вполне красиво, он ведь не обязательно
будет всегда ходить на сайт только с этой подсетки 66.249.71.0/24.
--
Best regards,
Gena
_______________________________________________
nginx-ru mailing list
nginx-ru@xxxxxxxxx
http://mailman.nginx.org/mailman/listinfo/nginx-ru
|