ПРОЕКТЫ 


  АРХИВ 


Apache-Talk @lexa.ru 

Inet-Admins @info.east.ru 

Filmscanners @halftone.co.uk 

Security-alerts @yandex-team.ru 

nginx-ru @sysoev.ru 


  СТАТЬИ 


  ПЕРСОНАЛЬНОЕ 


  ПРОГРАММЫ 



ПИШИТЕ
ПИСЬМА












     АРХИВ :: nginx-ru
Nginx-ru mailing list archive (nginx-ru@sysoev.ru)

[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

Re: limit_req_zone /24


  • To: nginx-ru@xxxxxxxxx
  • Subject: Re: limit_req_zone /24
  • From: Gena Makhomed <gmm@xxxxxxxxx>
  • Date: Fri, 11 Nov 2011 15:21:27 +0200
  • Dkim-signature: v=1; a=rsa-sha256; c=relaxed/relaxed; d=csdoc.com; s=dkim; t=1321017688; bh=W/Glc7aNiKoHb66YuZ+q/quIkOOBJvvsqakulkxr6tQ=; h=Message-ID:Date:From:MIME-Version:To:Subject:References: In-Reply-To:Content-Type:Content-Transfer-Encoding; b=Uap9tM+5190JSgCHK77F7i7NSCsFIPx/AS7h3wEnN1gET0ZnJ0zzsvMKXH4R0xEp3 LNcb2JMJZHZetz4MJoplC/S1+gwZlKuwusmE0Urr8y/3cJK0bZmi8LlqIeH0EDlInX 0Y3abjGw3gfaCHqjt5obZfAZSoPOwwO3dXWzx7Vk=
  • In-reply-to: <495231321016574@xxxxxxxxxxxxxx>
  • References: <495231321016574@xxxxxxxxxxxxxx>

On 11.11.2011 15:02, Leonid Pauzner wrote:

Иногда хочется иметь возможность придерживать запросы не для уникального
IP а по маске, например /24 или /28

есть и более простой способ:

http://www.google.com/support/webmasters/bin/answer.py?answer=48620
Changing Google's crawl rate

некоторые боты понимают Request-rate или Crawl-delay в robots.txt

    4163  66.249.71.52    Mozilla/5.0 (compatible; Googlebot/2.1
    4119  66.249.71.46    Mozilla/5.0 (compatible; Googlebot/2.1
    4118  66.249.71.54    Mozilla/5.0 (compatible; Googlebot/2.1

Есть конечно обходные пути (отлавливать по user_agent, делать еще один
уровень проксирования 127.0.0.1:81 и придерживать там), но как-то не
очень красиво.

отлавливать по user_agent - вполне красиво, он ведь не обязательно
будет всегда ходить на сайт только с этой подсетки 66.249.71.0/24.

--
Best regards,
 Gena

_______________________________________________
nginx-ru mailing list
nginx-ru@xxxxxxxxx
http://mailman.nginx.org/mailman/listinfo/nginx-ru


 




Copyright © Lexa Software, 1996-2009.