Nginx-ru mailing list archive (nginx-ru@sysoev.ru)
[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]
Re: Как сделать задержку при передаче соединения бакэнду
- To: nginx-ru@xxxxxxxxx
- Subject: Re: Как сделать задержку при передаче соединения бакэнду
- From: "Виктор Вислобоков" <corochoone@xxxxxxxxx>
- Date: Mon, 1 Sep 2008 20:11:46 +0400
- Dkim-signature: v=1; a=rsa-sha256; c=relaxed/relaxed; d=gmail.com; s=gamma; h=domainkey-signature:received:received:message-id:date:from:to :subject:in-reply-to:mime-version:content-type :content-transfer-encoding:content-disposition:references; bh=W26xxXYskP99lxqM02VulauVq1IrGw+CxXgsQfcayyc=; b=E3LpBLZV1X3nDhllSaiF3fm2q+DafamV29ZY/jRF4Eds3JY4VtSQgK+4CgQqyFIe7g lXyLZ+Khoc0evt940LDGgAo5L9HoIX0vlhtS9ay4NPxhyc0+k2xevKeFl7Sy1MDProSq TfT3AJboRZxc3PFkC6nIywZlt5HGH6USNlLX4=
- Domainkey-signature: a=rsa-sha1; c=nofws; d=gmail.com; s=gamma; h=message-id:date:from:to:subject:in-reply-to:mime-version :content-type:content-transfer-encoding:content-disposition :references; b=XJtqDIX5QRfSb38JhO5tUxtN16z2mBG+K/3Focj0TF/7tyhaZwm2x2C7MvgJSkLmeW YI19/obkTjsRz6H6zrv15yp7CnHbuGbf2rdZsCLUkWyEZo2MxR4XUxDHO++EbvS97gHF BSo+0dVd9AAy5NI56dSPHlVInbibDiIPLX9WM=
- In-reply-to: <48BC0CED.6000706@xxxxxxxxx>
- References: <1f60b6160809010714s6b07ed83r7befd3207e32aa30@xxxxxxxxxxxxxx> <48BC0CED.6000706@xxxxxxxxx>
> Для многих роботов можно ограничить скорость через Crawl-delay в robots.txt:
Проблема в том, что robots.txt - это территория сайта, а мы рулим
сервером вообще-то :)
> От адекватных ботов, вроде ботов популярных поисковиков, limit_rate
> отлично подходит для снижения нагрузки на сайт.
Если бы все боты были адекватными, я бы не полез задавать этот вопрос.
Индексируют и в несколько потоков и с разных адресов.
|
