Nginx-ru mailing list archive (nginx-ru@sysoev.ru)
[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]
Re[2]: Как сделать задержку при передаче соединения бакэнду
Hi!
Mon, 1 Sep 2008 20:11:46 +0400
"Виктор Вислобоков" <corochoone@xxxxxxxxx> писал(а):
> > Для многих роботов можно ограничить скорость через Crawl-delay в robots.txt:
>
> Проблема в том, что robots.txt - это территория сайта, а мы рулим
> сервером вообще-то :)
Можно аппендом ко всем robots.txt строчку дописывать в режиме прокси :)
--
Цитируйте предыдущую переписку, пожалуйста.
AleXXX V. NovikoFF <alexxx@xxxxxxxxx>
WWW: http://alexxx.ru/
|
