ПРОЕКТЫ 


  АРХИВ 


Apache-Talk @lexa.ru 

Inet-Admins @info.east.ru 

Filmscanners @halftone.co.uk 

Security-alerts @yandex-team.ru 

nginx-ru @sysoev.ru 


  СТАТЬИ 


  ПЕРСОНАЛЬНОЕ 


  ПРОГРАММЫ 



ПИШИТЕ
ПИСЬМА












     АРХИВ :: nginx-ru
Nginx-ru mailing list archive (nginx-ru@sysoev.ru)

[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

Re: Как сделать задержку при передаче соединения бакэнду



Я делал подобное для себя почти год назад. Может поможет:

http://jackal.in/2008/09/ogranichenie-otdachi-kontenta-s-bekendov-dlja-botov.html

On Monday 01 September 2008 20:11:46 Виктор Вислобоков wrote:
> > Для многих роботов можно ограничить скорость через Crawl-delay в
> > robots.txt:
>
> Проблема в том, что robots.txt - это территория сайта, а мы рулим
> сервером вообще-то :)
>
> > От адекватных ботов, вроде ботов популярных поисковиков, limit_rate
> > отлично подходит для снижения нагрузки на сайт.
>
> Если бы все боты были адекватными, я бы не полез задавать этот вопрос.
> Индексируют и в несколько потоков и с разных адресов.



-- 
С уважением, Евгений.


 




Copyright © Lexa Software, 1996-2009.