ПРОЕКТЫ 


  АРХИВ 


Apache-Talk @lexa.ru 

Inet-Admins @info.east.ru 

Filmscanners @halftone.co.uk 

Security-alerts @yandex-team.ru 

nginx-ru @sysoev.ru 


  СТАТЬИ 


  ПЕРСОНАЛЬНОЕ 


  ПРОГРАММЫ 



ПИШИТЕ
ПИСЬМА












     АРХИВ :: nginx-ru
Nginx-ru mailing list archive (nginx-ru@sysoev.ru)

[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

Re: Течет память при проксировании


  • To: "nginx-ru@xxxxxxxxx" <nginx-ru@xxxxxxxxx>
  • Subject: Re: Течет память при проксировании
  • From: Denis F. Latypoff <latypoff@xxxxxxxxx>
  • Date: Mon, 28 May 2012 02:26:10 +0700
  • Dkim-signature: v=1; a=rsa-sha256; c=relaxed/relaxed; d=yandex.ru; s=mail; t=1338146771; bh=ioRVZl+QgxoCRu+zACH0ZvUyhwL6TI+exbn9XOEcqH8=; h=From:To:In-Reply-To:References:Subject:MIME-Version:Message-Id: Date:Content-Transfer-Encoding:Content-Type; b=kXglx4yhdnInUGQNT8Z7snKTejIotgzFdriC4J/vQYyM93cyc9YAWGXbOCEBthhGT qwu6AZ5W/apoPn/tMdYoz3lJq3+dg78vDGeCr2sBBLQF/DoQRPVFsMJsrz+y9qGGq3 QXMtChCXOOwxkZPsXpUncq4nglU2Lc8kJ617GGDE=
  • Dkim-signature: v=1; a=rsa-sha256; c=relaxed/relaxed; d=yandex.ru; s=mail; t=1338146770; bh=ioRVZl+QgxoCRu+zACH0ZvUyhwL6TI+exbn9XOEcqH8=; h=From:To:In-Reply-To:References:Subject:MIME-Version:Message-Id: Date:Content-Transfer-Encoding:Content-Type; b=g2D/pt/UdJh1ABUMPSf1VHgjq+Rhgjjl3hdYG5M6vhU3ktrxVshzmhj+V7rUo8sDs fhuJXjRfEONjSgrFMbX0/KMxEqbdiGnkvOeKuduP5ew9DJ9bWAIIYhx9mql3d6Unx+ /rHh+nDCOadZeSb/BD54O2jTSa7Q28VMMwyecTS4=
  • In-reply-to: <20120527164545.GI31671@mdounin.ru>
  • References: <210681338047095@web29g.yandex.ru> <20120527164545.GI31671@mdounin.ru>

27.05.2012, 23:45, "Maxim Dounin" <mdounin@xxxxxxxxxx>:
> Hello!
>
> On Sat, May 26, 2012 at 10:44:55PM +0700, Denis F. Latypoff wrote:
>
>>  Приветствую.   Пробовал   1.2.0   и   1.3.0,   вот  на  таком  трафике
>>  http://s12.postimage.org/64ix4e8vf/localhost_nginx_request_week.png
>>  процессы  растут  с  70мб  до  1гб  (RSS)  за  сутки.  Трафик  генерит
>
> На каких-то версиях оно вело себя по другому?  Если да - на каких,
> и какие при этом использовались библиотеки и операционная система?
>

Проверил на 1.1.18 и на 1.1.8 (под рукой были) - тоже самое.

>>  самописный  клиент  с  другого  сервера. Keepalive'а нет. Nginx только
>>  проксирует,  бекенд  отдает  очень  короткий  ответ  (байт  200-300  с
>>  заголовками). Этот клиент обязательно дожидается ответа, только потом
>>  закрывает соединение сам. Конфиг такой:
>
> Мне видится два наиболее вероятных варианта:
>
> 1) Оно на самом деле не течёт, и видимый рост RSS - это результат
> работы системного аллокатора, не возвращающего память обратно.
> Если да - то на каком-то более или менее разумном объёме (с учётом
> gzip'а - килобайт 300-500 на соединение, считать максимум по
> соединениям с момента старта) оно должно стабилизироваться.  С
> учётом
>
>>      worker_connections  32768;
>
> тут 1 гиг - не показатель, нужно за количеством соединений
> последить внимательнее.

Вот это подойдет?
http://s8.postimage.org/t92badogl/localhost_nginx_status_day.png
Но думаю, уже не важно, см. ниже ))

>
> 2)
>
>>      geoip_city     /usr/share/GeoIP/GeoIPCity.dat   utf8;
>>      geoip_org      /usr/share/GeoIP/GeoIPASNum.dat  utf8;
>
> Модуль geoip - он, конечно, хороший, но пользуется библиотекой
> от MaxMind'а.  А та известна как минимум тем, что падает на
> некорректных данных в базе.  Так что я бы рекомендовал выключить и
> посмотреть, что будет.

Да, это оно. Без geoip я даже в топе больше вижу как память отдается,
чем выделяется )) 19 метров стабильно. Бывает до 22-23мб вырастет,
но потом опять 19.  С geoip она ни разу не отдавалась, только росла.
А то гиг для такой простой задачи это явно дофига ))

Пойду в libgeoip ковыряться, что у них там течет...

>
> Maxim Dounin

-- 
br, Denis F. Latypoff.

_______________________________________________
nginx-ru mailing list
nginx-ru@xxxxxxxxx
http://mailman.nginx.org/mailman/listinfo/nginx-ru


 




Copyright © Lexa Software, 1996-2009.