ПРОЕКТЫ 


  АРХИВ 


Apache-Talk @lexa.ru 

Inet-Admins @info.east.ru 

Filmscanners @halftone.co.uk 

Security-alerts @yandex-team.ru 

nginx-ru @sysoev.ru 


  СТАТЬИ 


  ПЕРСОНАЛЬНОЕ 


  ПРОГРАММЫ 



ПИШИТЕ
ПИСЬМА












     АРХИВ :: nginx-ru
Nginx-ru mailing list archive (nginx-ru@sysoev.ru)

[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

Re: Upstream timed out




Да, два апстрима находятся далеко. Но никаких ограничений на скорость канала нет.
Но чтобы исключить и влияние этого фактора можно взять локальные ошибки:

----- error.log

2007/09/07 06:45:55 [error] 10219#0: *16505 upstream timed out (110: Connection timed out) while reading upstream, client: 67.175.49.228, server: dev.kbb1.com, URL: "/icons/blank.gif", upstream: "http://192.168.90.102:80/icons/blank.gif";, host: "dev.kbb1.com", referrer: ""

2007/09/07 10:58:38 [error] 10219#0: *60331 upstream timed out (110: Connection timed out) while reading upstream, client: 67.175.49.228, server: dev.kbb1.com, URL: "/icons/blank.gif", upstream: "http://192.168.90.102:80/icons/blank.gif";, host: "dev.kbb1.com", referrer: ""

----- access.log

dev.kbb1.com 67.175.49.228 - - [07/Sep/2007:06:45:55 +0400] GET /icons/blank.gif HTTP/1.1 "304" 0 "" "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.6) Gecko/20070725 Firefox/2.0.0.6" 141 120.000 120.000

dev.kbb1.com 67.175.49.228 - - [07/Sep/2007:10:58:38 +0400] GET /icons/blank.gif HTTP/1.1 "304" 0 "" "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.6) Gecko/20070725 Firefox/2.0.0.6" 141 120.000 120.000

----- Apache 2.2.4 (mpm_prefork) access.log

67.175.49.228 - - [07/Sep/2007:06:43:55 +0400] "GET /icons/blank.gif HTTP/1.0" 304 - "" "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.6) Gecko/20070725 Firefox/2.0.0.6"

67.175.49.228 - - [07/Sep/2007:10:56:38 +0400] "GET /icons/blank.gif HTTP/1.0" 304 - "" "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.6) Gecko/20070725 Firefox/2.0.0.6"



umask wrote:
а как далеко апстримы от nginx'а (количество хопов)?

Судя по приведённым в первом письме по этой теме RTT nginx и апстримы не в 
одном ethernet-сегменте... ну за исключением того апстрима, что в VPS локально.



Может быть пакеты где-то тераются или в сети какие-то лимиты на скорость потока 
(между nginx и апстримами)?



Какой апач стоит на апстримах и что у него в access/error логах на счёт события 
2007/09/07 04:24:49 [error] 10215#0 ?



07.09.07, 05:18, Vladimir Shiray (vlad@xxxxxxxx):



Igor Sysoev wrote:

On Thu, Sep 06, 2007 at 11:12:25AM +0300, Vladimir Shiray wrote:


в error.log постоянно попадают ошибки, типа:

    "upstream timed out (110: Connection timed out) while reading upstream"

После очистки лога и перезапуска nginx, на 150000 подключений

получил 426 таких сообщений.

Сам сервер запущен внутри OpenVZ окружения (CentOS 4.5 32bit). Перед

последними

проверками, окружение было остановлено и запущено снова.

В /proc/user_beancounters и в логах ядра (2.6.18-ovz028stab039.1-smp)

все "чисто".

У сервера есть три upstream, один докальный в "соседнем" VPS и два удаленных

(rtt: 150ms и 60ms). Ошибки присутствуют для каждого из них.

------

nginx-0.5.29  (c двумя патчами: patch-0.6.2.2, patch-0.6.5.1)


Как уже посоветовали, можно логировать $upstream_response_time

Эти ошибки на https'ных соединениях с бэкендами или на обычных ?


В данном случае проблемы происходят на обычных соединениях.

На SSL с патчем 0.6.2.2 никаких проблем больше не обнаруживается.

Но как я понимаю, патч включен в состав 0.5.30

Вот обновил настройки для логирования:

log_format mylog '$http_host $remote_addr - $remote_user

[$time_local] $request '

                      '"$status" $body_bytes_sent "$http_referer" '

'"$http_user_agent" $bytes_sent

$upstream_response_time $request_time';

Перестартовал полностью nginx и в течении первых 5 минут получил уже

первую ошибку.

Извлек все записиси для этого же URL с момента старта сервера.

На всякий случай включил кусок лога (4 строки) за этот период для SSL.

2007/09/07 04:24:49 [error] 10215#0: *618 upstream timed out (110:

Connection timed out) while reading upstream, client: 207.4.222.10,

server: www.kabbalah.info, URL: "/pictures/kabbalah.gif", upstream:

"http://64.40.103.100:80/pictures/kabbalah.gif";, host:

"www.kabbalah.info", referrer: "http://www.kabbalah.info/";

----- access.log   (grep /pictures/kabbalah.gif)

www.kabbalah.info 85.178.0.205 - - [07/Sep/2007:04:20:48 +0400] GET

/pictures/kabbalah.gif HTTP/1.1 "304" 0 "http://www.kabbalah.info/";

"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR

1.0.3705; .NET CLR 1.1.4322; Media Center PC 4.0; .NET CLR 2.0.50727)"

212 0.311 0.311

www.kabbalah.info 84.109.97.57 - - [07/Sep/2007:04:21:55 +0400] GET

/pictures/kabbalah.gif HTTP/1.1 "304" 0 "http://www.kabbalah.info/";

"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; InfoPath.1)"

212 0.848 0.848

www.kabbalah.info 75.171.34.92 - - [07/Sep/2007:04:23:23 +0400] GET

/pictures/kabbalah.gif HTTP/1.1 "304" 0 "http://www.kabbalah.info/";

"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; MRA 4.7 (build

01670); .NET CLR 1.0.3705; .NET CLR 1.1.4322; Media Center PC 3.1; MSN

9.0;MSN 9.1; MSNbQ002; MSNmen-us; MSNcOTH)" 212 0.313 0.313

www.kabbalah.info 212.12.28.1 - - [07/Sep/2007:04:23:28 +0400] GET

/pictures/kabbalah.gif HTTP/1.1 "200" 7079 "http://www.kabbalah.info/";

"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; InfoPath.1)"

7396 0.472 0.472

www.kabbalah.info 70.22.177.14 - - [07/Sep/2007:04:23:36 +0400] GET

/pictures/kabbalah.gif HTTP/1.1 "200" 7079 "http://www.kabbalah.info/";

"Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; SU 3.004; IEMB3;

IEMB3)" 7396 0.465 0.465

www.kabbalah.info 171.159.192.10 - - [07/Sep/2007:04:24:14 +0400] GET

/pictures/kabbalah.gif HTTP/1.1 "200" 7079 "http://www.kabbalah.info/";

"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; InfoPath.1;

.NET CLR 1.1.4322; .NET CLR 1.0.3705; .NET CLR 2.0.50727)" 7396 0.469 0.469

www.kabbalah.info 207.4.222.10 - - [07/Sep/2007:04:24:49 +0400] GET

/pictures/kabbalah.gif HTTP/1.1 "304" 0 "http://www.kabbalah.info/";

"Mozilla/5.0 (Macintosh; U; Intel Mac OS X; en-US; rv:1.8.1.6)

Gecko/20070725 Firefox/2.0.0.6" 212 123.154 123.154

www.kabbalah.info 85.113.215.1 - - [07/Sep/2007:04:26:13 +0400] GET

/pictures/kabbalah.gif HTTP/1.1 "200" 7079 "http://www.kabbalah.info/";

"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; InfoPath.2;

.NET CLR 2.0.50727; .NET CLR 3.0.04506.30)" 7396 0.470 0.503

------ access_ssl.log    (all lines from 04:17:57 to 04:26:04)

84.228.157.194 - - [07/Sep/2007:04:17:57 +0400] GET

/mail/src/left_main.php HTTP/1.1 "200" 2345

"https://www.kabbalah.info/xxxxxxxxxxxxxxxxx/aaa.php";

"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR

1.1.4322)" "-"

84.228.157.194 - - [07/Sep/2007:04:22:58 +0400] GET

/mail/src/left_main.php HTTP/1.1 "200" 2352

"https://www.kabbalah.info/xxxxxxxxxxxxxxxxx/aaa.php";

"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR

1.1.4322)" "-"

65.55.210.90 - - [07/Sep/2007:04:26:02 +0400] GET /robots.txt HTTP/1.0

"200" 199 "-" "msnbot/1.0 (+http://search.msn.com/msnbot.htm)" "-"

65.55.210.90 - - [07/Sep/2007:04:26:04 +0400] GET

/polakab/publikacje/magik.php HTTP/1.0 "200" 1095 "-" "msnbot/1.0

(+http://search.msn.com/

msnbot.htm)" "-"






 




Copyright © Lexa Software, 1996-2009.