ПРОЕКТЫ 


  АРХИВ 


Apache-Talk @lexa.ru 

Inet-Admins @info.east.ru 

Filmscanners @halftone.co.uk 

Security-alerts @yandex-team.ru 

nginx-ru @sysoev.ru 


  СТАТЬИ 


  ПЕРСОНАЛЬНОЕ 


  ПРОГРАММЫ 



ПИШИТЕ
ПИСЬМА












     АРХИВ :: nginx-ru
Nginx-ru mailing list archive (nginx-ru@sysoev.ru)

[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

Re: nginx и несколько memcached серве ров


  • To: nginx-ru@xxxxxxxxx
  • Subject: Re: nginx и несколько memcached серве ров
  • From: Andrey Zloy <andrey.zloy@xxxxxxxxx>
  • Date: Sun, 25 Oct 2009 20:48:13 +0300
  • Dkim-signature: v=1; a=rsa-sha256; c=relaxed/relaxed; d=gmail.com; s=gamma; h=domainkey-signature:mime-version:received:in-reply-to:references :date:message-id:subject:from:to:content-type; bh=bNKejAHzwVVgGEScfMNFYZ6nnoTas4tnt9LdYmSFai8=; b=hVD4/XsJn5tVwJFpw2aVYXwdvqKMatNAnmZjzI/vmW/HVwpYtrmLRPBhb+9nqMK9Jl 8SLAQCazq95oLaKENWmIqPche6ITKJwa7m52MMu6paWVzb/12JcshUXumutfz3WFc+WX 81i7XZvYHePbhPTAWIj89f2CbDJeBDSq5axIo=
  • Domainkey-signature: a=rsa-sha1; c=nofws; d=gmail.com; s=gamma; h=mime-version:in-reply-to:references:date:message-id:subject:from:to :content-type; b=mj053wbgW62xZ6zi/DpddnJnr+ry+6HVrl9MluL7vS3SX/YjyN2pEsamtlWVm+nDkx OSInog++jOq0otEe1IiyMRPLHppHZErNkYkBZArrqdMbsQnvblBc103Dl8pl4t125c+/ rPiRLdjt17sUO7YPeA9msoIAXZLRvgf4ZzqCw=
  • In-reply-to: <4AE484AD.2050409@xxxxxxxxxxx>
  • References: <75b643ec0910250236u79fa151cmc4a83021269b7d93@xxxxxxxxxxxxxx> <4AE484AD.2050409@xxxxxxxxxxx>

Сдвиг на 16 бит потому что это алгоритм из Cache::Memcached. думаю что они сдвигают биты для получения меньшего числа. Ведь нет смысла делить огромное число, если нужен лишь остаток от деления.

На счет замены md5 на crc32 согласен, надо переделать. Нет смысла получать такой сложный хэш, когда цель всего лишь сжать url.

25 октября 2009 г. 20:02 пользователь Deomid Ryabkov <myself@xxxxxxxxxxx> написал:
CRC32 от MD5, зачем-то сдвинутый на 16. не нравятся младшие биты?
md5 вычислительно значительно дороже CRC32, может обойтись только CRC32?

Andrey Zloy wrote:
Написали небольшой конфиг, который позволяет nginx'у определять "правильный" memcached сервер.
Логика определения сервера взята из модуля Cache::Memcached.
Ключом для мемкеша служит md5 от url'а страницы.

На продакшн конфиг пока не выкатывал. На тестовых серверах работает хорошо.

Подскажите могут ли быть подводные камни?
Может кто уже писал подобные решения

http {
      perl_set $md5_uri 'sub {
    use Digest::MD5 qw(md5_base64);
    my $r = shift;
    my $uri=$r->uri;
    my $args=$r->args;
    if ($args){
      $uri=$uri."?".$args;
    }
     return md5_base64($uri);
   }';

    perl_set $memcached_index '
    sub {
      use String::CRC32;
      my $r = shift;
      return (((crc32($r->variable("md5_uri")) >> 16) & 0x7fff) % 2); # 2 - кол-во серверов memcached
   }
  ';

  server {
    listen 3666;
    server_name 172.28.144.68;

    location / {
     set $memcached_key $md5_uri;
     if ($memcached_index = 0){
        memcached_pass 172.28.144.52:11211 <http://172.28.144.52:11211>;        }
     if ($memcached_index = 1){
        memcached_pass 172.28.144.53:11211 <http://172.28.144.53:11211>;        }

     error_page 404 @fallback;
   }
 }
}



--
Deomid "rojer" Ryabkov
myself@xxxxxxxxxxx
rojer@xxxxxxxxxxxx
ICQ: 8025844




 




Copyright © Lexa Software, 1996-2009.