On Fri, 20 Oct 2000, Pavel Lozhkin wrote:
>
> Я _ПОЛАГАЛ_ что это средняя загрузка. Потому как видел (и часто) намного больше.
> Я не говорю кстати про XXX.
>
> Кстати вопрос тогда ко всем - а чем такой лог лучше проанализировать -
> а то то, что я нашел, ворочает этот лог почти столько же времени,
> сколько он набирается - то-есть почти сутки.....
У нашего клиента есть небольшой такой хостинг-редиректор в штатах, там 900
с небольшим сайтов и несколько миллионов хитов в день. Так вот, ни один из
попробованных там анализаторов статистики там не жил - что-то работало
чрезмерно долго, что-то просто дохло.
Сейчас мы используем свою тулзу - вот, например, за воскресенье 900 с
лишним логов объемом около 270 Мб разгрызло и засосало в базу за 40 минут.
Причем, в базу попадает все что нужно для последующей статистики отдельно
по сайтам, url-ам, реферерам, отрезкам времени с предсказанием и пр.
Машина там довольно слабая, да и база - MySQL. Сама обработка логов
полностью инкрементальная, можно делать хоть раз в пять минут, чтобы много
логов не копить.
Mike Shoyher
E-Labs
=============================================================================
"inet-admins" Internet access mailing list. Maintained by East Connection ISP.
Mail "unsubscribe inet-admins" to Majordomo@info.east.ru if you want to quit.
Archive is accessible on
