OpenNET стаття - Обробка log-файлу поштового сервера Postfix (postfix log statistic)
1,2,3 вирішуються за допомогою простих sh скриптів (4 рядки скрипт), час виконання яких до 10 с 3,4 вирішуються за допомогою pflogsumm
Коли логи сервака займають по 300-400 метрів на день, особливо з БД не попрацюєш. Plain-text парсить набагато ефективніше з погляду використання ресурсів системи.
Я навіть не уявляю, скільки perl віджере пам'яті, якщо йому згодувати досить велику балку.
У мене такого трафіку немає, на жаль :)
Був би дуже вдячний, якби хтось протестував прогу на великих журналах.
Прожену спробую. Але сенсу в цьому немає. Для великих логів набагато потрібніше утиліти вибору конкретної інформації (пошук слідів конкретного листа). До речі, скільки займає база для ліг у 25 мегабайт?
пробігся по файлу і все
це все через split насправді, формат логів може різнитися, тому недобре прив'язуватися до свого логу