Какое лучшее решение для архивации журналов? У меня есть два сервера приложений (tomcat6), и мне нужно хранить файлы журналов приложений в течение 7 лет. Отправка, архивация и запись их на Bluray или DVD занимает много времени, некоторые процессы уже автоматизированы, но все равно занимают много времени, что вы предлагаете?
решение1
Самым простым решением для меня является использование syslogили одной из его производных (rsyslog, syslog-ng) для отправки всех журналов на центральные серверы. (Множественное число, потому что вам может понадобиться некоего рода отказоустойчивость для безопасности или балансировка нагрузки, если объем журнала очень большой)
Основные компоненты, которые вам понадобятся:
- Сжимайте журналы с помощью наиболее эффективного алгоритма, который вы можете себе позволить, в зависимости от объема журнала и вычислительной мощности центрального сервера(ов).
gzipС настройкой агрессивности по умолчанию все должно получиться. - Используйте самое надежное решение для хранения данных, которое вы можете себе позволить (RAID5, похоже, это минимум)
Файлы журналов очень повторяются, поэтому дневные журналы приложений должны иметь очень высокую степень сжатия, что позволит вам хранить данные за 7 лет на приличном объеме жесткого диска.