我该如何处理巨大的日志文件？

Question

我运行的是 SSD 服务器，因为我对性能有很好的体验。但是我的网络服务器处理大量请求，一天未压缩的日志文件往往会超出数据库的大小。

我有通常标准格式的 Web 服务器日志文件。

有没有办法可以“动态”压缩它们？

Answer 1

日志旋转

此实用程序可以自动通知您的守护进程切换日志，因为它重命名并压缩了日志。由于每天运行一次是不够的，您还可以每小时运行一次。即使每小时记录一次，您仍然可以按天连接它们使用 GZip 压缩后。

压缩文件系统

文件系统可以设置透明加密，自动在后台节省空间。其他一些文件系统（虚拟文件系统等）也可以实现这一点。

压缩管

阿帕奇将直接记录到管道大多数应用程序都会写入名称管道（mkfifo），您可以将其附加到压缩程序中。