TB级日志轮转关键在于非阻塞:需以size为首要触发条件(如size 5G)、禁用copytruncate、用postrotate精准发信号重开日志、归档分层控制(delaycompress+olddir),并支持强制轮转与实时监控。

针对TB级大日志,关键不是“能不能切”,而是“切时不中断写入、不丢日志、不卡服务、不压垮磁盘IO”。logrotate 本身不阻塞应用,但配置不当会引发风险——比如没发信号通知重开日志,或用了 copytruncate 却忽略其清空原文件的副作用。真正实现非阻塞式切分,需同时满足:轮转触发精准(避免等周期)、切割动作原子(不挪动活跃文件)、服务感知及时(立刻切换写入目标)、归档清理可控(防磁盘夯住)。
用 size + postrotate 替代时间周期
TB级日志意味着单个文件可能几小时就涨到上百GB。依赖 daily 或 weekly 完全不可控,极易在轮转前撑爆磁盘。必须以大小为第一触发条件,且设置合理阈值:
-
size 5G:比单次写入峰值高1.5倍以上,避免高频轮转;不建议设过小(如100M),否则每分钟都切,postrotate频繁调用 kill -USR1 可能打满进程表 - 去掉
daily或weekly——它们与size共存时,size优先,但冗余声明易引发误判 - 加
maxsize 10G(可选):作为兜底,防止某次写入突发暴涨直接跳过size阈值
确保应用立即重定向写入新文件
轮转后若应用还在往旧文件句柄写,新日志就丢了。必须靠 postrotate 发送正确信号,且目标服务要支持该信号重开日志:
- Nginx / OpenResty:
systemctl kill -s USR1 nginx或kill -USR1 $(cat /var/run/nginx.pid) - rsyslog:
systemctl kill -s HUP rsyslog(新版支持 USR1,老版用 HUP) - 自研 Java/Python 服务:需在代码中监听
SIGHUP或USR1,主动 close+reopen 日志文件;不能依赖copytruncate - 禁用
copytruncate:它看似“不移动文件”,实则是复制+清空原文件,对TB级文件复制耗时长、IO高、且清空瞬间可能丢失正在 flush 的缓冲日志
归档压缩与清理必须分层控制
TB级日志归档后仍占空间巨大,压缩和删除策略要错峰、限速、留余量:
-
compress必开,但搭配delaycompress:最新一轮不压,留出窗口做快速回溯;上一轮才 gzip,避免每次轮转都触发高压压缩 -
rotate 30是底线,实际建议rotate 90:TB级场景下,保留三个月原始日志(压缩后)更稳妥,便于审计与长周期问题定位 - 加
olddir /archive/logs:把归档文件移到独立大容量磁盘(如 /archive),主盘只留最近7天活跃日志,隔离IO压力 - 避免
sharedscripts用于多日志路径:若一个配置块里匹配多个文件(如/var/log/app/*.log),postrotate只执行一次,但每个文件轮转是独立的——确保信号能覆盖全部实例
验证与应急操作不依赖 cron
磁盘已近 95% 时,等 cron.daily 执行就晚了。必须能秒级介入:
- 调试配置:
logrotate -d /etc/logrotate.d/app-heavy看是否识别到目标文件、是否触发 size 条件、postrotate 命令是否拼写正确 - 强制轮转:
logrotate -f /etc/logrotate.d/app-heavy立即切割,观察ls -lh /var/log/app/是否生成带日期的新归档,原文件是否变为空(说明信号生效) - 监控配合:用
inotifywait -m /var/log/app/ -e moved_to监听轮转事件,或定期检查find /var/log/app/ -name "*.log*" -size +5G报警


















