Linux日志归档功能 logrotate

发布时间： 更新时间： 总字数：1960 阅读时间：4m 作者： IP上海 分享 网址

在Centos6.5中，基本上所有服务都会把日志打印到日志文件，而随着时间的推移，日志文件会越来越大，直到占用所有的硬盘空间。而logrotate就是一个提供定时归档日志的功能。

logrotate简介

logrotate是一个日志管理工具，它可以自动对日志进行轮循、压缩,删除,邮件发送等。

使用

logrotate的详细帮助命令可以通过man查看，如下：

[root@xiexianbin_cn ~]# man logrotate

例子

logrotate nginx日志如下

[root@xiexianbin_cn ~]# cat /etc/logrotate.d/nginx
/var/log/nginx/*log {
    daily
    rotate 28
    missingok
    notifempty
    compress
    delaycompress
    create 644 root root
    dateext %Y-%m-%s
    sharedscripts
    postrotate
        /bin/kill -USR1 $(cat /var/run/nginx.pid 2>/dev/null) 2>/dev/null || true
    endscript
}

# postrotate 可用的命令
# [ ! -f /var/run/nginx.pid ] || kill -USR1 `cat /var/run/nginx.pid`
# docker exec -it nginx nginx -s reload > /dev/null 2>/dev/null || true
# /usr/local/bin/openresty -s reload

参数说明:

  • /var/log/nginx/*log：需要轮询的日志路径
  • daily：每天轮询
  • rotate 10：一次将存储10个归档日志。对于第十个归档，时间最久的归档将被删除
  • dateext：使用日期作为命名格式
  • sharedscripts: 表示postrotate脚本在压缩了日志之后只执行一次
  • postrotate/endscript: 最通常的作用是让应用重启，以便切换到新的日志文件, 在所有其它指令完成后，postrotate和endscript里面指定的命令将被执行。在这种情况下，rsyslogd 进程将立即再次读取其配置并继续运行
  • /var/lib/logrotate/status 记录执行的历史

其他参数说明:

  • notifempty：当日志为空时不进行滚动
  • compress 通过gzip 压缩转储以后的日志
  • nocompress 不需要压缩时，用这个参数
  • copytruncate 用于还在打开中的日志文件，把当前日志备份并截断
  • nocopytruncate 备份日志文件但是不截断*
  • create mode owner group 以指定的权限创建全新的日志文件，同时logrotate也会重命名原始日志文件。
  • nocreate 不建立新的日志文件
  • delaycompress 和 compress 一起使用时，转储的日志文件到下一次转储时才压缩
  • nodelaycompress 覆盖 delaycompress 选项，转储同时压缩。
  • errors address 专储时的错误信息发送到指定的Email 地址
  • ifempty 即使是空文件也转储，这个是 logrotate 的缺省选项。
  • notifempty 如果是空文件的话，不转储
  • mail address 把转储的日志文件发送到指定的E-mail 地址
  • nomail 转储时不发送日志文件
  • olddir directory 转储后的日志文件放入指定的目录，必须和当前日志文件在同一个文件系统
  • noolddir 转储后的日志文件和当前日志文件放在同一个目录下
  • prerotate/endscript 在转储以前需要执行的命令可以放入这个对，这两个关键字必须单独成行
  • postrotate/endscript 在转储以后需要执行的命令可以放入这个对，这两个关键字必须单独成行
  • daily 指定转储周期为每天
  • weekly 指定转储周期为每周
  • monthly 指定转储周期为每月
  • rotate count 指定日志文件删除之前转储的次数，0 指没有备份，5 指保留5 个备份
  • tabootext [+] list 让logrotate 不转储指定扩展名的文件，缺省的扩展名是：.rpm-orig, .rpmsave, v, 和 ~
  • size size 当日志文件到达指定的大小时才转储，Size 可以指定 bytes (缺省)以及K (sizek)或者M (sizem).

命令生效

默认情况下，logrotate的安装创建一个名为/etc/cron.daily里面的logrotate crontab文件。 因为它与这个目录里面的其他crontab文件的情况下，将每天定时执行。

有时候一些日志文件比较大时，使用如下命令手动归档：

logrotate -v -d -f /etc/logrotate.d/nginx

或

logrotate -v -f /etc/logrotate.d/nginx

当然对于日志量较大的程序，也可以结合定时任务使用，每小时或每隔几小时执行一次归档任务。

help 命令

[root@xiexianbin_cn mongodb]# logrotate --help
Usage: logrotate [OPTION...] <configfile>
  -d, --debug               Don't do anything, just test (implies -v)
  -f, --force               Force file rotation
  -m, --mail=command        Command to send mail (instead of `/bin/mail')
  -s, --state=statefile     Path of state file
  -v, --verbose             Display messages during rotation
  --version                 Display version information

Help options:
  -?, --help                Show this help message
  --usage                   Display brief usage message
[root@xiexianbin_cn mongodb]# logrotate --usage
Usage: logrotate [-dfv?] [-d|--debug] [-f|--force] [-m|--mail command] [-s|--state statefile] [-v|--verbose] [--version] [-?|--help] [--usage] [OPTION...] <configfile>
[root@xiexianbin_cn mongodb]#

logrotate 生效时间

在 cat /etc/anacrontab 配置：

SHELL=/bin/sh
PATH=/sbin:/bin:/usr/sbin:/usr/bin
MAILTO=root
# the maximal random delay added to the base delay of the jobs # 随机的延迟时间，表示最大是 45分钟
RANDOM_DELAY=45
# the jobs will be started during the following hours only # 开始时间：凌晨3点22分
START_HOURS_RANGE=3-22

#period in days   delay in minutes   job-identifier   command # 间隔    延迟时间（cron.daily会在3:22+(5,45)）     脚本位置
1   5   cron.daily      nice run-parts /etc/cron.daily  # logrotate 在这里
7   25  cron.weekly     nice run-parts /etc/cron.weekly
@monthly 45 cron.monthly        nice run-parts /etc/cron.monthly

[root@xiexianbin_cn ~]# cat /etc/cron.daily/logrotate
#!/bin/sh

/usr/sbin/logrotate /etc/logrotate.conf
EXITVALUE=$?
if [ $EXITVALUE != 0 ]; then
    /usr/bin/logger -t logrotate "ALERT exited abnormally with [$EXITVALUE]"
fi
exit 0
CronAnacron
Minimum granularity is minute (i.e Jobs can be scheduled to be executed every minute)Minimum granularity is only in days
Cron job can be scheduled by any normal user ( if not restricted by super user )Anacron can be used only by super user ( but there are workarounds to make it usable by normal user )
Cron expects system to be running 24 x 7. If a job is scheduled, and system is down during that time, job is not executed.Anacron doesn’t expect system to be running 24 x 7. If a job is scheduled, and system is down during that time, it start the jobs when the system comes back up.
Ideal for serversIdeal for desktops and laptops
Use cron when a job has to be executed at a particular hour and minuteUse anacron when a job has to be executed irrespective of hour and minute

参考：https://www.thegeekstuff.com/2011/05/anacron-examples/

demo

mongodb

/var/log/mongodb/*.log {
    daily
    rotate 28
    copytruncate
    # delaycompress
    compress
    notifempty
    missingok
    sharedscripts
    postrotate
        /bin/kill -SIGUSR1 `cat /var/run/mongodb/mongod-configsvr.pid 2>/dev/null` 2> /dev/null
        /bin/kill -SIGUSR1 `cat /var/run/mongodb/mongod-rs-1.pid 2>/dev/null` 2> /dev/null
        /bin/kill -SIGUSR1 `cat /var/run/mongodb/mongod-rs-2.pid 2>/dev/null` 2> /dev/null
        /bin/kill -SIGUSR1 `cat /var/run/mongodb/mongod-rs-3.pid 2>/dev/null` 2> /dev/null
        sleep 3
        rm -f $(ls /var/log/mongodb/*.log.$(date +%Y-%m-)* 2>/dev/null | sort) || true
    endscript
}

java

/usr/local/tomcat/logs/catalina.out {
    rotate 30
    daily
    copytruncate
    dateext
    compress
    notifempty
    missingok
}

说明：

  • copytruncate 的工作是先将日志文件 copy，然后再将原文件清空，可能会丢失部分日志，但 java 文件输出句柄不变。
  • java -jar 采用 > 重定向日志时，logrotate 采用 copytruncate 对其进行归档，新的日志文件会产生文件空洞。（shell 中的 > 相当于 java 中的 w）
  • java -jar 采用 >> 重定向日志时，不会产生文件空洞（推荐）。（shell 中的 » 相当于 java 中的 a）

haproxy

/var/log/haproxy {
    missingok
    notifempty
    sharedscripts
    postrotate
	/bin/kill -HUP `cat /var/run/syslogd.pid 2> /dev/null` 2> /dev/null || true
	/bin/kill -HUP `cat /var/run/rsyslogd.pid 2> /dev/null` 2> /dev/null || true
	/bin/kill -HUP `cat /var/run/syslog-ng.pid 2> /dev/null` 2> /dev/null || true
    endscript
}

http://www.haproxy.org/download/contrib/haproxy.logrotate http://jainpiyush95.blogspot.com/2016/01/enable-logging-in-haproxy.html

最近更新
相关文章
最新评论
Home Archives Categories Tags Statistics
本文总阅读量 次 本站总访问量 次 本站总访客数 人