• 运维日志切割--logrotate


    一、logrotate介绍

    logrotate程序是一个日志文件管理工具。用于分割日志文件,删除旧的日志文件,并创建新的日志文件,起到"转储"作用。可以节省磁盘空间。例如,你可以设置logrotate,让/var/log/logfile日志文件每30天轮循,并删除超过6个月的日志。配置完后,logrotate的运作完全自动化,不必进行任何进一步的人为干预。

    二、logrotae配置使用

    2.1、logrotate安装

    1)系统版本

    [root@test206 ~]#cat /etc/redhat-release 
    CentOS Linux release 7.6.1810 (Core) 
    [root@test206 ~]#uname -r
    3.10.0-957.21.3.el7.x86_64

    2)默认centos系统安装自带logrotate,直接使用yum 安装

    3)安装包说明

    [root@test206 ~]#rpm -ql logrotate
    /etc/cron.daily/logrotate   #Logrotate是基于CRON来运行的,其脚本是/etc/cron.daily/logrotate
    /etc/logrotate.conf         #logrotate 自身的配置文件
    /etc/logrotate.d            #配置切割设置的目录
    /etc/rwtab.d/logrotate
    /usr/sbin/logrotate
    /usr/share/doc/logrotate-3.8.6
    /usr/share/doc/logrotate-3.8.6/CHANGES
    /usr/share/doc/logrotate-3.8.6/COPYING
    /usr/share/man/man5/logrotate.conf.5.gz
    /usr/share/man/man8/logrotate.8.gz
    /var/lib/logrotate
    /var/lib/logrotate/logrotate.status  #日志切割的状态信息
    
    #注意
    logrotate的配置文件是/etc/logrotate.conf,通常不需要对它进行修改。
    日志文件的轮循设置在独立的配置文件中,它(们)放在/etc/logrotate.d/目录下。

    2.2、配置参数说明

    2.2.1、主配置文件

    [root@test206 ~]#cat /etc/logrotate.conf 
    weekly         #默认每一周执行一次rotate轮转工作
    rotate 4       #保留多少个日志文件(轮转几次).默认保留四个.就是指定日志文件删除之前轮转的次数,0 指没有备份
    create         #自动创建新的日志文件,新的日志文件具有和原来的文件相同的权限;因为日志被改名,因此要创建一个新的来继续存储之前的日志
    dateext        #切割后的日志文件以当前日期为格式结尾,如xxx.log-20131216,注释掉,切割出来是按数字递增,即xxx.log-1这种格式          
    compress       #是否通过gzip压缩转储以后的日志文件,如xxx.log-20131216.gz ;如果不需要压缩,注释掉就行
    include /etc/logrotate.d  #将 /etc/logrotate.d/ 目录中的所有文件都加载进来
    
    # 这个 wtmp 可记录用户登录系统及系统重启的时间
    # 因为有 minsize 的参数,因此不见得每个月一定会执行一次喔.要看文件大小。
    /var/log/wtmp {           #仅针对 /var/log/wtmp 所设定的参数
        monthly               #每月一次切割,取代默认的一周
        create 0664 root utmp #文件大小超过 1M 后才会切割
    	minsize 1M         #指定新建的日志文件权限以及所属用户和组
        rotate 1               #只保留一个日志.
    }
    
    /var/log/btmp {            ##仅针对 /var/log/wtmp 所设定的参数
        missingok
        monthly
        create 0600 root utmp
        rotate 1
    }
    

    2.2.2、日志轮转脚本

    #Logrotate是基于CRON来运行的,其脚本是/etc/cron.daily/logrotate,日志轮转是系统自动完成的。
    [root@test206 ~]#cat /etc/cron.daily/logrotate
    #!/bin/sh
    
    /usr/sbin/logrotate -s /var/lib/logrotate/logrotate.status /etc/logrotate.conf
    EXITVALUE=$?
    if [ $EXITVALUE != 0 ]; then
        /usr/bin/logger -t logrotate "ALERT exited abnormally with [$EXITVALUE]"
    fi
    exit 0

    2.2.2、其他重要参数说明

    compress                            #通过gzip 压缩转储以后的日志
    nocompress                          #不做gzip压缩处理
    copytruncate                        #用于还在打开中的日志文件,把当前日志备份并截断;是先拷贝再清空的方式,拷贝和清空之间有一个时间差,可能会丢失部分日志数据。
    nocopytruncate                      #备份日志文件不过不截断
    create mode owner group             #轮转时指定创建新文件的属性,如create 0777 nobody nobody
    nocreate                            #不建立新的日志文件
    delaycompress                       #和compress 一起使用时,转储的日志文件到下一次转储时才压缩
    nodelaycompress                     #覆盖 delaycompress 选项,转储同时压缩。
    missingok                           #如果日志丢失,不报错继续滚动下一个日志
    errors address                      #专储时的错误信息发送到指定的Email 地址
    ifempty                             #即使日志文件为空文件也做轮转,这个是logrotate的缺省选项。
    notifempty                          #当日志文件为空时,不进行轮转
    mail address                        #把转储的日志文件发送到指定的E-mail 地址
    nomail                              #转储时不发送日志文件
    olddir directory                    #转储后的日志文件放入指定的目录,必须和当前日志文件在同一个文件系统
    noolddir                            #转储后的日志文件和当前日志文件放在同一个目录下
    sharedscripts                       #运行postrotate脚本,作用是在所有日志都轮转后统一执行一次脚本。如果没有配置这个,那么每个日志轮转后都会执行一次脚本
    prerotate                           #在logrotate转储之前需要执行的指令,例如修改文件的属性等动作;必须独立成行
    postrotate                          #在logrotate转储之后需要执行的指令,例如重新启动 (kill -HUP) 某个服务!必须独立成行
    daily                               #指定转储周期为每天
    weekly                              #指定转储周期为每周
    monthly                             #指定转储周期为每月
    rotate count                        #指定日志文件删除之前转储的次数,0 指没有备份,5 指保留5 个备份
    dateext                             #使用当期日期作为命名格式
    dateformat .%s                      #配合dateext使用,紧跟在下一行出现,定义文件切割后的文件名,必须配合dateext使用,只支持 %Y %m %d %s 这四个参数
    size(或minsize) log-size            #当日志文件到达指定的大小时才转储,log-size能指定bytes(缺省)及KB (sizek)或MB(sizem).当日志文件 >= log-size 的时候就转储。 以下为合法格式:(其他格式的单位大小写没有试过)
    #size = 5 或 size 5 (>= 5 个字节就转储)
    #size = 100k 或 size 100k
    #size = 100M 或 size 100M

    2.3、logrotate相关命令

    #logrotate命令格式:
    logrotate [OPTION...] <configfile>
    -d, --debug  #debug模式,测试配置文件是否有错误。
    -f, --force  #强制转储文件。
    -m, --mail=command  #压缩日志后,发送日志到指定邮箱。
    -s, --state=statefile  #使用指定的状态文件。
    -v, --verbose  #显示转储过程。
    
    #如果等不及cron自动执行日志轮转,想手动强制切割日志,需要加-f参数;不过正式执行前最好通过Debug选项来验证一下(-d参数),这对调试也很重要
    /usr/sbin/logrotate -f /etc/logrotate.d/nginx
    /usr/sbin/logrotate -d -f /etc/logrotate.d/nginx
    
    #根据日志切割设置进行操作,并显示详细信息
    /usr/sbin/logrotate -v /etc/logrotate.conf
    /usr/sbin/logrotate -v /etc/logrotate.d/php
    
    #根据日志切割设置进行执行,并显示详细信息,但是不进行具体操作,debug模式
    /usr/sbin/logrotate -d /etc/logrotate.conf
    /usr/sbin/logrotate -d /etc/logrotate.d/nginx
    
    #查看各log文件的具体执行情况
    cat /var/lib/logrotate/logrotate.status

    三、logrotate切割tomcat  catalina.out日志

    一般在部署Tomcat后,运行久了,catalina.out文件会越来越大,甚至上G,对系统的稳定造成了一定的影响

    3.1、定义tomcat  pid文件

    [root@test206 ~]#vim /usr/java/tomcat/dianchou-app-boss/bin/catalina.sh
    # Get standard environment variables
    PRGDIR=`dirname "$PRG"`
    CATALINA_PID=/usr/java/tomcat/dianchou-app-boss/tomcat.pid

    3.2、重启tomcat并查看pid文件

    [root@test206 bin]#./shutdown.sh
    [root@test206 bin]#./startup.sh
    [root@test206 bin]#cd ../
    [root@test206 dianchou-app-boss]#ll tomcat.pid 
    -rw-r--r-- 1 root root 6 Nov 12 20:48 tomcat.pid
    [root@test206 dianchou-app-boss]#cat tomcat.pid 
    19472
    

    3.3、配置logrotate切割文件

    [root@test206 ~]#vim /etc/logrotate.d/tomcat_appboss_catalina
    /usr/java/tomcat/dianchou-app-boss/logs/catalina.out {
            daily
            rotate 15
            missingok
            notifempty
            dateext
            compress
            delaycompress
            sharedscripts
            create 644 root root
            postrotate
                    if [ -f /usr/java/tomcat/dianchou-app-boss/tomcat.pid ]; then
                           kill -USR1 `cat /usr/java/tomcat/dianchou-app-boss/tomcat.pid` #测试杀死了进程,但没重新启动
    		       rm -f /usr/java/tomcat/dianchou-app-boss/tomcat.pid  #删除pid文件,不然报错
    		       /usr/java/tomcat/dianchou-app-boss/bin/startup.sh    #重启tomcat,重新生成pid文件
                    fi
            endscript
    }
    
    #USR1信号解释
    1、USR1亦通常被用来告知应用程序重载配置文件;例如,向Apache HTTP服务器发送一个USR1信号将导致以下步骤的发生:停止接受新的连接,等待当前连接停止,重新载入配置文件,重新打开日志文件,重启服务器,从而实现相对平滑的不关机的更改。
    2、在没有执行kill -USR1 `cat ${pid_path}`之前,即便已经对文件执行了mv命令而改变了文件名称,tomcat还是会向新命名的文件" xxx.out_ 20180619"照常写入日志数据的。原因在于:linux系统中,内核是根据文件描述符来找文件的。

    3.4、测试执行

    [root@test206 logs]#ll catalina.out*
    -rw-r--r-- 1 root root 6241051 Nov 12 20:48 catalina.out
    [root@test206 logs]#logrotate -vf /etc/logrotate.d/tomcat_appboss_catalina 
    reading config file /etc/logrotate.d/tomcat_appboss_catalina
    Allocating hash table for state file, size 15360 B
    
    Handling 1 logs
    
    rotating pattern: /usr/java/tomcat/dianchou-app-boss/logs/catalina.out  forced from command line (15 rotations)
    empty log files are not rotated, old logs are removed
    considering log /usr/java/tomcat/dianchou-app-boss/logs/catalina.out
      log needs rotating
    rotating log /usr/java/tomcat/dianchou-app-boss/logs/catalina.out, log->rotateCount is 15
    dateext suffix '-20191112'
    glob pattern '-[0-9][0-9][0-9][0-9][0-9][0-9][0-9][0-9]'
    glob finding logs to compress failed
    glob finding old rotated logs failed
    renaming /usr/java/tomcat/dianchou-app-boss/logs/catalina.out to /usr/java/tomcat/dianchou-app-boss/logs/catalina.out-20191112
    creating new /usr/java/tomcat/dianchou-app-boss/logs/catalina.out mode = 0644 uid = 0 gid = 0
    running postrotate script
    Using CATALINA_BASE:   /usr/java/tomcat/dianchou-app-boss
    Using CATALINA_HOME:   /usr/java/tomcat/dianchou-app-boss
    Using CATALINA_TMPDIR: /usr/java/tomcat/dianchou-app-boss/temp
    Using JRE_HOME:        /usr
    Using CLASSPATH:       /usr/java/tomcat/dianchou-app-boss/bin/bootstrap.jar:/usr/java/tomcat/dianchou-app-boss/bin/tomcat-juli.jar
    Using CATALINA_PID:    /usr/java/tomcat/dianchou-app-boss/tomcat.pid
    Tomcat started.
    [root@test206 logs]#ll catalina.out*
    -rw-r--r-- 1 root root    4594 Nov 12 20:56 catalina.out
    -rw-r--r-- 1 root root 6241051 Nov 12 20:48 catalina.out-20191112  #后续切割时会对前面的日志进行压缩

    3.5、设置定时任务

    [root@test206 ~]#crontab -l
    #logrotate tomcat
    59 23 * * * /usr/sbin/logrotate -vf /etc/logrotate.d/tomcat_appboss_catalina &>/dev/null

    参考文档:

    https://www.cnblogs.com/kevingrace/p/6307298.html

    https://www.cnblogs.com/along21/p/9198427.html

  • 相关阅读:
    单位根反演
    安卓第十三天笔记-服务(Service)
    安卓第十二天笔记-广播
    安卓第十一天笔记-Intent与inter-filter配置
    安卓第十天笔记-fragment
    安卓第九天笔记-Activity
    安卓第八天笔记--网络编程二
    安卓第七天笔记--网络编程一
    安卓第六天笔记--ListView
    安卓第五天笔记-对话框
  • 原文地址:https://www.cnblogs.com/hujinzhong/p/11840577.html
Copyright © 2020-2023  润新知