定时任务说明与分类
定时任务的应用场景举例
每天晚上 12点备份/etc/目录
tar
定时任务的三种分类
crond(crontab)定时任务软件(软件包cronie),用的最多的一种
atd,应用在只运行一次的任务
anacron ,非7*24小时运行的服务器(比如开机多长时间运行,关机多长时间运行)
[root@Dao ~]# rpm -qa cronie 查看安装的cronie软件版本 cronie-1.4.4-16.el6_8.2.x86_64 [root@Dao ~]# rpm -ql cronie 查看软件包详细列表 /etc/cron.d /etc/cron.d/0hourly /etc/cron.deny /etc/pam.d/crond /etc/rc.d/init.d/crond # crond定时软件 /etc/sysconfig/crond /usr/bin/crontab /usr/sbin/crond /usr/share/doc/cronie-1.4.4 /usr/share/doc/cronie-1.4.4/AUTHORS /usr/share/doc/cronie-1.4.4/COPYING /usr/share/doc/cronie-1.4.4/ChangeLog /usr/share/doc/cronie-1.4.4/INSTALL /usr/share/doc/cronie-1.4.4/README /usr/share/man/man1/crontab.1.gz /usr/share/man/man5/crontab.5.gz /usr/share/man/man8/cron.8.gz /usr/share/man/man8/crond.8.gz /var/spool/cron
用户与系统定时任务
系统定时任务
系统定时任务主要和四个文件有关(cron.daily、cron.hourly、cron.monthly、cron.weekly)
系统会定时自动运行文件里面的内容
[root@Dao ~]# ls -l /etc/ |grep cron. -rw------- 1 root root 541 Aug 24 2016 anacrontab drwxr-xr-x. 2 root root 4096 Jan 24 21:32 cron.d drwxr-xr-x. 2 root root 4096 Sep 27 2011 cron.daily # 每天 -rw------- 1 root root 0 Aug 24 2016 cron.deny drwxr-xr-x. 2 root root 4096 Jan 24 21:32 cron.hourly # 每小时 drwxr-xr-x 2 root root 4096 Sep 27 2011 cron.monthly # 每月 -rw-r--r-- 1 root root 457 Sep 27 2011 crontab # 系统定时任务的配置文件之一 drwxr-xr-x 2 root root 4096 Sep 27 2011 cron.weekly # 每周 #有些病毒会在文件中插入定时任务,自动运行,所以很难彻底清除
系统定时任务相关:系统定时任务+logrotate命令 完成对 日志的日志切割、日志轮询
定时对这几个文件进行切割
/var/log/cron /var/log/secure /var/log/messages
查看日志目录下的日志文件
[root@Dao ~]# ls -l /var/log/secure* /var/log/messages* -rw------- 1 root root 1498 Jan 24 21:32 /var/log/messages -rw------- 1 root root 438 Dec 12 12:27 /var/log/messages-20181216 -rw------- 1 root root 141 Dec 16 03:29 /var/log/messages-20181223 -rw------- 1 root root 141 Dec 23 03:14 /var/log/messages-20181230 -rw------- 1 root root 206 Jan 3 12:40 /var/log/messages-20190106 -rw------- 1 root root 45504 Jan 29 21:13 /var/log/secure -rw------- 1 root root 40715 Dec 16 01:10 /var/log/secure-20181216 -rw------- 1 root root 49052 Dec 23 02:34 /var/log/secure-20181223 -rw------- 1 root root 22145 Dec 30 03:08 /var/log/secure-20181230 -rw------- 1 root root 33336 Jan 5 23:38 /var/log/secure-20190106
logrotate里面的内容
[root@Dao ~]# cat /etc/cron.daily/logrotate #!/bin/sh /usr/sbin/logrotate /etc/logrotate.conf EXITVALUE=$? if [ $EXITVALUE != 0 ]; then /usr/bin/logger -t logrotate "ALERT exited abnormally with [$EXITVALUE]" fi exit 0 [root@Dao ~]# cat /etc/logrotate.d/syslog /var/log/cron /var/log/maillog /var/log/messages /var/log/secure /var/log/spooler { sharedscripts postrotate /bin/kill -HUP `cat /var/run/syslogd.pid 2> /dev/null` 2> /dev/null || true endscript }
用户的定时任务
使用的几个命令
crontab -l (list) #查看用户的定时任务(列表)cron table crontab -e (edit) #编辑用户的定时任务 /var/spool/cron/root #(root是用户名 root用户的定时任务)用户定时任务存放的目录
第一次用的时候回提示
[root@Dao ~]# crontab -l no crontab for root #用户没有定时任务
注:Linux中,每个用户的定时任务是分开的
在定时任务中添加项目
[root@Dao ~]# crontab -e 编辑定时任务 # 和vim的操作是一样的,我写入了# pizza然后保存退出 no crontab for root - using an empty one crontab: installing new crontab [root@Dao ~]# crontab -l # pizza
定时任务的使用
在使用之前,一定要确保定时任务依赖的软件(服务)是否可以使用
# 查看定时任务是否在运行 # 第一种方法 [root@Dao ~]# /etc/init.d/crond status crond is stopped # 第二种方法 [root@Dao ~]# ps -ef |grep crond root 17714 17688 0 22:01 pts/0 00:00:00 grep crond # 查看定时任务,是不是开机自启动,要保证重启后也在运行 [root@Dao ~]# chkconfig |grep crond crond 0:off 1:off 2:on 3:on 4:on 5:on 6:off # 3 位置是on就是开机自启动了
定时任务的开启和关闭
[root@Dao ~]# /etc/init.d/crond start Starting crond: [ OK ] [root@Dao ~]# /etc/init.d/crond status crond (pid 17733) is running... [root@Dao ~]# /etc/init.d/crond stop Stopping crond: [ OK ] [root@Dao ~]# /etc/init.d/crond status crond is stopped
定时任务的开机启动关闭和开启
[root@Dao ~]# chkconfig crond off [root@Dao ~]# chkconfig |grep crond crond 0:off 1:off 2:off 3:off 4:off 5:off 6:off [root@Dao ~]# chkconfig crond on crond 0:off 1:off 2:on 3:on 4:on 5:on 6:off
如何用crontab?
[root@Dao ~]# crontab --help crontab: invalid option -- '-' crontab: usage error: unrecognized option usage: crontab [-u user] file crontab [-u user] [ -e | -l | -r ] (default operation is replace, per 1003.2) -e (edit user's crontab) #查看列表 就相当于在查看/var/spool/cron/root -l (list user's crontab) #编辑 就相当于在编辑 /var/spool/cron/root -r (delete user's crontab) #把当前都删掉,无提示,直接删 -i (prompt before deleting user's crontab) #删除之前提示 -s (selinux context)
为什么使用crontab命令,而不是直接操作/var/spool/cron/root这个文件呢?
1、命令有语法检查功能,
2、更方便
定时任务相关的文件
/var/spool/cron/ # 定时任务的配置文件所在目录 /var/log/cron # 定时任务的日志文件 运行过程的一个记录,无法显示运行的对不对 /etc/cron.deny # 哪些用户禁止使用定时任务 - 定时任务黑名单
关于如何看日志
定时任务格式与常见写法
格式说明
什么时间做什么事情
时间分为5个部分-----分时日月周,事情就是命令或者脚本
两个例子
定时任务常用符号
* #每 /n #隔 */10 * * * * 表示每隔10分钟 - #从哪到哪 07-08 , #分隔 17,18,21
例子
题目:每5分钟同步一下系统的时间
#第一个里程碑-命令 ntpdate ntp1.aliyun.com #注意:编写定时任务要使用命令的绝对路径 /usr/sbin/ntpdate ntp1.aliyun.com #第二个里程碑-写入定时任务 crontab -e #在文件中写入 # sync time by pizza at 20190123 00:15 */5 * * * * /usr/sbin/ntpdate ntp1.aliyun.com #第三个里程碑-检查 ##1)看日志 tail -f /var/log/cron ##2)看结果 查看时间是否在跟新(可以先手动更改)
注:You have mail in /var/spool/mail/root
在修改时间时,会出现这句话。下面会说到
题目:每天的上午7点到11点,每一个小时运行cmd命令
# 注意:在写小时的时候,一定要加上00,否则就表示没分钟 * 07-11 * * * CMD # 表示没分钟都运行 00 07-11 * * * CMD # 表示每个小时都运行
题目:每分钟把自己的名字 追加到/oldboy/oldboy.txt
依照上面的流程:命令----写入----检查
* * * * * echo `whoami` >> /oldboy/oldboy.txt
定时任务的书写流程总结
#1、命令行测试 #2、把命令放入脚本中(命令多的时候) #3、测试脚本是否可以使用 #4、写定时任务 #5、检查结果
定时任务九句箴言
01、定时任务命令之前要加一行注释
注:注释中写清楚备注信息,谁在什么时间做什么
02、在写定时任务的时候,使用脚本替代命令
注:超过两条命令都使用脚本
题目:每分钟显示当前系统的时间(年-月-日),追加到/tmp/time.log中
##01、命令 [root@learn-Linux001 ~]# date +%F 2019-01-30 ##02、脚本 [root@learn-Linux001 ~]# mkdir -p /server/scripts 将脚本都放在/server/scripts目录下 [root@learn-Linux001 ~]# vim /server/scripts/date.sh 创建脚本,写入命令 [root@learn-Linux001 ~]# sh /server/scripts/date.sh 2019-01-30 因为创建的文件没有执行权限(默认644),所以我们使用sh来执行 [root@learn-Linux001 ~]# sh /server/scripts/date.sh >>/tmp/date.log [root@learn-Linux001 ~]# cat /tmp/date.log 2019-01-30 测试脚本,成功 ##03、脚本写入定时任务 # print date to file by pizza at 20190128 18:50 * * * * * /bin/sh /server/scripts/date.sh >>/tmp/date.log 使用命令的绝对路径 ##04、检查(看日志,看结果) tail -f /etc/log/cron tail -f /tmp/date.log
03、定时任务中date命令%百分号
当我们在定时任务中,直接使用命令获取时间,得到的结果为空
通过查看日志,发现,执行的命令是date +
因为,%后面的内容内忽略了,如果一定要使用,可以带上撬棍()
* * * * * date +\%F-\%T >> /tmp/time.txt >&1
04、运行脚本一定要使用/bin/sh
在创建脚本的时候,以sh为后缀
05、把命令或者脚本的结果定向到文件中
定时任务中,命令或者脚本结果(正确或错误)定向到黑洞(>/dev/null 2>&1)或追加到文件中(>> /tmp/oldboy.txt 2>&1)
否则,就会导致故障
企业案例
如果没有上面所说的操作,很容易导致硬盘inode空间被占满,从而导致系统服务不正常
定时任务中,命令或者脚本的结果,没有定向到空或者文件中,系统会发邮件 #1、邮件的软件没有开启------大量的小文件堆积在/var/spool/postfix/maildrop/ ---inode满了 #2、邮件软件开启了------定时任务会不断的给root用户发邮件 you have new mail in /var/spool/mail/root #查看邮件服务开启没有? [root@learn-Linux001 ~]# /etc/init.d/postfix status master (pid 1592) is running...
06、避免不必要的程序及命令输出
tar zcf
tar zcvf 不可取
07、创建压缩包使用相对路径
切到目标目录的上一级打包目标
[root@learn-Linux001 ~]# cd / [root@learn-Linux001 /]# tar zcf /tmp/ser-$(date +%F).tar etc/services 或者 cd / && tar zcf /tmp/ser-$(date +%F).tar etc/services
08、定时任务脚本中的程序文件,尽量使用绝对路径
否则,可能会出现找不到命令的错误
因为,定时任务运行脚本的时候可以识别的PATH只有 /usr/bin 和 /bin
解决方法: #1、使用绝对路径 /sbin/ifconfig #2、在脚本开头重新定义一下PATH ## export PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin
用户的定时任务,默认要存放在当前用户的家目录
系统的定时任务,默认要存放在根目录下
09、系统与命令位置有关的环境变量问题
01)、定时任务运行脚本的时候可以识别的PATH只有 /usr/bin 和 /bin
02)、java环境变量故障案例
linux定时任务生产java服务无法执行问题案例http://oldboy.blog.51cto.com/2561410/1541515
补充:删除大量堆积小文件
创建环境
[root@learn-Linux001 oldboy]# touch {1..500000}.txt -bash: /bin/touch: Argument list too long # 数量太多,无法运行,使用下面的方法 [root@learn-Linux001 oldboy]# echo {1..500000}.txt|xargs touch
最后导致no space left on device
[root@learn-Linux001 ~]# df -h Filesystem Size Used Avail Use% Mounted on /dev/sda3 6.9G 1.5G 5.1G 22% / tmpfs 926M 0 926M 0% /dev/shm /dev/sda1 190M 35M 146M 19% /boot [root@learn-Linux001 ~]# df -hi Filesystem Inodes IUsed IFree IUse% Mounted on /dev/sda3 452K 452K 0 100% / tmpfs 232K 1 232K 1% /dev/shm /dev/sda1 50K 38 50K 1% /boot
是因为inode满了
[root@learn-Linux001 ~]# cd /oldboy/ [root@learn-Linux001 oldboy]# rm -f * -bash: /bin/rm: Argument list too long 直接删除失败 [root@learn-Linux001 oldboy]# ls |xargs rm -f
[root@learn-Linux001 oldboy]# ll
total 0 这样删除,成功(删除小文件)
可能会遇到更多的文件,这样也不能删除
解决办法是,筛选后进行批量删除
定时任务总结
待...