day23定时任务

今日内容

定时任务的基本概述

• 1.什么是定时任务？

  • 定点执行，某个job。

• 2.为什么要用定时任务？

  • 电商秒杀定点开启，定点关闭。
  • 定时备份
  • 定时清理
  • 时间同步
  • 日志切割（系统日志，定时任务）
  • 日志切割（程序产生的日志删除） -->实时推送到远端-->远端分析-->出图
  • 定时执行 5分钟--> 脚本（监控数据存货状态）
  • 定时爬取数据
  • 定时同步

• 3.定时任务使用情况？

  • 系统使用：日志切割（系统日志 定时任务）
  • 个人使用：定时备份 定时清理 时间同步

定时任务管理

• 1./etc/crontab中记载了时间周期的含义

SHELL=/bin/bash   #执行命令的解释器
PATH=/sbin:/bin:/usr/sbin:/usr/bin   #环境变量
MAILTO=root   #邮件发给谁

# For details see man 4 crontabs

# Example of job definition:
# .---------------- minute (0 - 59)   #分钟
# |  .------------- hour (0 - 23)  #小时
# |  |  .---------- day of month (1 - 31)  #日期
# |  |  |  .------- month (1 - 12) OR jan,feb,mar,apr ...  #月份
# |  |  |  |  .---- day of week (0 - 6) (Sunday=0 or 7) OR sun,mon,tue,wed,thu,fri,sat  #星期
# |  |  |  |  |
# *  *  *  *  * user-name  command to be executed

# * 表示任意的（分，时，日，月，周）时间都执行
# - 表示一个时间范围段 ，如5-7点
# ， 表示分割时间段，如6，0,4，表示周六，日，四
# /1 表示每隔n单位时间，如*/10 每十分钟

• 2.使用示例

00 02 * * * ls           #每天凌晨2点执行  
00 02 1 * * ls           #每月1日凌晨2点执行
00 02 14 2 * ls          #每年的2月14日的凌晨2点执行  
00 02 * * 7 ls           #每个周日凌晨2点执行
00 02 * 6 5 ls           #每年6月周五凌晨两点执行
00 02 14 * 7 ls          #每月14日或周日的凌晨2点都执行 
00 02 14 2 7 ls          #每年2月的14日或周日的凌晨2点都执行
*/10  02 * * * ls        #每天凌晨2点，每个10分钟执行
 * * * * *  ls           #每分钟执行
00 00 14 2 *  ls         #每年2月14日0点0分执行  
*/5 * * * *  ls          #每个5分钟执行一次
00 02 * 1,5,8 * ls       #每年1月，5月，8月的每天凌晨2点执行
00 02 1-8 * *  ls        #每月的1到8日的凌晨2点执行
0 21 * * * ls            #每天晚上9点执行
45 4 1,10,22 * * ls      #每月的1日，10日，22日的凌晨4点45分执行
45 4 1-10 * * ls         #每月1到10日的凌晨4点45分执行
3,15 8-11 */2 * * ls     #每隔两天的上午8时到11时的第3和第15分钟执行
0 23-7/1 * * * ls        #晚上十一点到7点之间每隔1小时执行
15 21 * * 1-5 ls         #周一到周五下午9点的15分执行

• 3.使用crontab编写cron定时任务

选项	含义
-e	编辑定时任务
-l	查看定时任务
-r	删除定时任务
-u	指定其他用户

PS：[root@oldboy~]# ls /var/spool/cron/ #定时任务配置文件

3.定时任务编写实践

• 1.每5分钟同步一次时间

#同步时间
[root@oldboy~]# ntpdate ntp1.aliyun.com

#配置定时任务
[root@oldboy~]# crontab -l
# 每5分钟同步一次时间
* * * * *  /usr/sbin/ntpdate ntpdate ntp1.aliyun.com &>/dev/null

• 2.每天下午3,5点每隔半小时执行一次sync命令

[root@oldboy~]# crontab -l
# 每天下午3，5点，每隔半小时执行一次sync命令
*/30 15,17 * * * /usr/bin/sync &>/dev/null

• 3.每天凌晨三点做一次备份，备份/etc目录到/backup下面

1. 将备份命令写入一个脚本中。
2. 每天备份文件名要求格式：2019-08-026_hostname_etc.tar.gz
3. 在执行计划任务时，不要输出任务信息
4. 存放备份内容的目录要求只保留三天的数据

#1.将命令写入一个脚本中
[root@oldboy~]# vim backup.sh

#1.创建/backup目录
mkdir -p /backup

#2.拷贝/etc/至/backup目录
tar czf /backup/$(date +%F)_$(hostname)_etc.tar.gz /etc

#3.只保留3天的数据
find /backup -type f -name "*.etc.tar.gz" -mtime +3 -exec rm -f {} \;

#2.配置定时任务
[root@oldboy~]# crontab -l
#每天凌晨三点做一次备份，备份/etc目录到/backup下面
00 3 * * * bash /root/backup.sh &>/dev/null 

• 4.crond注意事项
  1. 给定时任务注释
  2. 将需要定期执行的任务写入shell脚本中，避免直接使用命令无法执行的情况tar date
  3. 定时任务的结尾一定要有&>/dev/null或者将结果追加重定向>>/tmp/date.log 文件
  4. 注意有些命令是无法成功执行的echo "123" >> /tmp/test.log &>/dev/null
  5. 如果一定要使用命令，命令必须使用绝对路径

*5. 误删除定时任务

• 通过对比定时任务的日志文件修复
  [root@oldboy~]# cat /var/log/cron
• 定时的备份/var/spool/cron/{usernmae}
  6.crond如何拒绝某个用户使用

#1.使用root将需要拒绝的用户加入/etc/cron.deny
[root@xuliangwei ~]# echo "xuliangwei" >> /etc/cron.deny

#2.登陆该普通用户，测试是否能编写定时任务
[oldboy@xuliangwei ~]$ crontab -e
You (xuliangwei) are not allowed to use this program (crontab)
See crontab(1) for more information

4.计划任务如何调试

• 1.crond调试

  1. 调整任务每分钟执行的频率, 以便做后续的调试。
  2. 如果使用cron运行脚本，请将脚本执行的结果写入指定日志文件, 观察日志内容是否正常。
  3. 命令使用绝对路径, 防止无法找到命令导致定时任务执行产生故障。
  4. 通过查看/var/log/cron日志，以便检查我们执行的结果，方便进行调试。

• 2.crond编写思路

  • 1.手动执行命令，然后保留执行成功的结果。
  • 2.编写脚本
    脚本需要统一路径/scripts
    脚本内容复制执行成功的命令(减少每个环节出错几率)
    脚本内容尽可能的优化, 使用一些变量或使用简单的判断语句
    脚本执行的输出信息可以重定向至其他位置保留或写入/dev/null
  • 3.执行脚本
    使用bash命令执行, 防止脚本没有增加执行权限(/usr/bin/bash)
    执行脚本成功后，复制该执行的命令，以便写入cron
  • 4.编写计划任务
    加上必要的注释信息, 人、时间、任务
    设定计划任务执行的周期
    粘贴执行脚本的命令(不要手敲)
  • 5.调试计划任务
    增加任务频率测试
    检查环境变量问题
    检查crond服务日志