无论你学习什么开发语言,Python 也好,SQL 也罢,我们都要和其他开发语言配合使用。Linux 语言是最常用的配合语言。
crontab 命令用于设置周期性被执行的指令。该命令从标准输入设备读取指令,并将其存放于“crontab”文件中,以供之后读取和执行。喜欢记得收藏、点赞、关注。
技术沟通、数据、资料文末获取。
可以使用crontab定时处理离线任务,比如每天凌晨2点更新数据等,经常用于系统任务调度。
一般Linux系统中都会装有crontab
,如果没有安装可以使用包管理工具安装:
# vixie-cron 软件包是 cron 的主程序
yum -y install vixie-cron
yum -y install crontabs
crontab
服务的启动和关闭命令如下:
service crond start # 启动服务
service crond stop # 关闭服务
service crond restart # 重启服务
service crond reload # 重新载入配置
service crond status # 查看crontab服务状态
# 可以使用下面的命令加入开机启动
chkconfig --level 345 crond on
crontab
全局任务调度配置在如下的目录:
cron.d/
cron.daily/
cron.deny
cron.hourly/
cron.monthly/
crontab
cron.weekly/
cron.daily
是每天执行一次的job
cron.weekly
是每个星期执行一次的job
cron.monthly
是每月执行一次的job
cron.hourly
是每个小时执行一次的job
cron.d
是系统自动定期需要做的任务
crontab
是设定定时任务执行文件
cron.deny
文件就是用于控制不让哪些用户使用Crontab的功能
每个用户都有自己的crontab
配置文件,使用crontab -e
命令进行编辑。保存后系统会自动存放与/var/spool/cron/
目录中,文件以用户名命名。
linux的crontab
服务每隔一分钟去读取一次/var/spool/cron
,/etc/crontab
,/etc/cron.d
下面所有的内容。另外,Linux 系列面试题和答案我都整理好了,关注公众号Java技术栈,回复:面试,可以在线阅读。
crontab命令一览:
crontab -e
: 编辑当前用户的定时任务列表
crontab -l
: 查看当前用户的定时任务列表
crontab -r
: 删除当前用户的定时任务列表
crontab每一条记录为一个定时任务,定时人遵循相应的定义规则。
其中前面的6个星号表示的含义如下:
minute
:表示分钟,可以是从0到59之间的任何整数。
hour
:表示小时,可以是从0到23之间的任何整数。
day
:表示日期,可以是从1到31之间的任何整数。
month
:表示月份,可以是从1到12之间的任何整数。
week
:表示星期几,可以是从0到7之间的任何整数,这里的0或7代表星期日。
command
:要执行的命令,可以是系统命令,也可以是自己编写的脚本文件。
每一个星号部分可用下面的特殊符号:
星号(*):通配符匹配,代表所有可能的值。
逗号(,):可以用逗号隔开的值指定一个列表范围,例如,“1,2,5,7,8,9”。
中杠(-):可以用整数之间的中杠表示一个整数范围,例如“2-6”表示“2,3,4,5,6”。
正斜线(/):可以用正斜线指定时间的间隔频率,例如“0-23/2”表示每两小时执行一次。同时正斜线可以和星号一起使用,例如*/10,如果用在minute字段,表示每十分钟执行一次。
下面列举常用的时间频次示例。
00 05 * * * : 每天凌晨5点执行
20 12 1,10,20 * * : 每个月的1号,10号,20号的12:30执行
10 1 * * 6,0 : 表示每周六、周日的1:10分执行
0,30 18-23 * * * : 每天18:00至23:00之间每隔30分钟执行
0 23-7/1 * * * : 晚上11点到早上7点之间,每隔一小时执行
0 6-12/3 * 10 * : 每年10月的每天早上6点到12点每隔3个小时执行一次
30 17 * * 1-5 : 周一到周五下午5点30分执行一次
0 */2 * * * :每两个小时执行一次
比如我们需要每天23点58分的时候执行一个更新数据的shell脚本,可以用crontab -e
命令在最后添加一行:
58 23 * * * sh /home/work/update.sh
在上面更新数据定时任务的实例中,如果执行update.sh的时候有错误信息输出,会输出到哪儿呢?
在没有配置输出重定向的时候,定时任务会见错误输出到下面的文件:/var/log/mail/{$user}
,这是很不好的,我们往往需要把不同的脚本输出到不同的日志文件,方便查看脚本的执行情况,这个时候需要使用输出重定向。
58 23 * * * sh /home/work/update.sh >> /home/work/log/update.log 2>&1
Linux中使用0-3
作为文件描述符来表示标准流。
名称 | 类型 | 文件描述符 | 操作 |
---|---|---|---|
stdin 标准输入 | standard input | 0 | < ,<< |
stdout 标准输出 | standard output | 1 | > ,>> |
stderr 标准错误输出 | standard error output | 2 | 2> ,2>> |
在上面的定时任务脚本中,update.sh
后面的>>
表示将输出追加到update.log
文件中,2>&1
表示标准错误输出重定向等同于标准输出。
推荐阅读:Linux 知识大全。
nohup
有时候我们还会看到在定时任务脚本前面有一个nohup
的命令,该命令用于指定后面的脚本忽略输入。
58 23 * * * nohup sh /home/work/update.sh >> /home/work/log/update.log 2>&1
&
无论是在控制台直接执行,还是在定时任务脚本中,我们在某一条命令的最后面加上&
符号,表示当前命令在后台运行,不占用控制台。
58 23 * * * nohup sh /home/work/update.sh >> /home/work/log/update.log 2>&1 &
这里需要注意,如果执行的命令有等待输入的交互,把这个命令使用&
放在后台运行时,它会一直等待输入,但是有没有输入,就卡住不动了。
再回顾上面的更新任务,它是将每一天的运行结果都重定向到update.log
文件,如果输出比较多,我们就需要每一天输出的不同的文件,可以通过在输出目录中指定日期用来分割。如下:
58 23 * * * nohup sh /home/work/update.sh >> /home/work/log/`update_"date +\%Y\%m\%d".log` 2>&1 &
# 或者下面的形式
58 23 * * * nohup sh /home/work/update.sh >> "/home/work/log/update_"date +\%Y\%m\%d".log" 2>&1 &
这里使用date
函数,需要注意的是,crontab里面的脚本命令和直接在命令行运行的脚本可能是不一样的,尤其是date
函数中的%
需要转义。
可以直接在命令行运行下面命令:
sh /home/work/update.sh >> /home/work/log/update_`date +"%Y%m%d".log` 2>&1 &
达到和定时任务里面相同的效果,都是输出到update_20201120.log
的文件。
但是如果直接在crontab中这样配置,则无法识别,不会执行该定时任务。下面的crontab任务是不会执行的,date函数将会报错。
58 23 * * * nohup sh /home/work/update.sh >> /home/work/log/`update_"date +%Y%m%d".log` 2>&1 &
李宏毅《机器学习》国语课程(2022)来了
有人把吴恩达老师的机器学习和深度学习做成了中文版
上瘾了,最近又给公司撸了一个可视化大屏(附源码)
如此优雅,4款 Python 自动数据分析神器真香啊
梳理半月有余,精心准备了17张知识思维导图,这次要讲清统计学
香的很,整理了20份可视化大屏模板
技术交流、求职内推、干货汇总、与 3000+来自阿里、北大、清华、中科院、CMU、腾讯、百度等名校名企开发者互动交流~
目前开通了技术交流群,群友已超过3000人,添加时最好的备注方式为:来源+兴趣方向,方便找到志同道合的朋友