前言php
crontab是Unix和Linux用于设置周期性被执行的指令,是互联网很经常使用的技术,不少任务都会设置在crontab循环执行,若是不使用crontab,那么任务就是常驻程序,这对你的程序要求比较高,一个要求你的程序是24X7小时不宕机,一个是 要求你的调度程序比较可靠,实际工做中,90%的程序都没有必要花这么多时间和精力去解决上面的两个问题的,只须要写好本身的业务逻辑,经过crond这 个工业级程序去调度就好了,crond的可靠性,健壮性,你们应该是毫无疑问的。html
crontab简易入门python
假设我要设置一个任务,每分钟就要作一个数据同步,这个同步脚本的路径是/home/blue/do/rsyncfile.sh,那么我能够在这么配置,使用blue用户,在终端输入linux
1 |
crontab -e |
2 |
# 此时会进入 vi 的编辑画面让您编辑工做!注意到,每项工做都是一行。 |
3 |
#分 时 日 月 周 |<==============任务的完整命令行 |
4 |
* * * * * /home/blue/ do /rsyncfile.sh |
默认状况下,任何使用者只要不被列入 /etc/cron.deny 当中,那么他就能够直接下达『 crontab -e 』去编辑本身的例行性命令了!整个过程就如同上面提到的,会进入 vi 的编辑画面, 而后以一个工做一行来编辑,编辑完毕以后输入『 :wq 』储存后离开 vi 就能够了! nginx
假如咱们须要修改成每5分钟运行数据同步的脚本,那么一样使用 crontab -e 进入编辑:数据库
1 |
*/5 * * * * /home/blue/ do /rsyncfile.sh |
假如服务器出了问题,有一天的数据没有同步,因而咱们就须要补数据了,假设这个补数据的脚本是/home/blue/do /rsyncfile_day.sh,可是白天是高峰期,晚上用户很少,是低峰期,咱们补数据会占用大量带宽,尤为是白天,会影响正常业务,因此通常咱们 可让补数据任务在凌晨2点开始跑,那么一样使用crontab -e 进入编辑:bash
1 |
0 2 1 4 * /home/blue/ do /rsyncfile_day.sh |
这样,在4月1号凌晨2点0分就会开始启动咱们的补数据的脚本了。服务器
同步数据,在互联网公司是再日常不过的任务了,这里你们能够看到crontab的魅力所在了,只须要写最简单的业务逻辑,把调度交给crond作,就完成了一个可靠性很高的一项任务了,若是要本身去额外写这种调度程序,不知道要花多少精力才能作到可靠稳定。网络
crontab的语法app
1 |
crontab [-u username] [-l|-e|-r] |
2 |
选项与参数: |
3 |
-u :只有 root 才能进行这个任务,亦即帮其余使用者建立/移除 crontab 工做排程; |
4 |
-e :编辑 crontab 的工做内容 |
5 |
-l :查阅 crontab 的工做内容 |
6 |
-r :移除全部的 crontab 的工做内容,若仅要移除一项,请用 -e 去编辑 |
查询使用者目前的 crontab 内容:
1 |
crontab -l |
2 |
*/5 * * * * /home/blue/ do /rsyncfile.sh |
3 |
0 2 1 4 * /home/blue/ do /rsyncfile_day.sh |
清空使用者目前的 crontab:
1 |
crontab -r |
2 |
crontab -l |
3 |
no crontab for blue |
若是你想删除当前用户的某一个crontab任务,那么使用crontab -e进入编辑器,再删除对应的任务。
crontab的限制
/etc/cron.allow:将可使用 crontab 的账号写入其中,若不在这个文件内的使用者则不可以使用 crontab;
/etc/cron.deny:将不可使用 crontab 的账号写入其中,若未记录到这个文件当中的使用者,就可使用 crontab 。
以优先顺序来讲, /etc/cron.allow 比 /etc/cron.deny 要优先, 而判断上面,这两个文件只选择一个来限制而已,所以,建议你只要保留一个便可, 省得影响本身在配置上面的判断!通常来讲,系统默认是保留 /etc/cron.deny ,你能够将不想让他运行 crontab 的那个使用者写入 /etc/cron.deny 当中,一个账号一行!
/etc/crontab配置文件讲解
『 crontab -e 』是针对使用者的 cron 来设计的,若是是『系统的例行性任务』时,就要编辑 /etc/crontab 这个文件。
那就是 crontab -e 这个 crontab 实际上是 /usr/bin/crontab 这个运行档,可是 /etc/crontab 但是一个『纯文字档』,必须用 root 的身份编辑一下这个文件。
首先咱们要来看看crontab的文件内容
01 |
cat /etc/ crontab |
02 |
03 |
# /etc/crontab: system-wide crontab |
04 |
# Unlike any other crontab you don't have to run the `crontab' |
05 |
# command to install the new version when you edit this file |
06 |
# and files in /etc/cron.d. These files also have username fields, |
07 |
# that none of the other crontabs do. |
08 |
09 |
SHELL=/bin/sh |
10 |
PATH=/usr/ local /sbin:/usr/ local /bin:/sbin:/bin:/usr/sbin:/usr/bin |
11 |
12 |
# m h dom mon dow user command |
13 |
17 * * * * root cd / && run-parts --report /etc/ cron .hourly |
14 |
25 6 * * * root test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/ cron .daily ) |
15 |
47 6 * * 7 root test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/ cron .weekly ) |
16 |
52 6 1 * * root test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/ cron .monthly ) |
这个文件与将刚刚咱们下达 crontab -e 的内容几乎彻底如出一辙!只是有几个地方不太相同
1 |
PATH=....: |
这里就是输入运行档的搜寻路径!使用默认的路径配置就已经很足够了!
1 |
17 * * * * root cd / && run-parts --report /etc/ cron .hourly: |
这个 /etc/crontab 里面预配置义出四项工做任务,分别是每小时、天天、每周及每月分别进行一次的工做! 可是在五个栏位后面接的并非命令,而是一个新的栏位,那就是『运行后面那串命令的身份』为什么!这与使用者的 crontab -e 不相同。由於使用者本身的 crontab 并不须要指定身份,但 /etc/crontab 里面固然要指定身份啦!以上表的内容来讲,系统默认的例行性工做是以 root 的身份来进行的。
那么后面那串命令是什么呢?你可使用『 which run-parts 』搜寻看看,其实那是一个 bash script 啦!若是你直接进入 /usr/bin/run-parts 去看看, 会发现这支命令会将后面接的『目录』内的全部文件捉出来运行!这也就是说『 若是你想让系统每小时主动帮你运行某个命令,将该命令写成 script,并将该文件放置到 /etc/cron.hourly/ 目录下便可』的意思!
如今你知道系统是如何进行他默认的一堆例行性工做排程了吗?若是你下达『 ll /etc/cron.daily 』就能够看到一堆文件, 那些文件就是系统提供的 script ,而这堆 scripts 将会在天天的凌晨 6:25 开始运行!
假设你如今要做一个目录,让系统能够每 2 分钟去运行这个目录下的全部能够运行的文件,你能够写下以下的这一行在 /etc/crontab 中:
1 |
*/2 * * * * root run-parts /etc/ cron .min |
固然罗, /etc/cron.min 这个目录是须要存在的喔!那若是我须要运行的是一个『程序』而已, 不须要用到一个目录呢?该如何是好?例如在侦测网络流量时,咱们但愿每五分钟侦测分析一次, 能够这样写:
1 |
*/5 * * * * root /bin/mrtg /etc/mrtg/mrtg.cfg |
如何!建立例行性命令很简单吧!若是你是系统管理员并且你的工做又是系统维护方面的例行任务时, 直接修改 /etc/crontab 这个文件便可喔!又便利,又方便管理呢!
crontab的原理
当使用者使用 crontab 这个命令来建立工做排程以后,该项工做就会被纪录到 /var/spool/cron/ 里面去了,并且是以账号来做为判别的喔!举例来讲, blue 使用 crontab 后, 他的工做会被纪录到 /var/spool/cron/blue 里头去!但请注意,不要使用 vi 直接编辑该文件, 由于可能因为输入语法错误,会致使没法运行 cron 喔!另外, cron 运行的每一项工做都会被纪录到 /var/log/cron 这个登陆档中,因此罗,若是你的 Linux 不知道有否被植入木马时,也能够搜寻一下 /var/log/cron 这个登陆档呢!
crond服务的最低侦测限制是『分钟』,因此『 cron 会每分钟去读取一次 /etc/crontab 与 /var/spool/cron 里面的数据内容 』,所以,只要你编辑完 /etc/crontab 这个文件,而且将他储存以后,那么 cron 的配置就自动的会来运行了!
备注:在 Linux 底下的 crontab 会自动的帮咱们每分钟从新读取一次 /etc/crontab 的例行工做事项,可是某些缘由或者是其余的 Unix 系统中,因为 crontab 是读到内存当中的,因此在你修改完 /etc/crontab 以后,可能并不会立刻运行, 这个时候请从新启动 crond 这个服务吧!『/etc/init.d/crond restart』 或 『service crond restart』
crontab的格式讲解
每项工做 (每行) 的格式都是具备六个栏位,这六个栏位的意义为:
表明意义 | 分钟 | 小时 | 日期(天) | 月份 | 周 | 命令 |
数字范围 | 0-59 | 0-23 | 1-31 | 1-12 | 0-7 | 呀就命令啊 |
比较有趣的是那个『周』喔!周的数字为 0 或 7 时,都表明『星期天』的意思!另外, 还有一些辅助的字符,大概有底下这些:
特殊字符 | 表明意义 |
*(星号) | 表明任什么时候刻都接受的意思!举例来讲,范例一内那个日、月、周都是 * , 就表明著『不论何月、何日的礼拜几的 12:00 都运行后续命令』的意思! |
,(逗号) | 表明分隔时段的意思。举例来讲,若是要下达的工做是 3:00 与 6:00 时,就会是:
时间参数仍是有五栏,不过第二栏是 3,6 ,表明 3 与 6 都适用! |
-(减号) | 表明一段时间范围内,举例来讲, 8 点到 12 点之间的每小时的 20 分都进行一项工做:
仔细看到第二栏变成 8-12 喔!表明 8,9,10,11,12 都适用的意思! |
/n(斜线) | 那个 n 表明数字,亦便是『每隔 n 单位间隔』的意思,例如每五分钟进行一次,则:
很简单吧!用 * 与 /5 来搭配,也能够写成 0-59/5 ,相赞成思! |
周与日月不可同时并存
另外一个须要注意的地方在於:『你能够分别以周或者是日月为单位做为循环,但你不可以使用「几月几号且为星期几」的模式工做』。 这个意思是说,你不能够这样编写一个工做排程:
1 |
30 12 11 9 5 root echo "just test" <==这是错误的写法 |
原本你觉得九月十一号且为星期五才会进行这项工做,无奈的是,系统可能会断定每一个星期五做一次,或每一年的 9 月 11 号分别进行,如此一来与你当初的规划就不同了~因此罗,得要注意这个地方!上述的写法是不对的!
CentOS下查看crontab执行历史记录
在crontab中添加了定时任务,但发现没有获得指望的结果,于是怀疑是crontab没有执行相应的任务,但怎么定位crontab是否执行呢?
这就须要查看crontab的执行历史记录,具体位置以下:
1 |
cd /var/log |
2 |
tail -100 cron |
在cron文件中便可查阅已经操做过的相关定时任务。
参考资料:
http://vbird.dic.ksu.edu.tw/linux_basic/0430cron_3.php
http://baike.baidu.com/view/1229061.htm
1、Crontab 格式说明
咱们能够用 crontab -e 添加要执行的命令。 命令执行的结果,不管是标准输出仍是错误输出,都将以邮件形式发给用户。
添加的命令必须以以下格式:
* * * * * /command path
前五个字段能够取整数值,指定什么时候开始工做,第六个域是字符串,即命令字段,其中包括了crontab调度执行的命令。 各个字段之间用spaces和tabs分割。
前5个字段分别表示:
分钟:0-59
小时:1-23
日期:1-31
月份:1-12
星期:0-6(0表示周日)
还能够用一些特殊符号:
*: 表示任什么时候刻
,: 表示分割
-:表示一个段,如第二端里: 1-5,就表示1到5点
/n : 表示每一个n的单位执行一次,如第二段里,*/1, 就表示每隔1个小时执行一次命令。也能够写成1-23/1.
一些示例:
00 8,12,16 * * * /data/app/scripts/monitor/df.sh
30 2 * * * /data/app/scripts/hotbackup/hot_database_backup.sh
10 8,12,16 * * * /data/app/scripts/monitor/check_ind_unusable.sh
10 8,12,16 * * * /data/app/scripts/monitor/check_maxfilesize.sh
10 8,12,16 * * * /data/app/scripts/monitor/check_objectsize.sh
43 21 * * * 21:43 执行
15 05 * * * 05:15 执行
0 17 * * * 17:00 执行
0 17 * * 1 每周一的 17:00 执行
0,10 17 * * 0,2,3 每周日,周二,周三的 17:00和 17:10 执行
0-10 17 1 * * 毎月1日从 17:00到7:10 毎隔1分钟 执行
0 0 1,15 * 1 毎月1日和 15日和 一日的 0:00 执行
42 4 1 * * 毎月1日的 4:42分 执行
0 21 * * 1-6 周一到周六 21:00 执行
0,10,20,30,40,50 * * * * 每隔10分 执行
*/10 * * * * 每隔10分 执行
* 1 * * * 从1:0到1:59 每隔1分钟 执行
0 1 * * * 1:00 执行
0 */1 * * * 毎时0分 每隔1小时 执行
0 * * * * 毎时0分 每隔1小时 执行
2 8-20/3 * * * 8:02,11:02,14:02,17:02,20:02 执行
30 5 1,15 * * 1日 和 15日的 5:30 执行
2、& 后台执行命令
当在前台运行某个做业时,终端被该做业占据;而在后台运行做业时,它不会占据终端。可使用&命令把做业放到后台执行。
如:
1 |
30 2 * * * /data/app/scripts/hotbackup/hot_database_backup.sh & |
在后台运行做业时要小心:须要用户交互的命令不要放在后台执行,由于这样你的机器就会在那里傻等。
不过,做业在后台运行同样会将结果输出到屏幕上,干扰你的工做。若是放在后台运行的做业会产生大量的输出,最好使用下面的方法把它的输出重定向到某个文件中:
如:
1 |
command >out. file 2>&1 & |
在这个例子中,2>&1表示全部的标准输出和错误输出都将被重定向到一个叫作out.file 的文件中。
3、2>&1 含义
先看一个例子:
1 |
0 2 * * * /u01/ test .sh >/dev/null 2>&1 & |
这句话的意思就是在后台执行这条命令,并将错误输出2重定向到标准输出1,而后将标准输出1所有放到/dev/null 文件,也就是清空。
在这里有有几个数字的意思:
0表示 键盘输入
1表示 标准输出
2表示 错误输出
咱们也能够这样写:
0 2 * * * /u01/test.sh 1>/u01/out.file &
0 2 * * * /u01/test.sh 2>/u01/out.file &
0 2 * * * /u01/test.sh 2>/u01/out.file 2>&1 &
将tesh.sh 命令输出重定向到out.file, 即输出内容不打印到屏幕上,而是输出到out.file文件中。
2>&1 是将错误输出重定向到标准输出。 而后将标准输入重定向到文件out.file。
&1 表示的是文件描述1,表示标准输出,若是这里少了&就成了数字1,就表示重定向到文件1。
& :后台执行
测试:
ls 2>1 : 不会报没有2文件的错误,但会输出一个空的文件1;
ls xxx 2>1: 没有xxx这个文件的错误输出到了1中;
ls xxx 2>&1: 不会生成1这个文件了,不过错误跑到标准输出了;
ls xxx >out.txt 2>&1 == ls xxx 1>out.txt 2>&1: 由于重定向符号>默认是1,这句就把错误输出和标准输出都传到out.txt 文件中。
4、2>&1写在后面的缘由
格式:command > file 2>&1 == command 1> file 2>&1
首先是command > file将标准输出重定向到file中, 2>&1 是标准错误拷贝了标准输出,也就是一样被重定向到file中,最终结果就是标准输出和错误都被重定向到file中。
若是改为: command 2>&1 >file
2>&1 标准错误拷贝了标准输出的行为,但此时标准输出仍是在终端。>file 后输出才被重定向到file,但标准错误仍然保持在终端。
延伸阅读:
Shell标准输出、标准错误 >/dev/null 2>&1
如何让Linux定时任务crond以秒为单位执行(如每隔3秒)
经验教训:
打算在服务器上 天天晚上23:00 定时执行Python脚本,去备份MySql数据库,命令以下:
1 |
* 23 * * * python / var /www/html/crontab_python/back_db.py >/dev/null 2>&1 |
结果呢,每次备份都产生了 60份 备份文件,仔细查看定时任务命令,发如今“分”的位置上,少加了个“0”,由于“*”表示该位置的任何一个值,修改以下:
1 |
0 23 * * * python /var/www/html/crontab_python/back_db.py >/dev/null 2>&1 |
0 4 * * * /usr/local/php/bin/php /usr/local/nginx/www/backup-db/backup_db.php 172.16.8.26 >/dev/null 2>&10 4 * * * /usr/local/php/bin/php /usr/local/nginx/www/backup-db/backup_db.php 172.16.10.151 >/dev/null 2>&1