crond是linux下用来周期性的执行某种任务或等待处理某些事件的一个守护进程,与windows下的计划任务相似,当安装完成操做系统后,默认会安装此服务工具,而且会自动启动crond进程,crontab依赖的服务就是crond,crond进程每分钟会按期检查是否有要执行的任务,若是有要执行的任务,则自动执行该任务。这个crond定时任务服务就至关于咱们生活中的闹钟!java
因为crond 是Linux的内置服务,但它不自动起来,能够用如下的方法启动、关闭这个服务:node
1
2
3
4
5
6
7
8
|
/sbin/service
crond start
//
启动服务
/sbin/service
crond stop
//
关闭服务
/sbin/service
crond restart
//
重启服务
/sbin/service
crond reload
//
从新载入配置
或者使用下面的命令:
/etc/init
.d
/crond
start
/etc/init
.d
/crond
restart
/etc/init
.d
/crond
stop
|
设置crond服务开机自启动:linux
1
|
[root@gin tmp]
# chkconfig crond on
|
特殊须要:crond服务搞不定了,通常工做中写脚本守护程序执行:web
1
2
3
4
5
6
|
[root@gin tmp]
# cat cron.sh
while
true
do
echo
"I am Bruce Lee"
sleep
1
done
|
程序文件:程序代码组成,可是没有在计算机内执行。当前没有执行。shell
守护程序或守护进程:进程就是所算机中正在执行的程序,守护进程就是保护正在一直运行的程序。apache
Linux下的任务调度分为两类,系统任务调度和用户任务调度。vim
系统周期性所要执行的工做,好比写缓存数据到硬盘、日志清理等。在/etc目录下有一个crontab文件,这个就是系统任务调度的配置文件。windows
/etc/crontab文件包括下面几行:缓存
1
2
3
4
5
6
7
8
9
|
SHELL=
/bin/bash
PATH=
/sbin
:
/bin
:
/usr/sbin
:
/usr/bin
MAILTO=root
HOME=/
# run-parts
01 * * * * root run-parts
/etc/cron
.hourly
02 4 * * * root run-parts
/etc/cron
.daily
22 4 * * 0 root run-parts
/etc/cron
.weekly
42 4 1 * * root run-parts
/etc/cron
.monthly
|
前四行是用来配置crond任务运行的环境变量bash
第一行SHELL变量指定了系统要使用哪一个shell,这里是bash
第二行PATH变量指定了系统执 行命令的路径
第三行MAILTO变量指定了crond的任务执行信息将经过电子邮件发送给root用户,若是MAILTO变量的值为空,则表示不发送任 务执行信息给用户
第四行的HOME变量指定了在执行命令或者脚本时使用的主目录。第六至九行表示的含义将在下个小节详细讲述。这里不在多说。
用户按期要执行的工做,好比用户数据备份、定时邮件提醒等。用户可使用 crontab 工具来定制本身的计划任务。全部用户定义的crontab 文件都被保存在 /var/spool/cron目录中。其文件名与当前用户名一致。
严格的说,linux系统下的定时任务软件还真很多,例如:at , crontab , anacron。
at:适合仅执行一次就结束的调度任务命令,如:某天晚上须要处理一个任务,仅仅是这一天的晚上,属于突发性的工做任务。要执行at命令,还须要启动一个名为atd的服务才行。在生产环境中此须要会不多用到。所以,建议不要深刻研究!
提示:
1:咱们所说的crond服务是运行的程序,而crontab命令用户用来设置定时规则的命令
2:crond服务是企业生产工做中经常使用的重要服务,at和anacron不多使用,能够忽略
3:几乎每一个服务器都会用到crond服务
crontab经常使用的使用格式有以下两种:
1
2
|
crontab
[-u user] [
file
]
crontab
[-u user] [-e|-l|-r |-i]
|
选项含义以下:
参数名称 |
含义 |
指定示例 |
-l |
显示用户crontab文件内容,l即list |
crontab -l |
-e |
编辑某个用户的crontab文件内容。若是不指定用户,则表示编辑当前用户的crontab文件。 |
crontab -e |
-i |
在删除用户的crontab文件时给确认提示。 |
crontab -ri |
-r |
从/var/spool/cron目录中删除某个用户的crontab文件,不指定用户,则删除当前用户的crontab文件。 |
crontab -r |
-u |
用来设定某个用户的crontab服务,此参数通常由root用户来运行 |
crontab -u root -l |
经常使用的选项命令为 l and e!crontab -e 至关于 vi /var/spool/cron/root ; crontab -l 至关于 cat /var/spool/cron/root
使用者权限文件:
文件 |
说明 |
/etc/cron.deny |
该文件中所列用户不容许使用crontab命令 |
/etc/cron.allow |
该文件中所列用户容许使用crontab命令 |
/var/spool/cron/ |
全部用户crontab文件存放的目录,以用户名命令 |
用户所创建的crontab文件中,每一行都表明一项任务,每行的每一个字段表明一项设置,它的格式共分为六个字段,前五段是时间设定段,第六段是要执行的命令段,格式以下:
1
|
minute hour day month week
command
|
其中:
1
2
3
4
5
6
|
* minute: 表示分钟,能够是从0到59之间的任何整数。
* hour:表示小时,能够是从0到23之间的任何整数。
* day:表示日期,能够是从1到31之间的任何整数。
* month:表示月份,能够是从1到12之间的任何整数。
* week:表示星期几,能够是从0到7之间的任何整数,这里的0或7表明星期日。
*
command
:要执行的命令,能够是系统命令,也能够是本身编写的脚本文件。
|
在以上各个字段中,还可使用如下特殊字符:
1
2
3
4
|
* 星号(*):表明全部可能的值,例如month字段若是是星号,则表示在知足其它字段的制约条件后每个月都执行该命令操做。
* 逗号(,):能够用逗号隔开的值指定一个列表范围,例如,“1,2,5,7,8,9”
* 中杠(-):能够用整数之间的中杠表示一个整数范围,例如“2-6”表示“2,3,4,5,6”
* 正斜线(/):能够用正斜线指定时间的间隔频率,例如“0-23
/2
”表示每两小时执行一次。同时正斜线能够和星号一块儿使用,例如*
/10
,若是用在minute字段,表示每十分钟执行一次。
|
1
|
0 *
/3
* * *
/usr/local/apache2/apachectl
restart
|
#表示每隔3个小时重启apache服务一次。
1
|
30 3 * * 6
/webdata/bin/backup
.sh
|
#表示每周六的3点30分执行/webdata/bin/backup.sh脚本的操做。
1
|
0 0 1,20 * *
fsck
/dev/sdb8
|
#表示每月的1号和20号检查/dev/sdb8磁盘设备。
1
|
10 5 *
/5
* *
echo
""
>
/usr/local/apache2/log/access_log
|
#表示每月的5号、10号、15号、20号、25号、30号的5点10分执行清理apache日志操做。
可用crontab -e命令来编辑,编辑的是/var/spool/cron下对应用户的cron文件,也能够直接修改/etc/crontab文件
具体格式以下:
1
2
3
4
5
6
7
8
9
|
Minute Hour Day Month Dayofweek
command
分钟 小时 天 月 天每星期 命令
每一个字段表明的含义以下:
Minute 每一个小时的第几分钟执行该任务
Hour 天天的第几个小时执行该任务
Day 每个月的第几天执行该任务
Month 每一年的第几个月执行该任务
DayOfWeek 每周的第几天执行该任务
Command 指定要执行的程序
|
在这些字段里,除了“Command”是每次都必须指定的字段之外,其它字段皆为可选字段,可视须要决定。对于不指定的字段,要用“*”来填补其位置。
举例以下:
1
2
3
4
5
|
5 * * * *
ls
指定每小时的第5分钟执行一次
ls
命令
30 5 * * *
ls
指定天天的 5:30 执行
ls
命令
30 7 8 * *
ls
指定每个月8号的7:30分执行
ls
命令
30 5 8 6 *
ls
指定每一年的6月8日5:30执行
ls
命令
30 6 * * 0
ls
指定每星期日的6:30执行
ls
命令[注:0表示星期天,1表示星期1,
|
以此类推,也能够用英文来表示,sun表示星期天,mon表示星期一等。
1
2
3
4
|
30 3 10,20 * *
ls
每个月10号及20号的3:30执行
ls
命令[注:“,”用来链接多个不连续的时段
25 8-11 * * *
ls
天天8-11点的第25分钟执行
ls
命令[注:“-”用来链接连续的时段
*
/15
* * * *
ls
每15分钟执行一次
ls
命令 [即每一个小时的第0 15 30 45 60分钟执行
ls
命令
30 6 *
/10
* *
ls
每月中,每隔10天6:30执行一次
ls
命令[即每个月的一、十一、2一、31日是的6:30执行一次
ls
命令。
|
天天7:50以root 身份执行/etc/cron.daily目录中的全部可执行文件
1
|
50 7 * * * root run-parts
/etc/cron
.daily [ 注:run-parts参数表示,执行后面目录中的全部可执行文件。
|
1
2
|
分 小时 日 月 星期 命令
0-59 0-23 1-31 1-12 0-6
command
(取值范围,0表示周日通常一行对应一个任务)
|
记住几个特殊符号的含义:
1
2
3
4
|
“*”表明取值范围内的数字,
“/”表明”每”,
“-”表明从某个数字到某个数字,
“,”分开几个离散的数字
|
1:
30 30,12 * * * /bin/sh /scripts/andy.sh
在本例中,该定时任务的意思就是天天凌晨3点30分和中午12点30分执行/scripts/andy.sh
2:
30 */6 * * * /bin/sh /scripts/andy.sh
每隔6个小时的半点时刻执行后面的脚本任务
3:
30 8-18/2 * * * /bin/sh /scripts/andy.sh
8点到18点中每隔2小时的30分执行后面的脚本任务(也就是天天的8点半,10点半,12点半,14点半,16点半,18点半)
4:
45 4 1,10,22 * * /application/apache/bin/apachectl graceful
每个月的1,10,22日的凌晨4:45分重启apache
5:
* 23,00-07/1 * * * /application/apache/bin/apachectl gracefull
上面的例子并不表示晚上23点和早上0-7点之间每隔一小时重启apache
提示:以上结果是不规范的,也是不对的。
以上的定时任务的第一列为*,表示每分都执行任务即晚上23点和早上0-7点之间每隔一小时的每分都重启apache
有时咱们建立了一个crontab,可是这个任务却没法自动执行,而手动执行这个任务却没有问题,这种状况通常是因为在crontab文件中没有配置环境变量引发的。
在crontab文件中定义多个调度任务时,须要特别注意的一个问题就是环境变量的设置,由于咱们手动执行某个任务时,是在当前shell环境下进行的, 程序固然能找到环境变量,而系统自动执行任务调度时,是不会加载任何环境变量的,所以,就须要在crontab文件中指定任务运行所需的全部环境变量,这样,系统执行任务调度时就没有问题了。
每条任务调度执行完毕,系统都会将任务输出信息经过电子邮件的形式发送给当前系统用户,这样日积月累,日志信息会很是大,可能会影响系统的正常运行,所以,将每条任务进行重定向处理很是重要。
例如,能够在crontab文件中设置以下形式,忽略日志输出:
1
|
0 *
/3
* * *
/usr/local/apache2/apachectl
restart >
/dev/null
2>&1
|
“/dev/null 2>&1”表示先将标准输出重定向到/dev/null,而后将标准错误重定向到标准输出,因为标准输出已经重定向到了/dev/null,所以标准错误也会重定向到/dev/null,这样日志输出问题就解决了。
为crontab中的任务增长本身的日志,这样出错后,比较容易看到缘由。
1
|
0 6 * * * $HOME
/for_crontab/createTomorrowTables
>> $HOME
/for_crontab/mylog
.log 2>&1
|
把错误输出和标准输出都输出到mylog.log中。
注意:不要写成
1
|
0 6 * * * $HOME
/for_crontab/createTomorrowTables
2>&1 >> $HOME
/for_crontab/mylog
.log
|
不然就输出到标准输出了
系统级任务调度主要完成系统的一些维护操做,用户级任务调度主要完成用户自定义的一些任务,能够将用户级任务调度放到系统级任务调度来完成(不建议这么作),可是反过来却不行,root用户的任务调度操做能够经过“crontab –uroot –e”来设置,也能够将调度任务直接写入/etc/crontab文件,须要注意的是,若是要定义一个定时重启系统的任务,就必须将任务放到/etc /crontab文件,即便在root用户下建立一个定时重启系统的任务也是无效的。
(1)增长执行任务频率调试任务(某些任务不能用于生产环境,没有测试机会)
代码发布:我的开发环境 -- 办公测试环境 -- IDC机房测试环境 -- IDC正式环境(分组,灰度发布)
(2)调整系统时间调试任务(不能直接用于生产环境),保持五分钟
(3)经过脚本日志输出调试定时任务
(4)注意一些任务命令带来的问题
(5)注意环境变量致使的定时任务故障(java环境变量问题: http://oldboy.blog.51cto.com/2561410/1541515)
(6)经过crond定时任务服务日志调试定时任务(/var/log/cron)
(7)其余稀奇古怪的问题调试的办法
1:系统环境变量问题
2:定时任务要用绝对路径
3:脚本权限问题加/bin/sh
4:时间变量问题用反斜线\%转义,最好用脚本
5:>/dev/null 2>&1问题(1>/dev/null 2>/dev/null &>/dev/null)
6:定时任务规则以前加注释
7:使用脚本程序替代命令行定时任务
8:避免没必要要的程序及命令输出
9:切到目标目录的上一级打包目标
10:定时任务脚本中的程序命令尽可能用全路径(和环境变量的识别有关)
要求:/gin/scripts/poe.sh脚本的功能是打印当天的日期:格式为:2016-00-10,能够随意!
1:定时任务必定尽可能用脚本实现
2:命令行操做成功,而后放到脚本执行成功,最后再配置任务
3:复制操做成功的命令行脚本,再定时任务里配置。
解答:
步骤1:建立目录/gin/scripts和编写poe.sh脚本
1
2
3
4
|
[root@Gin scripts]
# mkdir /gin/scripts -p
[root@Gin scripts]
# echo 'date +%F' >poe.sh
[root@Gin scripts]
# /bin/sh /gin/scripts/poe.sh
2017-01-30
|
步骤2:书写定时任务
1
2
3
4
5
6
|
[root@Gin scripts]
# echo '#study to linux' >>/var/spool/cron/root
[root@Gin scripts]
# echo '00 09,14 * * 6,0 /bin/sh /gin/scripts/poe.sh >/dev/null 2>&1' >>/var/spool/cron/root
[root@Gin scripts]
# crontab -l
*
/10
* * * *
/usr/sbin/ntpdate
time
.nist.gov >
/dev/null
2>&1
#study to linux
00 09,14 * * 6,0
/bin/sh
/gin/scripts/poe
.sh >
/dev/null
2>&1
|
也能够输入crontab -e 而后写入以下内容保存:
1
2
|
#study to linux
00 09,14 * * 6,0
/bin/sh
/server/scripts/poe
.sh >
/dev/null
2>&1
|
1:为定时任务规则加必要的注释
2:定时任务命令或程序最好写到脚本里执行
3:执行shell脚本任务前加/bin/sh
4:定时任务命令或脚本结尾加 >/dev/null 2>&1
【
结尾为何要加 >/dev/null 2>&1呢?
C5:sendmail : /var/spool/clientmqueue/ -> 邮件的临时队列目录
系统中开启了 cron,而cron中执行的程序有输出内容,输出内容会以邮件形式发给cron的用户,而sendmail没有启动因此就会在上述目录产生N个小文件,致使的后果就是把磁盘的inode满。 -> no space left on device.
C6:postfix /var/spool/postfix/maildrop/ and /var/spool/postfix/maildrop,同上,小文件太多形成inode索引使用完
问题表现和检查:
1):运行 df -i 查看inode使用是否满
2):查看/var/spool/postfix/maildrop 是否有很是多的小文件,ls直接卡死等状况;
解决:
1):cd /var/spool/postfix/maildrop; ls|xrags rm -f;
2):vi /etc/crontab; 将’MAILTO=root’替换成’MAILTO=””’,而后service crond restart便可。如不行则 crontab -e第一行增长’MAILTO=””’。
】
5:在指定用户下执行相关的定时任务
6:生产任务程序不要随意打印输出信息 , tar zcf echo 123>a.log
7:定时任务执行的脚本要规范路径(/server/scripts)
8:配置定时任务规范操做过程
(1)在命令行把具体打包命令调用成功
1
2
3
4
5
6
|
[root@gin etc]
# cd /etc
[root@gin etc]
# tar zcvf /tmp/services_$(date +%F-%H).tar.gz ./services
.
/services
[root@gin etc]
# ll /tmp
-rw-r--r--. 1 root root 641020 Oct 2 2013 services
-rw-r--r-- 1 root root 127304 Oct 7 20:57 services_2016-10-07-20.
tar
.gz
|
(2)写脚本 /server/scripts/tar.sh
1
2
3
4
5
6
7
|
[root@gin scripts]
# cd /server/scripts/
[root@gin scripts]
# vim tar.sh
cd
/etc
&&
tar
zcf
/tmp/services_
$(
date
+%F-%H).
tar
.gz .
/services
//
测试脚本是否能够运行成功
[root@gin scripts]
# /bin/sh /server/scripts/tar.sh
[root@gin scripts]
# ll /tmp
-rw-r--r-- 1 root root 127304 Oct 7 21:18 services_2016-10-07-21.
tar
.gz
|
(3)写入到定时任务中
1
2
3
4
5
6
7
8
9
|
[root@gin scripts]
# crontab -e
//
内容以下:
#tar for /etc/services 2 hours per
00 *
/2
* * *
/bin/sh
/server/scripts/tar
.sh >
/dev/null
2>&1
//
测试脚本
[root@gin scripts]
# /bin/sh -x /server/scripts/tar.sh //-x表示查看命令执行过程
+
cd
/etc
++
date
+%F-%H
+
tar
zcf
/tmp/services_2016-10-07-22
.
tar
.gz .
/services
|
定时任务每次执行,都会产生日志文件,定时任务的日志文件目录:
1
2
3
4
5
6
7
|
[root@gin scripts]
# ll /var/log/cron*
-rw------- 1 root root 25801 Oct 7 21:30
/var/log/cron
-rw-------. 1 root root 5706 Sep 7 16:10
/var/log/cron-20160907
-rw------- 1 root root 8547 Sep 11 11:24
/var/log/cron-20160911
-rw------- 1 root root 38127 Sep 27 10:50
/var/log/cron-20160927
-rw------- 1 root root 19588 Oct 2 11:18
/var/log/cron-20161002
[root@gin scripts]
# cat /var/log/cron //查看日志
|
1
2
3
|
[root@Gin scripts]
# crontab -e
#print char task by andy for programer A at 2016-10-10
*
/1
* * * *
echo
“andy” >
/server/log/andy
.log 2>&1
|
四:每隔1分钟,打印一个+号到andy.log
1
2
|
echo
‘
#print a “+” every min by andy 2016-10-10’>>/var/spool/cron/root
echo
‘*
/1
* * * *
echo
+ >>
/tmp/andy
.log’>>
/var/spool/cron/root
|
或者:
1
2
|
[root@Andy andy]
# echo '#!/bin/bash' >echo.sh
[root@Andy andy]
# echo 'echo `date` >>/tmp/andy.log' >>echo.sh
|