Linux:定时任务crond服务

1、crond简介

crond是linux下用来周期性的执行某种任务或等待处理某些事件的一个守护进程,与windows下的计划任务相似,当安装完成操做系统后,默认会安装此服务工具,而且会自动启动crond进程,crontab依赖的服务就是crond,crond进程每分钟会按期检查是否有要执行的任务,若是有要执行的任务,则自动执行该任务。这个crond定时任务服务就至关于咱们生活中的闹钟java

因为crond 是Linux的内置服务,但它不自动起来,能够用如下的方法启动、关闭这个服务:node

1
2
3
4
5
6
7
8
/sbin/service crond start // 启动服务
/sbin/service crond stop // 关闭服务
/sbin/service crond restart // 重启服务
/sbin/service crond reload // 从新载入配置
或者使用下面的命令:
/etc/init .d /crond start
/etc/init .d /crond restart
/etc/init .d /crond stop

设置crond服务开机自启动:linux

1
[root@gin tmp] # chkconfig crond on

特殊须要:crond服务搞不定了,通常工做中写脚本守护程序执行:web

1
2
3
4
5
6
[root@gin tmp] # cat cron.sh
while true
do
         echo "I am Bruce Lee"
         sleep 1
done

程序文件:程序代码组成,可是没有在计算机内执行。当前没有执行。shell

守护程序或守护进程:进程就是所算机中正在执行的程序,守护进程就是保护正在一直运行的程序。apache

Linux下的任务调度分为两类,系统任务调度和用户任务调度。vim

A. 系统任务调度:

系统周期性所要执行的工做,好比写缓存数据到硬盘、日志清理等。在/etc目录下有一个crontab文件,这个就是系统任务调度的配置文件。windows

/etc/crontab文件包括下面几行:缓存

1
2
3
4
5
6
7
8
9
SHELL= /bin/bash 
PATH= /sbin : /bin : /usr/sbin : /usr/bin 
MAILTO=root 
HOME=/ 
# run-parts 
01 * * * * root run-parts /etc/cron .hourly 
02 4 * * * root run-parts /etc/cron .daily 
22 4 * * 0 root run-parts /etc/cron .weekly 
42 4 1 * * root run-parts /etc/cron .monthly

前四行是用来配置crond任务运行的环境变量bash

第一行SHELL变量指定了系统要使用哪一个shell,这里是bash

第二行PATH变量指定了系统执 行命令的路径

第三行MAILTO变量指定了crond的任务执行信息将经过电子邮件发送给root用户,若是MAILTO变量的值为空,则表示不发送任 务执行信息给用户

第四行的HOME变量指定了在执行命令或者脚本时使用的主目录。第六至九行表示的含义将在下个小节详细讲述。这里不在多说。

B. 用户任务调度:

用户按期要执行的工做,好比用户数据备份、定时邮件提醒等。用户可使用 crontab 工具来定制本身的计划任务。全部用户定义的crontab 文件都被保存在 /var/spool/cron目录中。其文件名与当前用户名一致。

严格的说,linux系统下的定时任务软件还真很多,例如:at , crontab , anacron。

at:适合仅执行一次就结束的调度任务命令,如:某天晚上须要处理一个任务,仅仅是这一天的晚上,属于突发性的工做任务。要执行at命令,还须要启动一个名为atd的服务才行。在生产环境中此须要会不多用到。所以,建议不要深刻研究!

提示:

1:咱们所说的crond服务是运行的程序,而crontab命令用户用来设置定时规则的命令

2:crond服务是企业生产工做中经常使用的重要服务,at和anacron不多使用,能够忽略

3:几乎每一个服务器都会用到crond服务

2、crontab工具的使用

(1)crontab的使用格式

crontab经常使用的使用格式有以下两种:

1
2
crontab [-u user] [ file ]
crontab [-u user] [-e|-l|-r |-i]

选项含义以下:

参数名称

含义

指定示例

-l

显示用户crontab文件内容,l即list

crontab -l

-e

编辑某个用户的crontab文件内容。若是不指定用户,则表示编辑当前用户的crontab文件。

crontab -e

-i

在删除用户的crontab文件时给确认提示。

crontab -ri

-r

从/var/spool/cron目录中删除某个用户的crontab文件,不指定用户,则删除当前用户的crontab文件。

crontab -r

-u

用来设定某个用户的crontab服务,此参数通常由root用户来运行

crontab -u root -l

经常使用的选项命令为 l and e!crontab -e 至关于 vi /var/spool/cron/root ; crontab -l 至关于 cat /var/spool/cron/root

使用者权限文件:

文件

说明

/etc/cron.deny

该文件中所列用户不容许使用crontab命令

/etc/cron.allow

该文件中所列用户容许使用crontab命令

/var/spool/cron/

全部用户crontab文件存放的目录,以用户名命令

(2)crontab文件的含义

用户所创建的crontab文件中,每一行都表明一项任务,每行的每一个字段表明一项设置,它的格式共分为六个字段,前五段是时间设定段,第六段是要执行的命令段,格式以下:

1
minute   hour   day   month   week   command

其中:

1
2
3
4
5
6
* minute: 表示分钟,能够是从0到59之间的任何整数。
* hour:表示小时,能够是从0到23之间的任何整数。
* day:表示日期,能够是从1到31之间的任何整数。
* month:表示月份,能够是从1到12之间的任何整数。
* week:表示星期几,能够是从0到7之间的任何整数,这里的0或7表明星期日。
* command :要执行的命令,能够是系统命令,也能够是本身编写的脚本文件。

在以上各个字段中,还可使用如下特殊字符:

1
2
3
4
* 星号(*):表明全部可能的值,例如month字段若是是星号,则表示在知足其它字段的制约条件后每个月都执行该命令操做。
* 逗号(,):能够用逗号隔开的值指定一个列表范围,例如,“1,2,5,7,8,9”
* 中杠(-):能够用整数之间的中杠表示一个整数范围,例如“2-6”表示“2,3,4,5,6”
* 正斜线(/):能够用正斜线指定时间的间隔频率,例如“0-23 /2 ”表示每两小时执行一次。同时正斜线能够和星号一块儿使用,例如* /10 ,若是用在minute字段,表示每十分钟执行一次。

(3)crontab文件举例

1
0 * /3 * * * /usr/local/apache2/apachectl restart

#表示每隔3个小时重启apache服务一次。  

1
30 3 * * 6 /webdata/bin/backup .sh

#表示每周六的3点30分执行/webdata/bin/backup.sh脚本的操做。  

1
0 0 1,20 * *  fsck /dev/sdb8

#表示每月的1号和20号检查/dev/sdb8磁盘设备。

1
10 5 * /5 * *  echo "" > /usr/local/apache2/log/access_log

#表示每月的5号、10号、15号、20号、25号、30号的5点10分执行清理apache日志操做。

(4)任务调度设置文件的写法

可用crontab -e命令来编辑,编辑的是/var/spool/cron下对应用户的cron文件,也能够直接修改/etc/crontab文件

具体格式以下:

1
2
3
4
5
6
7
8
9
Minute Hour Day Month Dayofweek   command
分钟     小时   天     月       天每星期       命令
      每一个字段表明的含义以下:
      Minute             每一个小时的第几分钟执行该任务
      Hour               天天的第几个小时执行该任务
      Day                 每个月的第几天执行该任务
      Month             每一年的第几个月执行该任务
      DayOfWeek     每周的第几天执行该任务
      Command       指定要执行的程序

在这些字段里,除了“Command”是每次都必须指定的字段之外,其它字段皆为可选字段,可视须要决定。对于不指定的字段,要用“*”来填补其位置。

举例以下:

1
2
3
4
5
5       *       *           *     *     ls             指定每小时的第5分钟执行一次 ls 命令
30     5       *           *     *     ls             指定天天的 5:30 执行 ls 命令
30     7       8         *     *     ls             指定每个月8号的7:30分执行 ls 命令
30     5       8         6     *     ls             指定每一年的6月8日5:30执行 ls 命令
30     6       *           *     0     ls             指定每星期日的6:30执行 ls 命令[注:0表示星期天,1表示星期1,

 

以此类推,也能够用英文来表示,sun表示星期天,mon表示星期一等。

1
2
3
4
30     3     10,20     *     *     ls     每个月10号及20号的3:30执行 ls 命令[注:“,”用来链接多个不连续的时段
25     8-11 *           *     *     ls       天天8-11点的第25分钟执行 ls 命令[注:“-”用来链接连续的时段
* /15   *       *           *     *     ls         每15分钟执行一次 ls 命令 [即每一个小时的第0 15 30 45 60分钟执行 ls 命令
30   6     * /10         *     *     ls       每月中,每隔10天6:30执行一次 ls 命令[即每个月的一、十一、2一、31日是的6:30执行一次 ls 命令。

天天7:50以root 身份执行/etc/cron.daily目录中的全部可执行文件

1
50   7       *             *     *     root     run-parts     /etc/cron .daily   [ 注:run-parts参数表示,执行后面目录中的全部可执行文件。

(5)cron文件语法:

1
2
分     小时    日       月       星期     命令
0-59   0-23   1-31   1-12     0-6     command     (取值范围,0表示周日通常一行对应一个任务)

记住几个特殊符号的含义:

1
2
3
4
“*”表明取值范围内的数字,
“/”表明”每”,
“-”表明从某个数字到某个数字,
“,”分开几个离散的数字

(6)应用案例

1:

30 30,12 * * * /bin/sh /scripts/andy.sh

在本例中,该定时任务的意思就是天天凌晨3点30分和中午12点30分执行/scripts/andy.sh

2:

30 */6 * * * /bin/sh /scripts/andy.sh

每隔6个小时的半点时刻执行后面的脚本任务

3:

30 8-18/2 * * * /bin/sh /scripts/andy.sh

8点到18点中每隔2小时的30分执行后面的脚本任务(也就是天天的8点半,10点半,12点半,14点半,16点半,18点半)

4:

45 4 1,10,22 * * /application/apache/bin/apachectl graceful

每个月的1,10,22日的凌晨4:45分重启apache

5:

* 23,00-07/1 * * * /application/apache/bin/apachectl gracefull

上面的例子并不表示晚上23点和早上0-7点之间每隔一小时重启apache

提示:以上结果是不规范的,也是不对的。

以上的定时任务的第一列为*,表示每分都执行任务即晚上23点和早上0-7点之间每隔一小时的每分都重启apache

3、 使用crontab工具的注意事项

(1)注意环境变量问题

有时咱们建立了一个crontab,可是这个任务却没法自动执行,而手动执行这个任务却没有问题,这种状况通常是因为在crontab文件中没有配置环境变量引发的。

在crontab文件中定义多个调度任务时,须要特别注意的一个问题就是环境变量的设置,由于咱们手动执行某个任务时,是在当前shell环境下进行的, 程序固然能找到环境变量,而系统自动执行任务调度时,是不会加载任何环境变量的,所以,就须要在crontab文件中指定任务运行所需的全部环境变量,这样,系统执行任务调度时就没有问题了。

(2)注意清理系统用户的邮件日志

每条任务调度执行完毕,系统都会将任务输出信息经过电子邮件的形式发送给当前系统用户,这样日积月累,日志信息会很是大,可能会影响系统的正常运行,所以,将每条任务进行重定向处理很是重要。

例如,能够在crontab文件中设置以下形式,忽略日志输出:

1
0 * /3 * * * /usr/local/apache2/apachectl restart > /dev/null 2>&1

“/dev/null 2>&1”表示先将标准输出重定向到/dev/null,而后将标准错误重定向到标准输出,因为标准输出已经重定向到了/dev/null,所以标准错误也会重定向到/dev/null,这样日志输出问题就解决了。

为crontab中的任务增长本身的日志,这样出错后,比较容易看到缘由。

1
0 6 * * * $HOME /for_crontab/createTomorrowTables >> $HOME /for_crontab/mylog .log 2>&1

把错误输出和标准输出都输出到mylog.log中。

注意:不要写成

1
0 6 * * * $HOME /for_crontab/createTomorrowTables 2>&1 >> $HOME /for_crontab/mylog .log

不然就输出到标准输出了

(3)系统级任务调度与用户级任务调度

系统级任务调度主要完成系统的一些维护操做,用户级任务调度主要完成用户自定义的一些任务,能够将用户级任务调度放到系统级任务调度来完成(不建议这么作),可是反过来却不行,root用户的任务调度操做能够经过“crontab –uroot –e”来设置,也能够将调度任务直接写入/etc/crontab文件,须要注意的是,若是要定义一个定时重启系统的任务,就必须将任务放到/etc /crontab文件,即便在root用户下建立一个定时重启系统的任务也是无效的。

四:企业生产场景如何调试crontab定时任务

(1)增长执行任务频率调试任务(某些任务不能用于生产环境,没有测试机会)

代码发布:我的开发环境 -- 办公测试环境 -- IDC机房测试环境 -- IDC正式环境(分组,灰度发布)

(2)调整系统时间调试任务(不能直接用于生产环境),保持五分钟

(3)经过脚本日志输出调试定时任务

(4)注意一些任务命令带来的问题

(5)注意环境变量致使的定时任务故障(java环境变量问题: http://oldboy.blog.51cto.com/2561410/1541515)

(6)经过crond定时任务服务日志调试定时任务(/var/log/cron)

(7)其余稀奇古怪的问题调试的办法

五:crontab定时任务生产应用问题八箴言

1:系统环境变量问题

2:定时任务要用绝对路径

3:脚本权限问题加/bin/sh

4:时间变量问题用反斜线\%转义,最好用脚本

5:>/dev/null 2>&1问题(1>/dev/null  2>/dev/null  &>/dev/null)

6:定时任务规则以前加注释

7:使用脚本程序替代命令行定时任务

8:避免没必要要的程序及命令输出

9:切到目标目录的上一级打包目标

10:定时任务脚本中的程序命令尽可能用全路径(和环境变量的识别有关)

六:练习题

一:每周六,日上午9:00 和下午14:00去参加linux培训学习(执行/gin/scripts/poe.sh)

要求:/gin/scripts/poe.sh脚本的功能是打印当天的日期:格式为:2016-00-10,能够随意!

1:定时任务必定尽可能用脚本实现

2:命令行操做成功,而后放到脚本执行成功,最后再配置任务

3:复制操做成功的命令行脚本,再定时任务里配置。

解答:

步骤1:建立目录/gin/scripts和编写poe.sh脚本

1
2
3
4
[root@Gin scripts] # mkdir /gin/scripts -p
[root@Gin scripts] # echo 'date +%F' >poe.sh
[root@Gin scripts] # /bin/sh /gin/scripts/poe.sh
2017-01-30

步骤2:书写定时任务

1
2
3
4
5
6
[root@Gin scripts] # echo '#study to linux' >>/var/spool/cron/root
[root@Gin scripts] # echo '00 09,14 * * 6,0 /bin/sh /gin/scripts/poe.sh >/dev/null 2>&1' >>/var/spool/cron/root
[root@Gin scripts] # crontab -l
* /10 * * * * /usr/sbin/ntpdate time .nist.gov > /dev/null 2>&1
#study to linux
00 09,14 * * 6,0 /bin/sh /gin/scripts/poe .sh > /dev/null 2>&1

也能够输入crontab -e 而后写入以下内容保存:

1
2
#study to linux
00 09,14 * * 6,0 /bin/sh /server/scripts/poe .sh > /dev/null 2>&1

书写定时任务的若干要领方法:

1:为定时任务规则加必要的注释

2:定时任务命令或程序最好写到脚本里执行

3:执行shell脚本任务前加/bin/sh

4:定时任务命令或脚本结尾加 >/dev/null 2>&1

结尾为何要加 >/dev/null 2>&1呢?

C5:sendmail : /var/spool/clientmqueue/  -> 邮件的临时队列目录

系统中开启了 cron,而cron中执行的程序有输出内容,输出内容会以邮件形式发给cron的用户,而sendmail没有启动因此就会在上述目录产生N个小文件,致使的后果就是把磁盘的inode满。 -> no space left on device.

C6:postfix  /var/spool/postfix/maildrop/  and  /var/spool/postfix/maildrop,同上,小文件太多形成inode索引使用完

问题表现和检查:

1):运行 df -i 查看inode使用是否满

2):查看/var/spool/postfix/maildrop 是否有很是多的小文件,ls直接卡死等状况;

解决:

1):cd /var/spool/postfix/maildrop; ls|xrags rm -f;

2):vi /etc/crontab; 将’MAILTO=root’替换成’MAILTO=””’,而后service crond restart便可。如不行则 crontab -e第一行增长’MAILTO=””’。

5:在指定用户下执行相关的定时任务

6:生产任务程序不要随意打印输出信息 , tar zcf echo 123>a.log

7:定时任务执行的脚本要规范路径(/server/scripts)

8:配置定时任务规范操做过程

二:每隔两小时将系统文件/etc/service文件打包备份到/tmp下(每次备份按时间生成不一样的备份包)

(1)在命令行把具体打包命令调用成功

1
2
3
4
5
6
[root@gin etc] # cd /etc
[root@gin etc] # tar zcvf /tmp/services_$(date +%F-%H).tar.gz ./services
. /services
[root@gin etc] # ll /tmp
-rw-r--r--. 1 root root 641020 Oct  2  2013 services
-rw-r--r--  1 root root 127304 Oct  7 20:57 services_2016-10-07-20. tar .gz

(2)写脚本 /server/scripts/tar.sh

1
2
3
4
5
6
7
[root@gin scripts] # cd /server/scripts/
[root@gin scripts] # vim tar.sh
cd /etc && tar zcf /tmp/services_ $( date +%F-%H). tar .gz . /services
// 测试脚本是否能够运行成功
[root@gin scripts] # /bin/sh /server/scripts/tar.sh
[root@gin scripts] # ll /tmp
-rw-r--r-- 1 root root 127304 Oct  7 21:18 services_2016-10-07-21. tar .gz

(3)写入到定时任务中

1
2
3
4
5
6
7
8
9
[root@gin scripts] # crontab -e
// 内容以下:
#tar for /etc/services 2 hours per
00 * /2 * * * /bin/sh /server/scripts/tar .sh > /dev/null 2>&1
// 测试脚本
[root@gin scripts] # /bin/sh -x /server/scripts/tar.sh       //-x表示查看命令执行过程
+ cd /etc
++ date +%F-%H
+ tar zcf /tmp/services_2016-10-07-22 . tar .gz . /services

定时任务每次执行,都会产生日志文件,定时任务的日志文件目录:

1
2
3
4
5
6
7
[root@gin scripts] # ll /var/log/cron*
-rw-------  1 root root 25801 Oct  7 21:30 /var/log/cron
-rw-------. 1 root root  5706 Sep  7 16:10 /var/log/cron-20160907
-rw-------  1 root root  8547 Sep 11 11:24 /var/log/cron-20160911
-rw-------  1 root root 38127 Sep 27 10:50 /var/log/cron-20160927
-rw-------  1 root root 19588 Oct  2 11:18 /var/log/cron-20161002
[root@gin scripts] # cat /var/log/cron       //查看日志

三:每分钟打印一次本身的名字到/server/log/本身的名字命名的文件中

1
2
3
[root@Gin scripts] # crontab -e
#print char task by andy for programer A at 2016-10-10
* /1 * * * * echo “andy” > /server/log/andy .log 2>&1

四:每隔1分钟,打印一个+号到andy.log

1
2
echo #print a “+” every min by andy 2016-10-10’>>/var/spool/cron/root
echo ‘* /1 * * * * echo + >> /tmp/andy .log’>> /var/spool/cron/root

或者:

1
2
[root@Andy andy] # echo '#!/bin/bash' >echo.sh
[root@Andy andy] # echo 'echo `date` >>/tmp/andy.log' >>echo.sh
相关文章
相关标签/搜索