首頁 > 軟體

Linux定時任務Crontab命令詳解

2020-06-16 17:51:05

前言

crontab是Unix和Linux用於設定週期性被執行的指令,是網際網路很常用的技術,很多工都會設定在crontab迴圈執行,如果不使用crontab,那麼任務就是常駐程式,這對你的程式要求比較高,一個要求你的程式是24X7小時不宕機,一個是要求你的排程程式比較可靠,實際工作中,90%的程式都沒有必要花這麼多時間和精力去解決上面的兩個問題的,只需要寫好自己的業務邏輯,通過crond這個工業級程式去排程就行了,crond的可靠性,健壯性,大家應該是毫無疑問的。

crontab簡易入門

假設我要設定一個任務,每分鐘就要做一個資料同步,這個同步指令碼的路徑是/home/blue/do/rsyncfile.sh,那麼我可以在這麼設定,使用blue使用者,在終端輸入

crontab -e

# 此時會進入 vi 的編輯畫面讓您編輯工作!注意到,每項工作都是一行。

#分 時 日 月 周

<==============任務的完整命令列

* * * * * /home/blue/do/rsyncfile.sh

預設情況下,任何使用者只要不被列入 /etc/cron.deny 當中,那麼他就可以直接下達『 crontab -e』去編輯自己的例行性命令了!整個過程就如同上面提到的,會進入 vi 的編輯畫面, 然後以一個工作一行來編輯,編輯完畢之後輸入『 :wq』儲存後離開 vi 就可以了!

假如我們需要修改為每5分鐘執行資料同步的指令碼,那麼同樣使用 crontab -e 進入編輯:

*/5 * * * * /home/blue/do/rsyncfile.sh

假如伺服器出了問題,有一天的資料沒有同步,於是我們就需要補資料了,假設這個補資料的指令碼是/home/blue/do/rsyncfile_day.sh,但是白天是高峰期,晚上使用者不多,是低峰期,我們補資料會佔用大量頻寬,尤其是白天,會影響正常業務,所以一般我們可以讓補資料任務在凌晨2點開始跑,那麼同樣使用crontab -e 進入編輯:

0 2 1 4 * /home/blue/do/rsyncfile_day.sh

這樣,在4月1號凌晨2點0分就會開始啟動我們的補資料的指令碼了。

同步資料,在網際網路公司是再平常不過的任務了,這裡大家可以看到crontab的魅力所在了,只需要寫最簡單的業務邏輯,把排程交給crond做,就完成了一個可靠性很高的一項任務了,如果要自己去額外寫這種排程程式,不知道要花多少精力才能做到可靠穩定。

crontab的語法

crontab [-u username] [-l

-e

-r]

選項與引數:

-u :只有 root 才能進行這個任務,亦即幫其他使用者建立/移除 crontab 工作排程;

-e :編輯 crontab 的工作內容

-l :查閱 crontab 的工作內容

-r :移除所有的 crontab 的工作內容,若僅要移除一項,請用 -e 去編輯

查詢使用者目前的 crontab 內容:

crontab -l

*/5 * * * * /home/blue/do/rsyncfile.sh

0 2 1 4 * /home/blue/do/rsyncfile_day.sh

清空使用者目前的 crontab:

crontab -r

crontab -l

no crontab for blue

如果你想刪除當前使用者的某一個crontab任務,那麼使用crontab -e進入編輯器,再刪除對應的任務。

crontab的限制

/etc/cron.allow:將可以使用 crontab 的帳號寫入其中,若不在這個檔案內的使用者則不可使用crontab;

/etc/cron.deny:將不可以使用 crontab 的帳號寫入其中,若未記錄到這個檔案當中的使用者,就可以使用crontab 。

以優先順序來說, /etc/cron.allow 比 /etc/cron.deny 要優先,而判斷上面,這兩個檔案只選擇一個來限制而已,因此,建議你只要保留一個即可, 免得影響自己在設定上面的判斷!一般來說,系統預設是保留/etc/cron.deny ,你可以將不想讓他執行 crontab 的那個使用者寫入 /etc/cron.deny當中,一個帳號一行!

/etc/crontab組態檔講解

『 crontab -e 』是針對使用者的 cron 來設計的,如果是『系統的例行性任務』時,就要編輯 /etc/crontab這個檔案。

那就是 crontab -e 這個 crontab 其實是 /usr/bin/crontab 這個執行檔,但是/etc/crontab 可是一個『純文字檔』,必須用 root 的身份編輯一下這個檔案。

首先我們要來看看crontab的檔案內容

cat /etc/crontab

# /etc/crontab: system-wide crontab

# Unlike any other crontab you don't have to run the`crontab'

# command to install the new version when you edit this file

# and files in /etc/cron.d. These files also have usernamefields,

# that none of the other crontabs do.

SHELL=/bin/sh

PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin

# m h dom mon dow user command

17 * * * * root cd / && run-parts --report/etc/cron.hourly

25 6 * * * root test -x /usr/sbin/anacron

( cd / && run-parts --report /etc/cron.daily )

47 6 * * 7 root test -x /usr/sbin/anacron

( cd / && run-parts --report /etc/cron.weekly )

52 6 1 * * root test -x /usr/sbin/anacron

( cd / && run-parts --report /etc/cron.monthly )

這個檔案與將剛剛我們下達 crontab -e 的內容幾乎完全一模一樣!只是有幾個地方不太相同

PATH=....:

這裡就是輸入執行檔的搜尋路徑!使用預設的路徑設定就已經很足夠了!

17 * * * * root cd / && run-parts --report/etc/cron.hourly:

這個 /etc/crontab 裡面預設定義出四項工作任務,分別是每小時、每天、每週及每個月分別進行一次的工作!但是在五個欄位後面接的並不是命令,而是一個新的欄位,那就是『執行後面那串命令的身份』為何!這與使用者的 crontab -e不相同。由於使用者自己的 crontab 並不需要指定身份,但 /etc/crontab裡面當然要指定身份啦!以上表的內容來說,系統預設的例行性工作是以 root 的身份來進行的。

那麼後面那串命令是什麼呢?你可以使用『 which run-parts 』搜尋看看,其實那是一個 bash script啦!如果你直接進入 /usr/bin/run-parts 去看看,會發現這支命令會將後面接的『目錄』內的所有檔案捉出來執行!這也就是說『 如果你想讓系統每小時主動幫你執行某個命令,將該命令寫成script,並將該檔案放置到 /etc/cron.hourly/ 目錄下即可』的意思!

現在你知道系統是如何進行他預設的一堆例行性工作排程了嗎?如果你下達『 ll /etc/cron.daily』就可以看到一堆檔案, 那些檔案就是系統提供的 script ,而這堆 scripts 將會在每天的凌晨 6:25 開始執行!

假設你現在要作一個目錄,讓系統可以每 2 分鐘去執行這個目錄下的所有可以執行的檔案,你可以寫下如下的這一行在/etc/crontab 中:

*/2 * * * * root run-parts /etc/cron.min

當然羅, /etc/cron.min 這個目錄是需要存在的喔!那如果我需要執行的是一個『程式』而已,不需要用到一個目錄呢?該如何是好?例如在偵測網路流量時,我們希望每五分鐘偵測分析一次, 可以這樣寫:

*/5 * * * * root /bin/mrtg /etc/mrtg/mrtg.cfg

如何!建立例行性命令很簡單吧!如果你是系統管理員而且你的工作又是系統維護方面的例行任務時, 直接修改 /etc/crontab這個檔案即可喔!又便利,又方便管理呢!

crontab的原理

當使用者使用 crontab 這個命令來建立工作排程之後,該項工作就會被紀錄到 /var/spool/cron/裡面去了,而且是以帳號來作為判別的喔!舉例來說, blue 使用 crontab 後, 他的工作會被紀錄到/var/spool/cron/blue 裡頭去!但請注意,不要使用 vi 直接編輯該檔案, 因為可能由於輸入語法錯誤,會導致無法執行cron 喔!另外, cron 執行的每一項工作都會被紀錄到 /var/log/cron 這個登入檔中,所以羅,如果你的 Linux不知道有否被植入木馬時,也可以搜尋一下 /var/log/cron 這個登入檔呢!

crond服務的最低偵測限制是『分鐘』,所以『 cron 會每分鐘去讀取一次 /etc/crontab 與/var/spool/cron 裡面的資料內容 』,因此,只要你編輯完 /etc/crontab 這個檔案,並且將他儲存之後,那麼cron 的設定就自動的會來執行了!

備註:在 Linux 底下的 crontab 會自動的幫我們每分鐘重新讀取一次 /etc/crontab的例行工作事項,但是某些原因或者是其他的 Unix 系統中,由於 crontab 是讀到記憶體當中的,所以在你修改完/etc/crontab 之後,可能並不會馬上執行, 這個時候請重新啟動 crond 這個服務吧!『/etc/init.d/crondrestart』 或 『service crond restart』

crontab的格式講解

每項工作 (每行) 的格式都是具有六個欄位,這六個欄位的意義為:

代表意義 分鐘 小時 日期(天) 月份 週 命令

數位範圍 0-59 0-23 1-31 1-12 0-7 呀就命令啊

比較有趣的是那個『週』喔!週的數位為 0 或 7 時,都代表『星期天』的意思!另外,還有一些輔助的字元,大概有底下這些:

特殊字元 代表意義

*(星號) 代表任何時刻都接受的意思!舉例來說,範例一內那個日、月、周都是 * , 就代表著『不論何月、何日的禮拜幾的12:00 都執行後續命令』的意思!

,(逗號)

代表分隔時段的意思。舉例來說,如果要下達的工作是 3:00 與 6:00 時,就會是:

0 3,6 * * * command

時間引數還是有五欄,不過第二欄是 3,6 ,代表 3 與 6 都適用!

-(減號)

代表一段時間範圍內,舉例來說, 8 點到 12 點之間的每小時的 20 分都進行一項工作:

20 8-12 * * * command

仔細看到第二欄變成 8-12 喔!代表 8,9,10,11,12 都適用的意思!

/n(斜線)

那個 n 代表數位,亦即是『每隔 n 單位間隔』的意思,例如每五分鐘進行一次,則:

*/5 * * * * command

很簡單吧!用 * 與 /5 來搭配,也可以寫成 0-59/5 ,相同意思!

周與日月不可同時並存

另一個需要注意的地方在於:『你可以分別以周或者是日月為單位作為迴圈,但你不可使用「幾月幾號且為星期幾」的模式工作』。這個意思是說,你不可以這樣編寫一個工作排程:

1

30 12 11 9 5 root echo "just test" <==這是錯誤的寫法

本來你以為九月十一號且為星期五才會進行這項工作,無奈的是,系統可能會判定每個星期五作一次,或每年的 9 月 11號分別進行,如此一來與你當初的規劃就不一樣了~所以羅,得要注意這個地方!上述的寫法是不對的!

CentOS下檢視crontab執行歷史記錄

在crontab中新增了定時任務,但發現沒有得到期望的結果,因而懷疑是crontab沒有執行相應的任務,但怎麼定位crontab是否執行呢?

這就需要檢視crontab的執行歷史記錄,具體位置如下:

cd /var/log

tail -100 cron

在cron檔案中即可查閱已經操作過的相關定時任務。

一、Crontab 格式說明

我們可以用 crontab -e 新增要執行的命令。命令執行的結果,無論是標準輸出還是錯誤輸出,都將以郵件形式發給使用者。

新增的命令必須以如下格式:

* * * * * /command path

前五個欄位可以取整數值,指定何時開始工作,第六個域是字串,即命令欄位,其中包括了crontab排程執行的命令。各個欄位之間用spaces和tabs分割。

前5個欄位分別表示:

分鐘:0-59

小時:1-23

日期:1-31

月份:1-12

星期:0-6(0表示週日)

還可以用一些特殊符號:

*: 表示任何時刻

,: 表示分割

-:表示一個段,如第二端裡: 1-5,就表示1到5點

/n : 表示每個n的單位執行一次,如第二段裡,*/1, 就表示每隔1個小時執行一次命令。也可以寫成1-23/1.

一些範例:

00 8,12,16 * * * /data/app/scripts/monitor/df.sh

30 2 * * */data/app/scripts/hotbackup/hot_database_backup.sh

10 8,12,16 * * */data/app/scripts/monitor/check_ind_unusable.sh

10 8,12,16 * * */data/app/scripts/monitor/check_maxfilesize.sh

10 8,12,16 * * */data/app/scripts/monitor/check_objectsize.sh

43 21 * * * 21:43 執行

15 05 * * * 05:15 執行

0 17 * * * 17:00 執行

0 17 * * 1 每週一的 17:00 執行

0,10 17 * * 0,2,3 每週日,週二,週三的 17:00和 17:10 執行

0-10 17 1 * * 毎月1日從 17:00到7:10 毎隔1分鐘 執行

0 0 1,15 * 1 毎月1日和 15日和 一日的 0:00 執行

42 4 1 * * 毎月1日的 4:42分 執行

0 21 * * 1-6 週一到週六 21:00 執行

0,10,20,30,40,50 * * * * 每隔10分 執行

*/10 * * * * 每隔10分 執行

* 1 * * * 從1:0到1:59 每隔1分鐘 執行

0 1 * * * 1:00 執行

0 */1 * * * 毎時0分 每隔1小時 執行

0 * * * * 毎時0分 每隔1小時 執行

2 8-20/3 * * * 8:02,11:02,14:02,17:02,20:02 執行

30 5 1,15 * * 1日 和 15日的 5:30 執行

二、& 後台執行命令

當在前台執行某個作業時,終端被該作業占據;而在後台執行作業時,它不會佔據終端。可以使用&命令把作業放到後台執行。

如:

30 2 * * * /data/app/scripts/hotbackup/hot_database_backup.sh&

在後台執行作業時要當心:需要使用者互動的命令不要放在後台執行,因為這樣你的機器就會在那裡傻等。

不過,作業在後台執行一樣會將結果輸出到螢幕上,干擾你的工作。如果放在後台執行的作業會產生大量的輸出,最好使用下面的方法把它的輸出重定向到某個檔案中:

如:

command >out.file 2>&1 &

在這個例子中,2>&1表示所有的標準輸出和錯誤輸出都將被重定向到一個叫做out.file 的檔案中。

三、2>&1 含義

先看一個例子:

0 2 * * * /u01/test.sh >/dev/null 2>&1 &

這句話的意思就是在後台執行這條命令,並將錯誤輸出2重定向到標準輸出1,然後將標準輸出1全部放到/dev/null檔案,也就是清空。

在這裡有有幾個數位的意思:

0表示 鍵盤輸入

1表示 標準輸出

2表示 錯誤輸出

我們也可以這樣寫:

0 2 * * * /u01/test.sh 1>/u01/out.file &

0 2 * * * /u01/test.sh 2>/u01/out.file &

0 2 * * * /u01/test.sh 2>/u01/out.file 2>&1 &

將tesh.sh 命令輸出重定向到out.file, 即輸出內容不列印到螢幕上,而是輸出到out.file檔案中。

2>&1 是將錯誤輸出重定向到標準輸出。 然後將標準輸入重定向到檔案out.file。

&1 表示的是檔案描述1,表示標準輸出,如果這裡少了&就成了數位1,就表示重定向到檔案1。

& :後台執行

測試:

ls 2>1 : 不會報沒有2檔案的錯誤,但會輸出一個空的檔案1;

ls xxx 2>1: 沒有xxx這個檔案的錯誤輸出到了1中;

ls xxx 2>&1: 不會生成1這個檔案了,不過錯誤跑到標準輸出了;

ls xxx >out.txt 2>&1 == ls xxx 1>out.txt2>&1: 因為重定向符號>預設是1,這句就把錯誤輸出和標準輸出都傳到out.txt 檔案中。

四、2>&1寫在後面的原因

格式:command > file 2>&1 == command 1> file2>&1

首先是command > file將標準輸出重定向到file中, 2>&1是標準錯誤拷貝了標準輸出,也就是同樣被重定向到file中,最終結果就是標準輸出和錯誤都被重定向到file中。

如果改成: command 2>&1 >file

2>&1 標準錯誤拷貝了標準輸出的行為,但此時標準輸出還是在終端。>file後輸出才被重定向到file,但標準錯誤仍然保持在終端。

延伸閱讀:

Shell標準輸出、標準錯誤 >/dev/null 2>&1

如何讓Linux定時任務crond以秒為單位執行(如每隔3秒)

經驗教訓:

打算在伺服器上 每天晚上23:00 定時執行Python指令碼,去備份MySql資料庫,命令如下:

* 23 * * * python /var/www/html/crontab_python/back_db.py>/dev/null 2>&1

結果呢,每次備份都產生了 60份備份檔案,仔細檢視定時任務命令,發現在“分”的位置上,少加了個“0”,因為“*”表示該位置的任何一個值,修改如下:

0 23 * * * python /var/www/html/crontab_python/back_db.py>/dev/null 2>&1

0 4 * * * /usr/local/php/bin/php/usr/local/nginx/www/backup-db/backup_db.php 172.16.8.26>/dev/null 2>&1

0 4 * * * /usr/local/php/bin/php/usr/local/nginx/www/backup-db/backup_db.php 172.16.10.151>/dev/null 2>&1

Linux中利用crontab建立計劃任務 http://www.linuxidc.com/https://www.linuxidc.com/Linux/2013-06/86401.htm

Linux中用crontab例行工作安排 http://www.linuxidc.com/https://www.linuxidc.com/Linux/2013-06/85441.htm

Linux crontab不執行問題排查 http://www.linuxidc.com/https://www.linuxidc.com/Linux/2013-06/85432.htm

Ubuntu使用crontab定時任務 http://www.linuxidc.com/https://www.linuxidc.com/Linux/2013-05/84770.htm

Linux計劃任務(at batch crontab anacron) http://www.linuxidc.com/https://www.linuxidc.com/Linux/2013-03/81584.htm

Linux任務計劃 (at,crontab) http://www.linuxidc.com/Linux/2015-09/122970.htm

本文永久更新連結地址http://www.linuxidc.com/Linux/2015-10/124478.htm


IT145.com E-mail:sddin#qq.com