linux grep命令詳解
簡介
grep (global search regular expression(RE) and print out the line,全面搜索正則表達式并把行打印出來)是一種強大的文本搜索工具,它能使用正則表達式搜索文本,并把匹配的行打印出來。
Unix的grep家族包括grep、egrep和fgrep。egrep和fgrep的命令只跟grep有很小不同。egrep是grep的擴展,支持更多的re元字符, fgrep就是fixed grep或fast grep,它們把所有的字母都看作單詞,也就是說,正則表達式中的元字符表示回其自身的字面意義,不再特殊。linux使用GNU版本的grep。它功能更強,可以通過-G、-E、-F命令行選項來使用egrep和fgrep的功能。
grep常用用法
grep [-acinv] [--color=auto] '搜尋字符串' filename
選項與參數: -a :將 binary 文件以 text 文件的方式搜尋數據 -c :計算找到 '搜尋字符串' 的次數 -i :忽略大小寫的不同,所以大小寫視為相同 -n :順便輸出行號 -v :反向選擇,亦即顯示出沒有 '搜尋字符串' 內容的那一行! --color=auto :可以將找到的關鍵詞部分加上顏色的顯示喔! </pre>
將/etc/passwd,有出現 root 的行取出來
grep root /etc/passwd
root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin 或
cat /etc/passwd | grep root
root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin </pre>
將/etc/passwd,有出現 root 的行取出來,同時顯示這些行在/etc/passwd的行號
grep -n root /etc/passwd
1:root:x:0:0:root:/root:/bin/bash 30:operator:x:11:0:operator:/root:/sbin/nologin </pre>
在關鍵字的顯示方面,grep 可以使用 –color=auto 來將關鍵字部分使用顏色顯示。 這可是個很不錯的功能啊!但是如果每次使用 grep 都得要自行加上 –color=auto 又顯的很麻煩~ 此時那個好用的 alias 就得來處理一下啦!你可以在 ~/.bashrc 內加上這行:『alias grep=’grep –color=auto’』再以『 source ~/.bashrc 』來立即生效即可喔! 這樣每次運行 grep 他都會自動幫你加上顏色顯示啦
將/etc/passwd,將沒有出現 root 的行取出來
grep -v root /etc/passwd
root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin </pre>
將/etc/passwd,將沒有出現 root 和nologin的行取出來
grep -v root /etc/passwd | grep -v nologin
root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin </pre>
用 dmesg 列出核心信息,再以 grep 找出內含 eth 那行,要將捉到的關鍵字顯色,且加上行號來表示:
dmesg | grep -n --color=auto 'eth'
247:eth0: RealTekRTL8139at 0xee846000, 00:90:cc:a6:34:84, IRQ 10 248:eth0: Identified 8139 chiptype 'RTL-8139C' 294:eth0: link up, 100Mbps, full-duplex, lpa 0xC5E1 305:eth0: noIPv6routerspresent
你會發現除了 eth 會有特殊顏色來表示之外,最前面還有行號喔!
</pre>
在關鍵字的顯示方面,grep 可以使用 –color=auto 來將關鍵字部分使用顏色顯示。 這可是個很不錯的功能啊!但是如果每次使用 grep 都得要自行加上 –color=auto 又顯的很麻煩~ 此時那個好用的 alias 就得來處理一下啦!你可以在 ~/.bashrc 內加上這行:『alias grep=’grep –color=auto’』再以『 source ~/.bashrc 』來立即生效即可喔! 這樣每次運行 grep 他都會自動幫你加上顏色顯示啦
用 dmesg 列出核心信息,再以 grep 找出內含 eth 那行,在關鍵字所在行的前兩行與后三行也一起捉出來顯示
dmesg | grep -n -A3 -B2 --color=auto 'eth'
245-PCI: settingIRQ 10 as level-triggered 246-ACPI: PCIInterrupt 0000:00:0e.0[A] -> Link [LNKB] ... 247:eth0: RealTekRTL8139at 0xee846000, 00:90:cc:a6:34:84, IRQ 10 248:eth0: Identified 8139 chiptype 'RTL-8139C' 249-input: PCSpeakeras /class/input/input2 250-ACPI: PCIInterrupt 0000:00:01.4[B] -> Link [LNKB] ... 251-hdb: ATAPI 48X DVD-ROMDVD-R-RAMCD-R/RWdrive, 2048kB Cache, UDMA(66)
如上所示,你會發現關鍵字 247 所在的前兩行及 248 后三行也都被顯示出來!
這樣可以讓你將關鍵字前后數據捉出來進行分析啦!
</pre>
根據文件內容遞歸查找目錄
grep ‘energywise’ * #在當前目錄搜索帶'energywise'行的文件
grep -r ‘energywise’ * #在當前目錄及其子目錄下搜索'energywise'行的文件
</pre>
grep -l -r ‘energywise’ * #在當前目錄及其子目錄下搜索'energywise'行的文件,但是不顯示匹配的行,只顯示匹配的文件
</pre>
這幾個命令很使用,是查找文件的利器。
grep與正規表達式
字符類
字符類的搜索:如果我想要搜尋 test 或 taste 這兩個單字時,可以發現到,其實她們有共通的 ‘t?st’ 存在~這個時候,我可以這樣來搜尋:
grep -n 't[ae]st' regular_express.txt
8:I can't finishthetest. 9:Oh! Thesouptastegood. </pre>
其實 [] 里面不論有幾個字節,他都謹代表某『一個』字節, 所以,上面的例子說明了,我需要的字串是『tast』或『test』兩個字串而已!
字符類的反向選擇 [^] :如果想要搜索到有 oo 的行,但不想要 oo 前面有 g,如下
grep -n '[^g]oo' regular_express.txt
2:appleis myfavoritefood. 3:Footballgameis not use feetonly. 18:googleis thebesttoolsfor searchkeyword. 19:goooooogleyes! </pre>
第 2,3 行沒有疑問,因為 foo 與 Foo 均可被接受!
但是第 18 行明明有 google 的 goo 啊~別忘記了,因為該行后面出現了 tool 的 too 啊!所以該行也被列出來~ 也就是說, 18 行里面雖然出現了我們所不要的項目 (goo) 但是由於有需要的項目 (too) , 因此,是符合字串搜尋的喔!
至於第 19 行,同樣的,因為 goooooogle 里面的 oo 前面可能是 o ,例如: go(ooo)oogle ,所以,這一行也是符合需求的!
字符類的連續:再來,假設我 oo 前面不想要有小寫字節,所以,我可以這樣寫 [^abcd….z]oo , 但是這樣似乎不怎么方便,由於小寫字節的 ASCII 上編碼的順序是連續的, 因此,我們可以將之簡化為底下這樣:
grep -n '[^a-z]oo' regular_express.txt
3:Footballgameis not use feetonly. </pre>
也就是說,當我們在一組集合字節中,如果該字節組是連續的,例如大寫英文/小寫英文/數字等等, 就可以使用[a-z],[A-Z],[0-9]等方式來書寫,那么如果我們的要求字串是數字與英文呢? 呵呵!就將他全部寫在一起,變成:[a-zA-Z0-9]。
我們要取得有數字的那一行,就這樣:
grep -n '[0-9]' regular_express.txt
5:However, this dressis about $ 3183 dollars. 15:Youarethebestis meanyouaretheno. 1. </pre>
行首與行尾字節 ^ $
行首字符:如果我想要讓 the 只在行首列出呢? 這個時候就得要使用定位字節了!我們可以這樣做:
grep -n '^the' regular_express.txt
12:thesymbol '*' is representedas start. </pre>
此時,就只剩下第 12 行,因為只有第 12 行的行首是 the 開頭啊~此外, 如果我想要開頭是小寫字節的那一行就列出呢?可以這樣:
grep -n '^[a-z]' regular_express.txt
2:appleis myfavoritefood. 4:thisdressdoesn't fitme. 10:motorcycleis cheapthancar. 12:thesymbol '*' is representedas start. 18:googleis thebesttoolsfor searchkeyword. 19:goooooogleyes! 20:go! go! Let's go. </pre>
如果我不想要開頭是英文字母,則可以是這樣:
grep -n '^[^a-zA-Z]' regular_express.txt
1:"Open Source" is a goodmechanismto developprograms. 21:# I am VBird </pre>
^ 符號,在字符類符號(括號[])之內與之外是不同的! 在 [] 內代表『反向選擇』,在 [] 之外則代表定位在行首的意義!
那如果我想要找出來,行尾結束為小數點 (.) 的那一行:
grep -n '.$' regular_express.txt
1:"Open Source" is a goodmechanismto developprograms. 2:appleis myfavoritefood. 3:Footballgameis not use feetonly. 4:thisdressdoesn't fitme. 10:motorcycleis cheapthancar. 11:Thiswindowis clear. 12:thesymbol '*' is representedas start. 15:Youarethebestis meanyouaretheno. 1. 16:Theworld is thesamewith "glad". 17:I likedog. 18:googleis thebesttoolsfor searchkeyword. 20:go! go! Let's go. </pre>
特別注意到,因為小數點具有其他意義(底下會介紹),所以必須要使用轉義字符()來加以解除其特殊意義!
找出空白行:
grep -n '^$' regular_express.txt
22: </pre>
因為只有行首跟行尾 (^$),所以,這樣就可以找出空白行啦!
任意一個字節 . 與重復字節 *
這兩個符號在正則表達式的意義如下:
. (小數點):代表『一定有一個任意字節』的意思;
- (星號):代表『重復前一個字符, 0 到無窮多次』的意思,為組合形態
</pre>
假設我需要找出 g??d 的字串,亦即共有四個字節, 起頭是 g 而結束是 d ,我可以這樣做:
# grep -n 'g..d' regular_express.txt 1:"Open Source" is a goodmechanismto developprograms. 9:Oh! Thesouptastegood. 16:Theworld is thesamewith "glad".
因為強調 g 與 d 之間一定要存在兩個字節,因此,第 13 行的 god 與第 14 行的 gd 就不會被列出來啦!
如果我想要列出有 oo, ooo, oooo 等等的數據, 也就是說,至少要有兩個(含) o 以上,該如何是好?
因為 * 代表的是『重復 0 個或多個前面的 RE 字符』的意義, 因此,『o*』代表的是:『擁有空字節或一個 o 以上的字節』,因此,『 grep -n ‘o*’ regular_express.txt 』將會把所有的數據都列印出來終端上!
當我們需要『至少兩個 o 以上的字串』時,就需要 ooo* ,亦即是:
# grep -n 'ooo*' regular_express.txt 1:"Open Source" is a goodmechanismto developprograms. 2:appleis myfavoritefood. 3:Footballgameis not use feetonly. 9:Oh! Thesouptastegood. 18:googleis thebesttoolsfor searchkeyword. 19:goooooogleyes!
如果我想要字串開頭與結尾都是 g,但是兩個 g 之間僅能存在至少一個 o ,亦即是 gog, goog, gooog…. 等等,那該如何?
# grep -n 'goo*g' regular_express.txt 18:googleis thebesttoolsfor searchkeyword. 19:goooooogleyes!
如果我想要找出 g 開頭與 g 結尾的行,當中的字符可有可無
# grep -n 'g.*g' regular_express.txt 1:"Open Source" is a goodmechanismto developprograms. 14:Thegdsoftwareis a libraryfor draftingprograms. 18:googleis thebesttoolsfor searchkeyword. 19:goooooogleyes! 20:go! go! Let's go.
因為是代表 g 開頭與 g 結尾,中間任意字節均可接受,所以,第 1, 14, 20 行是可接受的喔! 這個 .* 的 RE 表示任意字符是很常見的.
如果我想要找出『任意數字』的行?因為僅有數字,所以就成為:
# grep -n '[0-9][0-9]*' regular_express.txt 5:However, this dressis about $ 3183 dollars. 15:Youarethebestis meanyouaretheno. 1.
限定連續 RE 字符范圍 {}
我們可以利用 . 與 RE 字符及 * 來配置 0 個到無限多個重復字節, 那如果我想要限制一個范圍區間內的重復字節數呢?
舉例來說,我想要找出兩個到五個 o 的連續字串,該如何作?這時候就得要使用到限定范圍的字符 {} 了。 但因為 { 與 } 的符號在 shell 是有特殊意義的,因此, 我們必須要使用字符 來讓他失去特殊意義才行。 至於 {} 的語法是這樣的,假設我要找到兩個 o 的字串,可以是:
# grep -n 'o{2}' regular_express.txt 1:"Open Source" is a goodmechanismto developprograms. 2:appleis myfavoritefood. 3:Footballgameis not use feetonly. 9:Oh! Thesouptastegood. 18:googleis thebesttoolsfor searchke 19:goooooogleyes!
假設我們要找出 g 后面接 2 到 5 個 o ,然后再接一個 g 的字串,他會是這樣:
# grep -n 'go{2,5}g' regular_express.txt 18:googleis thebesttoolsfor searchkeyword.
如果我想要的是 2 個 o 以上的 goooo….g 呢?除了可以是 gooo*g ,也可以是:
# grep -n 'go{2,}g' regular_express.txt 18:googleis thebesttoolsfor searchkeyword. 19:goooooogleyes!
擴展grep(grep -E 或者 egrep):
使用擴展grep的主要好處是增加了額外的正則表達式元字符集。
打印所有包含NW或EA的行。如果不是使用egrep,而是grep,將不會有結果查出。
# egrep 'NW|EA' testfile northwest NW CharlesMain 3.0 .98 3 34 eastern EA TBSavage 4.4 .84 5 20
對于標準grep,如果在擴展元字符前面加,grep會自動啟用擴展選項-E。
#grep 'NW|EA' testfile northwest NW CharlesMain 3.0 .98 3 34 eastern EA TBSavage 4.4 .84 5 20
搜索所有包含一個或多個3的行。
# egrep '3+' testfile # grep -E '3+' testfile # grep '3+' testfile #這3條命令將會 northwest NW CharlesMain 3.0 .98 3 34 western WE SharonGray 5.3 .97 5 23 northeast NE AMMainJr. 5.1 .94 3 13 central CT AnnStephens 5.7 .94 5 13
搜索所有包含0個或1個小數點字符的行。
# egrep '2.?[0-9]' testfile # grep -E '2.?[0-9]' testfile # grep '2.?[0-9]' testfile #首先含有2字符,其后緊跟著0個或1個點,后面再是0和9之間的數字。 western WE SharonGray 5.3 .97 5 23 southwest SW LewisDalsass 2.7 .8 2 18 eastern EA TBSavage 4.4 .84 5 20
搜索一個或者多個連續的no的行。
# egrep '(no)+' testfile # grep -E '(no)+' testfile # grep '(no)+' testfile #3個命令返回相同結果, northwest NW CharlesMain 3.0 .98 3 34 northeast NE AMMainJr. 5.1 .94 3 13 north NO MargotWeber 4.5 .89 5 9
不使用正則表達式
fgrep 查詢速度比grep命令快,但是不夠靈活:它只能找固定的文本,而不是規則表達式。
如果你想在一個文件或者輸出中找到包含星號字符的行
fgrep '*' /etc/profile for i in /etc/profile.d/*.sh ; do 或 grep -F '*' /etc/profile for i in /etc/profile.d/*.sh ; do
參考 http://vbird.dic.ksu.edu.tw/linux_basic/0330regularex_2.php
http://www.cnblogs.com/stephen-liu74/archive/2011/11/14/2243694.html
來自: http://blog.jobbole.com/103134/