shell腳本——grep詳解
一、基本用法
grep是linux中很常用的一個命令，主要功能就是進行字符串數據的對比，能使用正則表達式搜索文本，並將符合用戶需求的字符串打印出來。grep全稱是Global Regular Expression Print，表示全局正則表達式版本，它的使用權限是所有用戶。grep在數據中查找出一個字符串時，是以整行為單位來進行數據選取的。
Linux系統中grep命令是一種強大的文本搜索工具，它能使用正則表達式搜索文本，並把匹 配的行打印出來。grep全稱是Global Regular Expression Print，表示全局正則表達式版本，它的使用權限是所有用戶。
1、命令格式
grep [cinvs] 'patten' filename
2、主要參數 [options]主要參數：
1 -a或--text 不要忽略二進制的數據。 2 -A<顯示列數>或--after-context=<顯示列數> 除了顯示符合范本樣式的那一列之外，並顯示該列之后的內容。 3 -b或--byte-offset 在顯示符合范本樣式的那一列之前，標示出該列第一個字符的位編號。 4 -B<顯示列數>或--before-context=<顯示列數> 除了顯示符合范本樣式的那一列之外，並顯示該列之前的內容。 5 -c或--count 計算符合范本樣式的列數。 6 -C<顯示列數>或--context=<顯示列數>或-<顯示列數> 除了顯示符合范本樣式的那一列之外，並顯示該列之前后的內容。 7 -d<進行動作>或--directories=<進行動作> 當指定要查找的是目錄而非文件時，必須使用這項參數，否則grep指令將回報信息並停止動作。 8 -e<范本樣式>或--regexp=<范本樣式> 指定字符串做為查找文件內容的范本樣式。 9 -E或--extended-regexp 將范本樣式為延伸的普通表示法來使用。 10 -f<范本文件>或--file=<范本文件> 指定范本文件，其內容含有一個或多個范本樣式，讓grep查找符合范本條件的文件內容，格式為每列一個范本樣式。 11 -F或--fixed-regexp 將范本樣式視為固定字符串的列表。 12 -G或--basic-regexp 將范本樣式視為普通的表示法來使用。 13 -h或--no-filename 在顯示符合范本樣式的那一列之前，不標示該列所屬的文件名稱。 14 -H或--with-filename 在顯示符合范本樣式的那一列之前，表示該列所屬的文件名稱。 15 -i或--ignore-case 忽略字符大小寫的差別。 16 -l或--file-with-matches 列出文件內容符合指定的范本樣式的文件名稱。 17 -L或--files-without-match 列出文件內容不符合指定的范本樣式的文件名稱。 18 -n或--line-number 在顯示符合范本樣式的那一列之前，標示出該列的列數編號。 19 -q或--quiet或--silent 不顯示任何信息。 20 -r或--recursive 此參數的效果和指定“-d recurse”參數相同。 21 -s或--no-messages 不顯示錯誤信息。 22 -v或--revert-match 反轉查找。 23 -V或--version 顯示版本信息。 24 -w或--word-regexp 只顯示全字符合的列。 25 -x或--line-regexp 只顯示全列符合的列。 26 -y 此參數的效果和指定“-i”參數相同。 27 --help 在線幫助。
-v或--revert-match 反轉查找。例如：
1 [alwen@alwen grep]$ grep -Ein '^linux' grep.txt 2 1:linux is file system 3 7:Linux flume 4 [alwen@alwen grep]$ grep -Einv '^linux' grep.txt 5 2:haoop is file system 6 3:java is an languange 7 4:scala is languange too. 8 5:python is 解釋性語言。 9 6:hive spark kafka 10 8:zookeeper 11 9:hbase linux 12 10:flink 13 11:c++ 14 12:azkaban 15 13:192.168.17.137
3、 pattern正則表達式主要參數：
1 \： 忽略正則表達式中特殊字符的原有含義。 2 ^：匹配正則表達式的開始行。 3 $: 匹配正則表達式的結束行。 4 \<：從匹配正則表達 式的行開始。 5 \>：到匹配正則表達式的行結束。 6 [ ]：單個字符，如[A]即A符合要求 。 7 [ - ]：范圍，如[A-Z]，即A、B、C一直到Z都符合要求 。 8 .：所有的單個字符。 9 * ：有字符，長度可以為0
注意：[^ ] :^在[]括號內 時 表示 非，相反的意思，例如：
1 [alwen@alwen grep]$ grep -Ein '^[^linux]' grep.txt 2 2:haoop is file system 3 3:java is an languange 4 4:scala is languange too. 5 5:python is 解釋性語言。 6 6:hive spark kafka 7 8:zookeeper 8 9:hbase linux 9 10:flink 10 11:c++ 11 12:azkaban 12 13:192.168.17.137
4.grep命令使用簡單實例
1 $ grep ‘test’ d* 2 顯示所有以d開頭的文件中包含 test的行。 3 $ grep ‘test’ aa bb cc 4 顯示在aa，bb，cc文件中匹配test的行。 5 $ grep ‘[a-z]\{5\}’ aa 6 顯示所有包含每個字符串至少有5個連續小寫字符的字符串的行。 7 $ grep ‘w\(es\)t.*\1′ aa 8 如果west被匹配，則es就被存儲到內存中，並標記為1，然后搜索任意個字符(.*)，這些字符后面緊跟着 另外一個es(\1)，找到就顯示該行。如果用egrep或grep -E，就不用”\”號進行轉義，直接寫成’w(es)t.*\1′就可以了 9 #netstat -nap|grep 80 10 上面命令查詢監聽80端口的行。 11 #grep -n "world" hello.txt 12 查詢文件hello.txt中含有"world"字符串的行，並顯示行號。 13 #grep -n "printf" main.c hello.c world.c 14 在源碼文件main.c、hello.c和world.c中查詢調用了printf函數的行，並顯示行號。 15 #grep -n "printf" * 16 在當前目錄的所有文件中查詢調用了printf函數的行，並顯示行號。也可以指定路徑，比如：/usr/local/include/*。 17 #grep -r "printf" * 18 在當前目錄及所有子目錄下遞歸查找調用了printf函數的行，並顯示行號。
5.grep命令使用復雜實例
1 假設您正在’/usr/src/Linux/Doc’目錄下搜索帶字符 串’magic’的文件： 2 $ grep magic /usr/src/Linux/Doc/* 3 sysrq.txt:* How do I enable the magic SysRQ key? 4 sysrq.txt:* How do I use the magic SysRQ key? 5 其中文件’sysrp.txt’包含該字符串，討論的是 SysRQ 的功能。 6 默認情況下，’grep’只搜索當前目錄。如果 此目錄下有許多子目錄，’grep’會以如下形式列出： 7 grep: sound: Is a directory 8 這可能會使’grep’ 的輸出難於閱讀。這里有兩種解決的辦法： 9 明確要求搜索子目錄：grep -r 10 或忽略子目錄：grep -d skip 11 如果有很多 輸出時，您可以通過管道將其轉到’less’上閱讀： 12 $ grep magic /usr/src/Linux/Documentation/* | less 13 這樣，您就可以更方便地閱讀。
下面還有一些有意思的命令行參數：
1 grep -i pattern files ：不區分大小寫地搜索。默認情況區分大小寫， 2 grep -l pattern files ：只列出匹配的文件名， 3 grep -L pattern files ：列出不匹配的文件名， 4 grep -w pattern files ：只匹配整個單詞，而不是字符串的一部分(如匹配’magic’，而不是’magical’)， 5 grep -C number pattern files ：匹配的上下文分別顯示[number]行， 6 grep pattern1 | pattern2 files ：顯示匹配 pattern1 或 pattern2 的行， 7 grep pattern1 files | grep pattern2 ：顯示既匹配 pattern1 又匹配 pattern2 的行。 8 9 grep -n pattern files 即可顯示行號信息 10 11 grep -c pattern files 即可查找總行數 12 13 這里還有些用於搜索的特殊符號： 14 \< 和 \> 分別標注單詞的開始與結尾。 15 例如： 16 grep man * 會匹配 ‘Batman’、’manic’、’man’等， 17 grep ‘\<man’ * 匹配’manic’和’man’，但不是’Batman’， 18 grep ‘\<man\>’ 只匹配’man’，而不是’Batman’或’manic’等其他的字符串。 19 ‘^’：指匹配的字符串在行首， 20 ‘$’：指匹配的字符串在行 尾，
[alwen@alwen grep]$ grep -En '[0-9]+\.[0-9]+\.[0-9]+\.[0-9]+' grep.txt 13:192.168.17.137
匹配空行：
1 [alwen@alwen grep]$ grep -En '^$' grep.txt 2 12: 3 13:
匹配指定個數：
1 [alwen@alwen grep]$ grep -En "a{3,5}" grep.txt 2 13:aaa 3 15:aaaaaa 4 16:aaaa 5 18:aaaaaaaa 6 19:aaaaaaaaaaaa 7 [alwen@alwen grep]$ grep -En "^a{3,5}$" grep.txt 8 13:aaa 9 16:aaaa
查找文件或文件夾：
1 [alwen@alwen opt]$ ll |grep -En '^-' 2 2:-rw-rw-r--. 1 alwen alwen 0 6月 8 22:57 file 3 3:-rw-rw-r--. 1 alwen alwen 0 6月 8 22:57 file1 4 4:-rw-rw-r--. 1 alwen alwen 0 6月 8 22:57 file2 5 [alwen@alwen opt]$ ll |grep -En '^d' 6 5:drwxrwxr-x. 2 alwen alwen 22 6月 8 22:48 grep 7 6:drwxrwxr-x+ 2 root root 6 10月 31 2018 rh 8 7:drwxrwxr-x+ 3 root root 114 6月 7 22:21 shell