shell脚本——grep详解
一、基本用法
grep是linux中很常用的一个命令，主要功能就是进行字符串数据的对比，能使用正则表达式搜索文本，并将符合用户需求的字符串打印出来。grep全称是Global Regular Expression Print，表示全局正则表达式版本，它的使用权限是所有用户。grep在数据中查找出一个字符串时，是以整行为单位来进行数据选取的。
Linux系统中grep命令是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹 配的行打印出来。grep全称是Global Regular Expression Print，表示全局正则表达式版本，它的使用权限是所有用户。
1、命令格式
grep [cinvs] 'patten' filename
2、主要参数 [options]主要参数：
1 -a或--text 不要忽略二进制的数据。 2 -A<显示列数>或--after-context=<显示列数> 除了显示符合范本样式的那一列之外，并显示该列之后的内容。 3 -b或--byte-offset 在显示符合范本样式的那一列之前，标示出该列第一个字符的位编号。 4 -B<显示列数>或--before-context=<显示列数> 除了显示符合范本样式的那一列之外，并显示该列之前的内容。 5 -c或--count 计算符合范本样式的列数。 6 -C<显示列数>或--context=<显示列数>或-<显示列数> 除了显示符合范本样式的那一列之外，并显示该列之前后的内容。 7 -d<进行动作>或--directories=<进行动作> 当指定要查找的是目录而非文件时，必须使用这项参数，否则grep指令将回报信息并停止动作。 8 -e<范本样式>或--regexp=<范本样式> 指定字符串做为查找文件内容的范本样式。 9 -E或--extended-regexp 将范本样式为延伸的普通表示法来使用。 10 -f<范本文件>或--file=<范本文件> 指定范本文件，其内容含有一个或多个范本样式，让grep查找符合范本条件的文件内容，格式为每列一个范本样式。 11 -F或--fixed-regexp 将范本样式视为固定字符串的列表。 12 -G或--basic-regexp 将范本样式视为普通的表示法来使用。 13 -h或--no-filename 在显示符合范本样式的那一列之前，不标示该列所属的文件名称。 14 -H或--with-filename 在显示符合范本样式的那一列之前，表示该列所属的文件名称。 15 -i或--ignore-case 忽略字符大小写的差别。 16 -l或--file-with-matches 列出文件内容符合指定的范本样式的文件名称。 17 -L或--files-without-match 列出文件内容不符合指定的范本样式的文件名称。 18 -n或--line-number 在显示符合范本样式的那一列之前，标示出该列的列数编号。 19 -q或--quiet或--silent 不显示任何信息。 20 -r或--recursive 此参数的效果和指定“-d recurse”参数相同。 21 -s或--no-messages 不显示错误信息。 22 -v或--revert-match 反转查找。 23 -V或--version 显示版本信息。 24 -w或--word-regexp 只显示全字符合的列。 25 -x或--line-regexp 只显示全列符合的列。 26 -y 此参数的效果和指定“-i”参数相同。 27 --help 在线帮助。
-v或--revert-match 反转查找。例如：
1 [alwen@alwen grep]$ grep -Ein '^linux' grep.txt 2 1:linux is file system 3 7:Linux flume 4 [alwen@alwen grep]$ grep -Einv '^linux' grep.txt 5 2:haoop is file system 6 3:java is an languange 7 4:scala is languange too. 8 5:python is 解释性语言。 9 6:hive spark kafka 10 8:zookeeper 11 9:hbase linux 12 10:flink 13 11:c++ 14 12:azkaban 15 13:192.168.17.137
3、 pattern正则表达式主要参数：
1 \： 忽略正则表达式中特殊字符的原有含义。 2 ^：匹配正则表达式的开始行。 3 $: 匹配正则表达式的结束行。 4 \<：从匹配正则表达 式的行开始。 5 \>：到匹配正则表达式的行结束。 6 [ ]：单个字符，如[A]即A符合要求 。 7 [ - ]：范围，如[A-Z]，即A、B、C一直到Z都符合要求 。 8 .：所有的单个字符。 9 * ：有字符，长度可以为0
注意：[^ ] :^在[]括号内 时 表示 非，相反的意思，例如：
1 [alwen@alwen grep]$ grep -Ein '^[^linux]' grep.txt 2 2:haoop is file system 3 3:java is an languange 4 4:scala is languange too. 5 5:python is 解释性语言。 6 6:hive spark kafka 7 8:zookeeper 8 9:hbase linux 9 10:flink 10 11:c++ 11 12:azkaban 12 13:192.168.17.137
4.grep命令使用简单实例
1 $ grep ‘test’ d* 2 显示所有以d开头的文件中包含 test的行。 3 $ grep ‘test’ aa bb cc 4 显示在aa，bb，cc文件中匹配test的行。 5 $ grep ‘[a-z]\{5\}’ aa 6 显示所有包含每个字符串至少有5个连续小写字符的字符串的行。 7 $ grep ‘w\(es\)t.*\1′ aa 8 如果west被匹配，则es就被存储到内存中，并标记为1，然后搜索任意个字符(.*)，这些字符后面紧跟着 另外一个es(\1)，找到就显示该行。如果用egrep或grep -E，就不用”\”号进行转义，直接写成’w(es)t.*\1′就可以了 9 #netstat -nap|grep 80 10 上面命令查询监听80端口的行。 11 #grep -n "world" hello.txt 12 查询文件hello.txt中含有"world"字符串的行，并显示行号。 13 #grep -n "printf" main.c hello.c world.c 14 在源码文件main.c、hello.c和world.c中查询调用了printf函数的行，并显示行号。 15 #grep -n "printf" * 16 在当前目录的所有文件中查询调用了printf函数的行，并显示行号。也可以指定路径，比如：/usr/local/include/*。 17 #grep -r "printf" * 18 在当前目录及所有子目录下递归查找调用了printf函数的行，并显示行号。
5.grep命令使用复杂实例
1 假设您正在’/usr/src/Linux/Doc’目录下搜索带字符 串’magic’的文件： 2 $ grep magic /usr/src/Linux/Doc/* 3 sysrq.txt:* How do I enable the magic SysRQ key? 4 sysrq.txt:* How do I use the magic SysRQ key? 5 其中文件’sysrp.txt’包含该字符串，讨论的是 SysRQ 的功能。 6 默认情况下，’grep’只搜索当前目录。如果 此目录下有许多子目录，’grep’会以如下形式列出： 7 grep: sound: Is a directory 8 这可能会使’grep’ 的输出难于阅读。这里有两种解决的办法： 9 明确要求搜索子目录：grep -r 10 或忽略子目录：grep -d skip 11 如果有很多 输出时，您可以通过管道将其转到’less’上阅读： 12 $ grep magic /usr/src/Linux/Documentation/* | less 13 这样，您就可以更方便地阅读。
下面还有一些有意思的命令行参数：
1 grep -i pattern files ：不区分大小写地搜索。默认情况区分大小写， 2 grep -l pattern files ：只列出匹配的文件名， 3 grep -L pattern files ：列出不匹配的文件名， 4 grep -w pattern files ：只匹配整个单词，而不是字符串的一部分(如匹配’magic’，而不是’magical’)， 5 grep -C number pattern files ：匹配的上下文分别显示[number]行， 6 grep pattern1 | pattern2 files ：显示匹配 pattern1 或 pattern2 的行， 7 grep pattern1 files | grep pattern2 ：显示既匹配 pattern1 又匹配 pattern2 的行。 8 9 grep -n pattern files 即可显示行号信息 10 11 grep -c pattern files 即可查找总行数 12 13 这里还有些用于搜索的特殊符号： 14 \< 和 \> 分别标注单词的开始与结尾。 15 例如： 16 grep man * 会匹配 ‘Batman’、’manic’、’man’等， 17 grep ‘\<man’ * 匹配’manic’和’man’，但不是’Batman’， 18 grep ‘\<man\>’ 只匹配’man’，而不是’Batman’或’manic’等其他的字符串。 19 ‘^’：指匹配的字符串在行首， 20 ‘$’：指匹配的字符串在行 尾，
[alwen@alwen grep]$ grep -En '[0-9]+\.[0-9]+\.[0-9]+\.[0-9]+' grep.txt 13:192.168.17.137
匹配空行：
1 [alwen@alwen grep]$ grep -En '^$' grep.txt 2 12: 3 13:
匹配指定个数：
1 [alwen@alwen grep]$ grep -En "a{3,5}" grep.txt 2 13:aaa 3 15:aaaaaa 4 16:aaaa 5 18:aaaaaaaa 6 19:aaaaaaaaaaaa 7 [alwen@alwen grep]$ grep -En "^a{3,5}$" grep.txt 8 13:aaa 9 16:aaaa
查找文件或文件夹：
1 [alwen@alwen opt]$ ll |grep -En '^-' 2 2:-rw-rw-r--. 1 alwen alwen 0 6月 8 22:57 file 3 3:-rw-rw-r--. 1 alwen alwen 0 6月 8 22:57 file1 4 4:-rw-rw-r--. 1 alwen alwen 0 6月 8 22:57 file2 5 [alwen@alwen opt]$ ll |grep -En '^d' 6 5:drwxrwxr-x. 2 alwen alwen 22 6月 8 22:48 grep 7 6:drwxrwxr-x+ 2 root root 6 10月 31 2018 rh 8 7:drwxrwxr-x+ 3 root root 114 6月 7 22:21 shell