Grep 高效用法实战总结 - 运维笔记

• 博客园
• 首页
• 新随笔
• 联系
• 管理
• 订阅

随笔- 556  文章- 37  评论- 778 

grep（global search regular expression(RE) and print out the line，全面搜索正则表达式并把行打印出来）是一种强大的文本搜索工具，能使用正则表达式搜索文本，并把匹配的行打印出来。grep主要作用是过滤出指定的行，指定的行满足什么条件，满足的条件可配合正则表达式来表示，实现强大的文本处理。

文本处理工具分类 常用的有：grep，egrep，fgrep。

三者区别grep： 在没有参数的情况下，只输出符合RE（Regular expression）字符。egrep：等同于grep -E，和grep最大的区别就是表现在转义符上, 比如grep 做次数匹配时{n,m}, egrep则不需要直接{n，m}。egrep显得更方便简洁。fgrep：等同于grep -f，但是不能使用正则表达式。所有的字符匹配功能均已消失。

grep格式 grep [option] pattern filename

grep的option选项说明

grep正则表达式元字符集（基本集）

POSIX字符类   (注意使用的时候，外面要套一层中括号才能生效) 为了在不同国家的字符编码中保持一致，POSIX(The Portable Operating System Interface)增加了特殊的字符类，如[:alnum:]是A-Za-z0-9的另一个写法。要把它们放到[]号内才能成为正则表达式，如[A- Za-z0-9]或[[:alnum:]]。在linux下的grep除fgrep外，都支持POSIX的字符类。

grep引号使用问题

grep -E 与 grep -P区别  [ 正则中的 ?= 、?<= 、?! 、?<! ]

grep 常用操作技巧                                                                         1）在文件中搜索一个单词，命令会返回一个包含"match_pattern"的文本行： [root@test ~]# grep match_pattern file_name 2）在多个文件中查找： [root@test ~]# grep "match_pattern" file_1 file_2 file_3 ... 3）输出除之外的所有行 -v 选项： [root@test ~]# grep -v "match_pattern" file_name 4）标记匹配颜色 --color=auto 选项： [root@test ~]# grep "match_pattern" file_name --color=auto 5）使用正则表达式 -E 选项： [root@test ~]# grep -E "[1-9]+" 或 [root@test ~]# egrep "[1-9]+" 6) 只输出文件中匹配到的部分 -o 选项： [root@test ~]# echo this is a test line. | grep -o -E "[a-z]+." line. [root@test ~]# echo this is a test line. | egrep -o "[a-z]+." line. 7）统计文件或者文本中包含匹配字符串的行数 -c 选项： [root@test ~]# grep -c "text" file_name 8）输出包含匹配字符串的行数 -n 选项： [root@test ~]# grep "text" -n file_name 或 [root@test ~]# cat file_name | grep "text" -n 9）多个文件 [root@test ~]# grep "text" -n file_1 file_2 10）打印样式匹配所位于的字符或字节偏移： [root@test ~]# echo gun is not unix | grep -b -o "not" 7:not #一行中字符串的字符便宜是从该行的第一个字符开始计算，起始值为0。选项 -b -o 一般总是配合使用。 11）搜索多个文件并查找匹配文本在哪些文件中： [root@test ~]# grep -l "text" file1 file2 file3...

grep递归搜索文件                                                                                 12）在多级目录中对文本进行递归搜索： [root@test ~]# grep "text" . -r -n .表示当前目录。 13）忽略匹配样式中的字符大小写： [root@test ~]# echo "hello world" | grep -i "HELLO" hello 14）选项 -e 制动多个匹配样式： [root@test ~]# echo this is a text line | grep -e "is" -e "line" -o is is line 15）也可以使用-f选项来匹配多个样式，在样式文件中逐行写出需要匹配的字符。 [root@test ~]# cat patfile aaa bbb [root@test ~]# echo aaa bbb ccc ddd eee | grep -f patfile -o

在grep搜索结果中包括或者排除指定文件                                               16）只在目录中所有的.php和.html文件中递归搜索字符"main()" [root@test ~]# grep "main()" . -r --include *.{php,html} 17）在搜索结果中排除所有README文件 [root@test ~]# grep "main()" . -r --exclude "README" 18）在搜索结果中排除filelist文件列表里的文件 [root@test ~]# grep "main()" . -r --exclude-from filelist 19）使用0值字节后缀的grep与xargs： #测试文件： [root@test ~]# echo "aaa" > file1 [root@test ~]# echo "bbb" > file2 [root@test ~]# echo "aaa" > file3 [root@test ~]# grep "aaa" file* -lZ | xargs -0 rm 20）执行后会删除file1和file3，grep输出用-Z选项来指定以0值字节作为终结符文件名（0），xargs -0 读取输入并用0值字节终结符分隔文件名，然后删除匹配文件，-Z通常和-l结合使用。"grep -q"用于if逻辑判断，特别好用！-q 参数意为安静模式，不打印任何标准输出。如果有匹配的内容则立即返回状态值0。 grep -q 静默输出： [root@test ~]# grep -q "test" filename 不会输出任何信息，如果命令运行成功返回0，失败则返回非0值。一般用于if条件测试。

打印出匹配文本之前或者之后的行                                                        21）显示匹配某个结果之后的3行，使用 -A 选项： [root@test ~]# seq 10 | grep "5" -A 3 5 6 7 8 22）显示匹配某个结果之前的3行，使用 -B 选项： [root@test ~]# seq 10 | grep "5" -B 3 2 3 4 5 23）显示匹配某个结果的前三行和后三行，使用 -C 选项： [root@test ~]# seq 10 | grep "5" -C 3 2 3 4 5 6 7 8 24）如果匹配结果有多个，即多重匹配的话，中间会用"--"作为各匹配结果之间的分隔符： [root@test ~]# echo -e "a b c a b c" | grep a -A 1 a b -- a b [root@test ~]# grep "match_pattern" file_name

grep同时筛选多个条件                                                                        

grep精确匹配关键字符                                                                         使用grep搜索某个关键字时，默认搜索出来的是所有包含该关键字的行，如下： 搜索/var/named/veredholdings.cn_zone文件中172.16.50.24所在的行，默认会把所有包括172.16.50.24所在的行打印出来。 [root@uatdns01 ~]# cat /var/named/veredholdings.cn_zone|grep 172.16.50.24 devzl-app01         IN    A     172.16.50.243 devzl-app02         IN    A     172.16.50.244 devzl-redis01       IN    A     172.16.50.245 devzl-redis02       IN    A     172.16.50.246 devzl-redis03       IN    A     172.16.50.247 devzl-oracle01     IN    A     172.16.50.242 wiki02                  IN     A     172.16.50.24

[root@uatdns01 ~]# cat /var/named/veredholdings.cn_zone|grep 172.16.50.24 --color devzl-app01         IN    A      172.16.50.243 devzl-app02         IN    A       172.16.50.244 devzl-redis01       IN    A       172.16.50.245 devzl-redis02       IN    A        172.16.50.246 devzl-redis03       IN    A        172.16.50.247 devzl-oracle01     IN    A        172.16.50.242 wiki02                  IN     A        172.16.50.24

[root@uatdns01 ~]# cat /var/named/veredholdings.cn_zone|grep -o 172.16.50.24 172.16.50.24 172.16.50.24 172.16.50.24 172.16.50.24 172.16.50.24 172.16.50.24 172.16.50.24

要想精确地搜索出文件中某个单词所在的行，而不是打印所有包括该单词字样的行，可以使用grep -w参数 -w（--word-regexp）：表示强制PATTERN仅完全匹配字词 [root@uatdns01 ~]# cat /var/named/veredholdings.cn_zone|grep -w 172.16.50.24 wiki02      IN      A      172.16.50.24 或者使用使用<>单字边界也可以实现精确匹配（注意两边要加上双引号） [root@uatdns01 named]# cat /var/named/veredholdings.cn_zone|grep "<172.16.50.24>" wiki02      IN     A       172.16.50.24 或者使用单词锁定符b也可以实现精确匹配。 [root@uatdns01 named]# cat /var/named/veredholdings.cn_zone|grep "b172.16.50.24b>" wiki02      IN     A       172.16.50.24

两个小面试题 1）精确地找出名为abc的进程名。 # ps -ef|grep -w "abc" 或者 # ps -ef|grep "<abc>" 或者 # ps -ef|grep "babcb" 2）判断该进程的数量是否在3-5之间。 # ps -ef|grep -w abc|wc -l 或者 # ps -ef|grep "<abc>"|wc -l

小示例1

小示例2 

grep高效搜索用法大全