文本过滤之grep,egreo及fgrep 三剑客及正则表达式

关于grep,egrep以及fgrep,是我们linux服务器中常用的文本过滤工具。掌握好这三个工具并结合正则表达式,对我们日后的运维工作有很大的帮助。

1.grep,egrep,及fgrep区别。

三者的主要区别在于对正则表达式的支持不同。首先,grep支持的是标准正则表达式;而egrep及grep -e则支持的是扩展正则表达式;至于fgrep,是不支持正则表达式的,在本文也就不再赘述。但是其在速度方面,相对前面两者,就比较快了,在精确匹配是就很好用。

2.支持的常用选项

选项

作用

--color=auto

设置语法着色(可用alias默认使用)

-v

反向选取

-o

仅显示匹配到的字符串

-i

不区分大小写

-E(仅grep支持)

使用扩展正则表达式

-A #

显示匹配到行及其前的#行

-B #

显示匹配到行及其后的#行

-C #

显示匹配到行及其前的#行和其后的#行

3.常用字符合集(注:可在正则表达式的字符匹配中结合[]或[^]使用)

[:digit:] 所有数字
[:lower:] 所有小写字母
[:upper:] 所有大些字母
[:space:] 空白字符
[:punct:] 标点符号
[:alpha:] 大写加小写字母
[:alnum:] 所有字母加数字

4.标准正则表达式的元字符

(注:为了使效果更明显,已设置别名alias grep="grep --color=auto".所使用示例文件在文章最下方)

  • 字符匹配

.:匹配任意单个字符

[root@localhost ~]# grep "r..t" /etc/passwd root:x:0:0:root:/root:/bin/bashoperator:x:11:0:operator:/root:/sbin/nologinftp:x:14:50:FTP User:/var/ftp:/sbin/nologin

[]:匹配指定范围内的任意单个字符

[root@localhost ~]# grep "r[[:alpha:]].t" /etc/passwdroot:x:0:0:root:/root:/bin/bashoperator:x:11:0:operator:/root:/sbin/nologin

如上所示,[:alpha:]表示所有字母的集合,所以外边再加个[]就是所有小写字母其中的一个了。

所以在第一次匹配的v/ftp也就因为第二个不是字母而没有匹配到了.

[^]取反,也就是指定范围外的任意单个字符

[root@localhost ~]# grep "r[^[:alpha:]].t" /etc/passwdftp:x:14:50:FTP User:/var/ftp:/sbin/nologin

如上图,[:alpha:]表示所有字母的集合,所以外边再加个[^]就是非所有小写字母其中的一个。

所以root就匹配不到,而v/ftp就匹配到了.

  • 次数匹配

*:任意其前面的字符任意次

[root@localhost ~]# grep “b*c” testbcbbcabbbc

\?:匹配其前字符零次或一次

[root@localhost ~]# grep "b\?c" testbcbbcabbbc

\{m,n\}:匹配其前面的字符至少m,至多n次

[root@localhost ~]# grep "b\{2,3\}c" test bbcabbbc

\{m\}:匹配其前面的字符m次

[root@localhost ~]# grep "b\{2\}c" test bbcabbbc

\{0,n\}:表示匹配其前面的字符至多n此

[root@localhost ~]# grep "b\{0,2\}c" test bcbbcabbbc

\{m,\}:表示匹配其前面的字符至少m次

[root@localhost ~]# grep "b\{3,\}c" test abbbc

  • 位置锚定

^:锚定每行的起始位置

[root@localhost ~]# grep "^bc" test bcbbc

$:锚定每行的结束位置

[root@localhost ~]# grep "bc$" test bcbbcabbbc

\<:锚定词首

[root@localhost ~]# grep "\<cd" test1ab.cd.ef

\>:锚定词尾 注:不包含特殊字符组成的串叫单词

[root@localhost ~]# grep "b\>" test1ab.cd.ef

\b:等同于\<或\>,在单词左边为锚定词首,反之为锚定词尾

[root@localhost ~]# grep "\bcd" test1ab.cd.ef[root@localhost ~]# grep "b\b" test1ab.cd.ef

^$:没有任何字符的空白行

[root@localhost ~]# grep "^$" test1

  • 分组,引用及或

\(\):可以将一串字符串引用起来,并可以结合次数匹配使用,也可以使用\n进行引用

[root@localhost ~]# grep "\(abc\)\{2\}" test2abcabcabc[root@localhost ~]# grep "\(a.c\).*\1" test2 #\n 表示引用第n个括号匹配到的内容,而非模式本身,所以 abczzzzzzzzzzza;c就没有被匹配到abcabcabcabczzzzzzzzzzzabca;czzzzzzzzzzza;c

\|:或者的意思

[root@localhost ~]# grep "abc\|def" test3abcefabdefabcdef[root@localhost ~]# grep "ab\(c\|d\)ef" test3#或表示其前方的字符串或后面的字符串,而非单个字符,欲匹配单个字符,可以结合\(\)使用abcefabdef

5.扩展正则表达式

关于扩展正则表达式的元字符大体上和标准正则表达式是一样的,只是在一些元字符使用时,不再需要使用\进行转义,只有在使用词首锚定(\<),词尾锚定(\>)以及分组的引用(\n)时转义,可以使模式更加简洁,可读性也会更强.同时也可以使用 + 表示匹配其前面的字符至少1次。

-----------------------------------华丽的分割线--------------------------------------

附:

上述示例使用文件内容

[root@localhost ~]# cat testbcbbcabbbc

[root@localhost ~]# cat test1ab.cd.efabcdefabde.ef

[root@localhost ~]# cat test2abcabcabcabcabczzzzzzzzzzzabca;czzzzzzzzzzza;cabczzzzzzzzzzza;c

[root@localhost ~]# cat test3abcefabdefabcdef

原文发布于微信公众号 - 马哥Linux运维(magedu-Linux)

原文发表时间:2014-08-08

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏iOSer成长记录

iOS-Strong/Copy修饰词

1033
来自专栏菜鸟计划

angularjs filter详解

过滤器(filter)正如其名,作用就是接收一个输入,通过某个规则进行处理,然后返回处理后的结果。 主要用在数据的格式化上,例如获取一个数组中的子集,对数组中的...

3698
来自专栏aCloudDeveloper

指向函数的指针

Author: bakari   Date: 2012.8.8 做好总结我觉得是把知识学扎实必不可少的实践环节。这个知识点是当初自己在学习这一块做的一些笔记,现...

1956
来自专栏阿凯的Excel

Python读书笔记(变量)

前言:本系列为小编的读书笔记,非教学课程;小编只是想用平实的语言翻译一下自己所学的东西。 首先什么是变量呢? 百度百科:变量来源于数学,是计算机语言中能储存计算...

36810
来自专栏北京马哥教育

Python2.x与3​​.x版本区别

? 文 | 豌豆 来源 | 菜鸟教程 Python的3.0版本,常被称为Python 3000,或简称Py3k。相对于Python的早期版本,这是一个较...

3436
来自专栏深度学习自然语言处理

谈一谈python中的魔法变量*args和**kwargs

,没有注释,没有封装,没有可读性。哎,幸亏发现及时,现在正在写一个新的任务,刚好可以好好弄弄架构和代码了!

973
来自专栏简书专栏

Python入门

多媒体应用、WEB开发、网络爬虫、人工智能与机器学习、数据分析处理、服务器运维及其他小工具 知乎链接:用python做一些有趣的事情

2033
来自专栏java达人

最有价值的50道java面试题(二)

来自骆昊的技术专栏 26、抽象的(abstract)方法是否可同时是静态的(static),是否可同时是本地方法(native),是否可同时被synchron...

28410
来自专栏Pythonista

封装与扩展性

封装在于明确区分内外,使得类实现者可以修改封装内的东西而不影响外部调用者的代码;而外部使用用者只知道一个接口(函数),只要接口(函数)名、参数不变,使用者的代码...

923
来自专栏Jimoer

Java设计模式学习记录-原型模式

1425

扫码关注云+社区

领取腾讯云代金券