专栏首页程序员小助手学校早这么教正则表达式,少走多少弯路!那个分组用法震到我了

学校早这么教正则表达式,少走多少弯路!那个分组用法震到我了

引言

grep是Linux中用于文件处理的最有用和最强大的命令之一。

grep在一个或多个输入文件中搜索与正则表达式匹配的行,并将每个匹配的行写入标准输出。

在本文中,我们将探索如何在grep的GNU版本中使用正则表达式的基础知识,该版本在大多数Linux操作系统中默认可用。

grep的正则表达式

正则表达式(regex)是与一组字符串匹配的模式。模式由操作符、构造文字字符和元字符组成,它们具有特殊的含义。

GNU grep 支持三种正则表达式语法:Basic、Extended和Perl兼容。

在其最简单的形式中,当没有给定正则表达式类型时,grep将搜索模式解释为基本正则表达式。

要将模式解释为扩展正则表达式,请使用-E(或--tended-regexp)选项。

在GNU的grep实现中,基本正则表达式语法和扩展正则表达式语法之间没有功能差异。唯一的区别是,在基本正则表达式中,元字符?、+、{、|、(和)被解释为文字字符。

要在使用基本正则表达式时保留元字符的特殊含义,必须使用反斜杠(\)对字符进行转义。我们稍后将解释这些元字符和其他元字符的含义。

通常,你应该始终用单引号将正则表达式括起来,以避免shell解释和扩展元字符。

文本匹配

grep命令最基本的用法是在文件中搜索文字字符或字符序列。

例如,要显示/etc/passwd文件中包含字符串“bash”的所有行,你可以运行以下命令:

grep bash /etc/passwd

输出内容如下:

root:x:0:0:root:/root:/bin/bash
coder:x:1000:1000:coder:/home/coder:/bin/bash

在本例中,字符串“bash”是一个基本的正则表达式,由四个文字字符组成。这告诉grep搜索“b”紧跟“a”、“s”和“h”的字符串。

默认情况下,grep命令区分大小写。这意味着大写和小写字符被视为不同字符。要在搜索时忽略大小写,请使用-i选项(或--Ignore-case)。

需要注意的是,grep将搜索模式作为字符串而不是单词进行查找。因此,如果你要搜索“gnu”,grep还会打印“gnu”嵌入较大单词的行,例如“cygnus”或“magum”。

如果搜索字符串包含空格,则需要用单引号或双引号将其引起来:

grep "FTP User" /etc/passwd

锚点

锚点是元字符,允许您指定必须在行中的什么位置找到匹配项。^(脱字符)与行首的空字符串匹配。

在下面的示例中,字符串“linux”只有在行首出现时才会匹配。

grep '^linux' file.txt

$(dollar)符号与行首的空字符串匹配。要查找以字符串“linux”结尾的行,你可以使用:

grep 'linux$' file.txt

你还可以使用这两个锚点构造正则表达式。例如,要查找仅包含“linux”的行,请运行:

grep '^linux$' file.txt

如果用来匹配空白行,可以使用“^$”模式。

匹配单个字符

那个.(英文句号)符号是匹配任何单个字符的元字符。

例如,要匹配以“kan”开头、然后有两个字符、以字符串“roo”结尾的任何内容,可以使用以下模式:

grep 'kan..roo' file.txt

这样可以匹配出含有 kangaroo 的行。

方括号表达式

方括号表达式允许通过将一组字符括在方括号[]中来匹配它们。例如,查找包含“accept”或“accent”的行,可以使用以下表达式:

grep 'acce[np]t' file.txt

如果方括号内的第一个字符是脱字符^,则它匹配方括号中未括起的任何单个字符。

以下模式将匹配以“co”开头、后跟除“l”和“la”之外的任何字母的任意字符串组合,如“coca”、“cobalt”等,但不匹配包含“cola”的行:

grep 'co[^l]a' file.txt

你可以在方括号内指定一个字符范围,而不是逐个放置字符。

范围表达式是通过指定用连字符分隔的范围的第一个和最后一个字符来构造的。例如,[a-a]相当于[abcde],[1-3]相当于[123]。

以下表达式匹配以大写字母开头的每一行:

grep '^[A-Z]' file.txt

grep还支持用括号括起来的预定义字符类。下表显示了一些最常见的字符类:

  • [:alnum:] 字母数字字符。
  • [:alpha:] 字母字符。
  • [:blank:] 空格和制表符。
  • [:digit:] 数字。
  • [:lower:] 小写字母。
  • [:upper:] 大写字母。

完全的量词表可参考 man grep 手册。

量词

量词允许你指定匹配必须出现的项的出现次数。下表显示了GNU grep支持的限定符:

  • * 匹配前面的条目零次或多次。
  • ? 匹配前面的条目零次或一次。
  • + 匹配前面的条目一次或多次。
  • {n} 与前面的条目正好匹配n次。
  • {n,} 至少匹配前面的条目n次。
  • {,m} 最多匹配前面的条目m次。
  • {n,m} 匹配前面的条目n到m次。

*(星号)字符与前面的项目匹配零次或多次。以下内容将与“right”、“sright”、“ssright”等匹配:

grep 's*right'

下面是更高级的模式,它匹配以大写字母开头、以句点或逗号结束的所有行。

.*正则表达式匹配任意数量的任意字符:

grep -E '^[A-Z].*[.,]$' file.txt

?(问号)字符使前面的项目成为可选的,并且它只能匹配一次。下面的内容将同时匹配“bight”和“right”。

?字符使用反斜杠进行转义,因为我们使用的是基本正则表达式:

grep 'b\?right' file.txt

下面是使用扩展正则表达式的相同正则表达式:

grep -E 'b?right' file.txt

+(加号)字符与前面的项目匹配一次或多次。下面将匹配“sright”和“ssright”,但不匹配“right”:

grep -E 's+right' file.txt

大括号字符{}允许你指定匹配必须出现的确切数量、上限或下限或范围。

以下内容匹配3到9位之间的所有整数

grep -E '[[:digit:]]{3,9}' file.txt

交替

术语交替是一个简单的“或”。交替运算符|(竖线)允许你指定不同可能的匹配项,这些匹配项可以是文字字符串或表达式集。此运算符在所有正则表达式运算符中优先级最低。

在下面的示例中,我们将在Nginx日志错误文件中搜索单词fatal、error和critical的所有匹配项:

grep 'fatal\|error\|critical' /var/log/nginx/error.log

如果使用扩展正则表达式,则不应转义运算符|,如下所示:

grep -E 'fatal|error|critical' /var/log/nginx/error.log

分组

分组是正则表达式的一项功能,它允许将模式分组在一起,并将它们作为一个项目引用。组是使用括号()创建的。使用基本正则表达式时,括号必须用反斜杠(\)转义。

下面的示例同时匹配“fearless”和“less”。?量词使(fear)组成为可选的:

grep -E '(fear)?less' file.txt

特殊转义符

GNU grep包括几个元字符,这些元字符由一个反斜杠后跟一个常规字符组成。

下表展示了一些最常见的特殊反斜杠表达式:

  • \b 匹配单词边界。
  • \< 匹配单词开头的空字符串。
  • \> 匹配单词末尾的空字符串。
  • \w 匹配一个单词。
  • \s 匹配空格。

下面的模式将匹配单独的单词“abject”和“object”。如果嵌入到较大的单词中,它将与单词不匹配:

grep '\b[ao]bject\b' file.txt

写在最后

正则表达式用于文本编辑器、编程语言和命令行工具,如grep、sed和awk。

在搜索文本文件、编写脚本或筛选命令输出时,了解如何构造正则表达式非常有用。

本文分享自微信公众号 - 程序员小助手(mql45ea),作者:罗卜生

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2020-04-05

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 编程短文:Bash echo如何原生输出带空格的字符串而不换行

    为什么要数量掌握bash编程,因为它是linux下的默认工具。任何时候与系统内核对话,我们都直接面对shell。操作系统提供了为数众多的便利工具,用于完成复杂的...

    程序员小助手
  • 3分钟短文 | grep 入门用法,匹配多字符串,多正则模式

    grep 是一种功能强大的命令行工具,可以在一个或多个输入文件中搜索与正则表达式匹配的行,并将每条匹配的行写入标准输出。

    程序员小助手
  • 3分钟短文 | PHP极速匹配子字符串,你是怎么做的?

    在项目开发中我们经常会遇到这样的需求,比如用户提交的表单中含有一些文本的内容。我们需要在后台为其进行关键词过滤处理。

    程序员小助手
  • 9.3 grep(下)

    grep用法 grep 'r.o' test.txt grep 'oo*' test.txt grep '.*' test.txt grep 'o{2}' /e...

    运维小白
  • grep进阶用法

    十毛
  • linux基础(day26)

    9.1正则介绍_grep(上) 正则介绍 正则就是一串有规律的字符串 掌握好正则对编写shell脚本帮助交大 各种编程语言中都有正则,原理是一样的 grep/e...

    运维小白
  • 9.2 grep(中)

    grep用法 grep -n 'root' /etc/passwd grep -nv 'nologin' /etc/passwd grep '[0-9]'/et...

    运维小白
  • Redis 哨兵集群实现高可用

    sentinel,中文名是哨兵。哨兵是 redis 集群机构中非常重要的一个组件,主要有以下功能:

    IT技术小咖
  • linux grep工作常用

    版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/haluoluo211/article/d...

    bear_fish
  • 面试题:能否讲讲Redis是如何做到高可用的?

    sentinel,中文名是哨兵。哨兵是 redis 集群机构中非常重要的一个组件,主要有以下功能:

    用户1263954

扫码关注云+社区

领取腾讯云代金券