大家好,又见面了,我是你们的朋友全栈君。
下面所说的是Linux中最重要的三个命令在业界被称为“三剑客”,它们是awk,sed,grep。
我们现在知道Linux下一切皆文件,对Linux的操作就是对文件的处理,那么怎么能更好的处理文件呢?这就要用到我们上面的三剑客命令。
在说这三个命令前我们要插入一个小插曲就是“正则表达式”。
所谓的正则表达式我个人理解就是正规的表示方法。他是用简单的方法来实现强大的功能,所以深受计算机爱好者的使用。
三剑客与正则表达式是什么关系呢?
我们可以这样理解,三剑客就是普通的命令,有的把他们叫做工具,在我看来都一样。而正则表达式就好比一个模版。三剑客能读懂这个模版。就这么简单。注意只有三剑客才能读懂这个模版哦!
现在他们的关系和功能都搞懂了,接下来我们就来认识下他们怎么结合的。正则表达式是一个模版,这个模版是由一些普通字符和一些元字符组成。普通字符包括大小写的字母和数字,而元字符则具有特殊的含义。具体如下
元字符 | 功能 | 意思 |
---|---|---|
^ | 匹配行首 | 表示以某个字符开头 |
$ | 匹配行尾 | 表示以某个字符结尾 |
^$ | 空行的意思 | 表示空行的意思 |
. | 匹配任意单个字符 | 表示任意一个字符 |
* | 字符* 匹配0或多个此字符 | 表示重复的任意多个字符 |
\ | 屏蔽一个元字符的特殊含义 | 表示去掉有意义的元字符的含义 |
[] | 匹配中括号内的字符 | 表示过滤括号内的字符 |
.* | 代表任意多个字符 | 就是代表任意多个字符 |
lele\{n\} | 用来匹配前面lele出现次数。n为次数 | 就是统计前面lele出现的次数 |
lele\{n,\} | 含义同上,但次数最少为n | 从功能就可以看出 |
lele\{n,m\} | 义同上,但lele出现次数在n与m之间 | 从功能也可以看出 |
lele\{n,m\} | 义同上,但lele出现次数在n与m之间 | 从功能也可以看出 |
---|
三剑客的功能非常强大,但我们只需要掌握他们分别擅长的领域即可:grep擅长查找功能,sed擅长取行和替换。awk擅长取列。
文本过滤(模式:pattern)工具,grep, egrep
grep [OPTIONS] PATTERN [FILE...]
--color=auto
对匹配到的文本着色显示-v
显示不被pattern匹配到的行-i
忽略字符大小写-n
显示匹配的行号-c
统计匹配的行数-o
仅显示匹配到的字符串-q
静默模式,不输出任何信息-A #
after, 后#行-B #
before, 前#行-C #
context, 前后各#行-e
实现多个选项间的逻辑or关系
grep –e ‘cat ’ -e ‘dog’ file
-w
匹配整个单词-E
使用ERE,相当于egrep-F
相当于fgrep,不支持正则表达式举例子:
1、查找文件内容包含root的行数
2、查找文件内容不包含root的行
3、查找以s开头的行
4、查找以n结尾的行
sed是一种流编辑器,它一次处理一行内容。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。然后读入下行,执行下一个循环。如果没有使诸如‘D’ 的特殊命令,那会在两个循环之间清空模式空间,但不会清空保留空间。这样不断重复,直到文件末尾。文件内容并没有改变,除非你使用重定向存储输出。
sed [option]... 'script' inputfile
-n
不输出模式空间内容到屏幕,即不自动打印-e
多点编辑-f
/PATH/SCRIPT_FILE: 从指定文件中读取编辑脚本-r
支持使用扩展正则表达式-i.bak
备份文件并原处编辑#
: 指定的行,$:最后一行
/pattern/
:被此处模式所能够匹配到的每一行#,#
#,+#
/pat1/,/pat2/
`#,/pat1/d
删除模式空间匹配的行,并立即启用下一轮循环p
打印当前模式空间内容,追加到默认输出之后a [\]text1
在指定行后面追加文本,支持使用\n实现多行追加i [\]text
在行前面插入文本c [\]text
替换行为单行或多行文本w /path/somefile
保存模式匹配的行至指定文件r /path/somefile
读取指定文件的文本至模式空间中匹配到的行后=
为模式空间中的行打印行号!
模式空间中匹配行取反处理g
行内全局替换p
显示替换成功的行w /PATH/TO/SOMEFILE
将替换成功的行保存至文件中举例子:
1、打印出文件第二行
2、打印出2-5行的内容
3、将文件中的root全部替换为abc
直接修改读取的文件内容,而不是输出到终端。 s :取代,可以直接进行取代的工作。
g: 是全局的意思。其中#是格式符,他也可以是@或者别的/。
Sed替换格式是:sed -i ‘s/要替换的内容/替换成的内容/g’ 文件名。
报告生成器,格式化文本输出,有多种版本:New awk(nawk),GNU awk( gawk)
awk [options] 'program' file…
-F
指明输入时用到的字段分隔符
-v var=value
自定义变量printf “FORMAT” , item1, item2, ...
不会自动换行,FORMAT中需要分别为后面每个item指定格式符。
格式符 item表现形式 %c 显示字符的ASCII码 %d, %i 显示十进制整数 %e, %E 显示科学计数法数值 %f 显示为浮点数 %g, %G 以科学计数法或浮点形式显示数值 %s 显示字符串 %u 无符号整数 %% 显示%自身
格式符 item表现形式 #[.#] 第一个数字控制显示的宽度;第二个#表示小数点后精度,%3.1f – 左对齐(默认右对齐) %-15s + 显示数值的正负符号 %+d
function_name(argu1, argu2, ...)
selector?if-true-expression:if-false-expression
/regular expression/
:仅处理能够模式匹配到的行,需要用/ /括起来/pat1/,/pat2/
不支持直接给出数字格式{ statements;… }
组合语句if(condition) {statements;…}
if(condition) {statements;…} else {statements;…}
while(conditon) {statments;…}
do {statements;…} while(condition)
for(expr1;expr2;expr3) {statements;…}
break
continue
delete array[index]
delete array
exit
awk [-F|-v] '行数筛选{XXX;XXX;printf “”,XXX,XXX}'
举例子:
1、打印文件第一列:
这里的分隔符是冒号 ,然后print打印第一列
2、输出字段1,3,6,以制表符作为分隔符
awk详解:https://www.cnblogs.com/xudong-bupt/p/3721210.html
发布者:全栈程序员栈长,转载请注明出处:https://javaforall.cn/125066.html原文链接:https://javaforall.cn