专栏首页呼延Linux进价命令

Linux进价命令

1. sed

sed 是一种在线编辑器,它一次处理一行内容。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有 改变,除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转换程序等。

sed [OPTION] 'address Command ' file,...

其中, address用于指定所要操作的行,Command用于指定操作的命令.

OPTION

  • -n:静默模式,不显示模式空间中的内容
  • -i:直接修改原文件(谨慎使用)
  • -e SCRIPT -e SCRIPT:可以指定同时指定多个脚本
  • -f /PATH/TP/SED_SCRIPT:从文本中加载脚本
  • -r:使用扩展正则表达式

address

指定要操作的位置.

起始行,结束行.

function:

  • a :新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行).
  • c :取代, c 的后面可以接字串,这些字串可以取代 n1,n2 之间的行.
  • d :删除,因为是删除啊,所以 d 后面通常不接任何东西;
  • i :插入, i 的后面可以接字串,而这些字串会在新的一行出现(目前的上一行).
  • p :列印,亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行.
  • s :取代,可以直接进行取代的工作.通常这个 s 的动作可以搭配正规表示法!例如 1,20s/old/new/g.

示例

# 将文件中,三位以上数字,并且后面有逗号的字符串替换为空.例如`2345,`
 sed 's/[0-9][0-9][0-9]\+,//g' k.txt > k6.txt
# 输出文件的第10000行到20000行到其他文件
 sed 10000,20000p ha.txt > result.txt

unip

对文件进行去重

示例

# 对1.txt排序,去重,在排序之后输出到1_tmp.txt
cat 1.txt | sort | uniq | sort > 1_tmp.txt

1.txt的内容为:

1
2
4
3
2

处理之后为:

1
2
3
4

sort

对文件排序

示例

# 对1.txt排序
cat 1.txt | sort

1.txt内容为:

1
3
2
2

排序后为:

1
2
2
3

comm

comm命令可以用于两个文件之间的比较,它有一些选项可以用来调整输出,以便执行交集、求差、以及差集操作。

参数:

-1:不显示在第一个文件出现的内容;
-2:不显示在第二个文件中出现的内容;
-3:不显示同时在两个文件中都出现的内容。

示例:

# 求交集(在两个文件中都出现)
comm -12 1.txt 2.txt
# 求差集(在第一个文件中有第二个文件没有)
comm -23 1.txt 2.txt
# 求差(两个文件同时有的不显示)
comm -3 1.txt 2.txt

实际的一个使用场景

其实这本来是mysql的工作,我需要将第一个表的主键在第二个表中的数据过滤掉.之后统计一下有多少条.

像我这种老实人,肯定就使用in语句了,结果,,,,好特么慢啊.

后来在大佬的提示下用上面几个命令完成了.

将两个表的主键都导出成文件,然后comm一下子就完事了,速度杠杠的!

参考链接

https://blog.csdn.net/tianmohust/article/details/6997924

完。

ChangeLog

2019-01-11 完成

以上皆为个人所思所得,如有错误欢迎评论区指正。

欢迎转载,烦请署名并保留原文链接。

联系邮箱:huyanshi2580@gmail.com

更多学习笔记见个人博客——>呼延十

var gitment = new Gitment({ id: 'Linux进价命令', // 可选。默认为 location.href owner: 'hublanker', repo: 'blog', oauth: { client_id: '2297651c181f632a31db', client_secret: 'a62f60d8da404586acc965a2ba6a6da9f053703b', }, }) gitment.render('container')



本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • Jvm数据区域与垃圾收集<深入了解jvm读书笔记>

    周志明老师所著的《深入了解JAVA虚拟机》(后文简称”书中”)可谓是java工程师进阶的必读书籍了.最近读了书中的第一二部分,也就是前五章,有很多收获.因此想要...

    呼延十
  • Redis系列(十)redis对象系统

    正如上一篇文章提到的,Redis 不是生硬的使用前面介绍过的数据结构,来实现了字符串,列表,字典等等数据结构,而是精心打造了一个对象系统。

    呼延十
  • Intellij Idea实用插件

    很多工具都有一个共同点,第一眼看上去总是很麻烦,让人望而生畏,却忽略掉了他能带来的效率的提升,比如:Intellij的数据库连接功能,我用intellij快两年...

    呼延十
  • Linux简介及最常用命令(简单易学,但能解决95%以上的问题)

    Linux是目前应用最广泛的服务器操作系统,基于Unix,开源免费,由于系统的稳定性和安全性,市场占有率很高,几乎成为程序代码运行的最佳系统环境。linux不仅...

    砸漏
  • gzip,bzip2,xz,zip,tar压缩工具详解

    gzip压缩工具 •gzip 1.txt :压缩1.txt • gzip -d 1.txt.gz / gunzip 1.txt.gz :解压缩1.txt.gz ...

    老七Linux
  • tar命令中的 -C 作用

    我用这个命令:tar zcvf chao.tar.gz /chao/*  打包文件的时候,在压缩包里把  /chao/这个路径也打包进去了。

    拓荒者
  • tar命令中的 -C 作用

    我用这个命令:tar zcvf chao.tar.gz /chao/*  打包文件的时候,在压缩包里把  /chao/这个路径也打包进去了。

    拓荒者
  • CentOS中的正则表达式

    支持linux正则表达式的工具有:grep:实现查找,sed,awk:都是流式编辑器,可以实现查找和替换,并且把替换的文本输出到屏幕上。

    砸漏
  • python 读txt文件,按‘,’分割每行数据操作

    str : 分隔符 ,若为 ‘,’则表示以‘,’分割字符串,不写默认为所有的空字符,包括空格、换行(\n)、制表符(\t)等。

    砸漏
  • git创建仓库

    创建仓库 mkdir /home/gitroot 进入目录 cd /home/gitroot 初始化仓库 git init 创建一个文件 echo 123456...

    零月

扫码关注云+社区

领取腾讯云代金券