前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >常用文件级别处理命令

常用文件级别处理命令

作者头像
十毛
发布2021-12-03 09:49:35
1850
发布2021-12-03 09:49:35
举报

文件处理之前,因为系统限制,需要提前进行预处理,比如文件合并、拆分等

常用文件级别命令

文件合并

直接使用cat命令

代码语言:javascript
复制
cat 1.sql 2.sql 3.sql > merged.sql
cat *.sql > merged.sql

文件拆分

split命令可以把一个文件拆分成多个

  • 命令格式
代码语言:javascript
复制
split [OPTION]... [INPUT [PREFIX]]
  • 常用选项
代码语言:javascript
复制
-l: 每个文件的行数
-b: 每个文件的大小(字节)
-d: 使用数字作为序号
  • 用例
代码语言:javascript
复制
# 拆分文件,每个文件一行
split -l 1 merged.sql 

# 拆分文件,并且设置文件前缀
split -l1  merged.sql user_

文件内容随机

shuf命令可以对文件内容行进行随机变换

代码语言:javascript
复制
shuf -n merged.sql

-n: 最多输出行数

文件对比

使用comm命令

代码语言:javascript
复制
$ cat file1
line 1
line 2
line 3

$ cat file2
line 3
line 4

$ comm file1 file2
line 1
line 2
                line 3
        line 4

第一列:存在file1,不在file2 第二列:存在file2,不在file1 第三列:共同所有

可以组合使用选项-1,-2,-3分别禁止对应的列输出,比如

代码语言:javascript
复制
# 输出file1和file2的共同行
$ comm -13 file1 file2
line 3
本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2021/11/27 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 常用文件级别命令
    • 文件合并
      • 文件拆分
        • 文件内容随机
          • 文件对比
          领券
          问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档