Linux命令（7）——uniq命令

uniq [选项] [file]

-c,--count：显示行出现的次数
-d,--repeated：仅显示重复出现的行，即出现次数>=2的行，且只打印一次
-D,--all-repeated[=delimit-method]:仅显示重复的行，即出现次数>=2的行，且打印重复行的所有行。其中delimit-method表示对重复行集合的分隔方式，有三种取值，分别为none、prepend和separate。其中none表示不进行分隔，为默认选项，uniq -D等同于uniq --all-repeated=none；prepend表示在每一个重复行集合前面插入一个空行；separate表示在每个重复行集合间插入一个空行。
-f,--skip-fields=N：忽略前N个字段。字段由空白字符（空格符、Tab）分隔。如果您的文档的行被编号，并且您希望比较行中除行号之外的所有内容。如果指定了选项-f 1，那么下面相邻的两行：
1 这是一条线。
2 这是一条线。
将被认为是相同的。如果没有指定-f选项，它们将被认为是唯一的。
-i,--ignore-case：忽略大小写字符的不同
-s,--skip-chars=N:跳过前面N个字符不比较
-u,--unique：只显示唯一的行，即出现次数等于1的行
-w,--check-chars=N：指定每行要比较的前N个字符数
--help:显示帮助信息
--version:显示版本信息

cat testfile
hello
world
friend
hello
world
hello

#uniq testfile  
hello
world
friend
hello
world
hello

#cat testfile | sort | uniq
friend
hello
world

#sort testfile | uniq -c
1 friend
3 hello
2 world

#sort testfile | uniq -dc
3 hello
2 world

sort testfile | uniq -u
friend

sort testfile | uniq -D
hello
hello
hello
world
world

apple
application
api

uniq -w3 -D test.txt
apple
application