uniq

uniq命令可以去除排序过的文件中的重复行，因此uniq经常和sort合用。也就是说，为了使uniq起作用，所有的重复行必须是相邻的。

uniq语法

[root@www ~]# uniq [-icu]
选项与参数：
-i   ：忽略大小写字符的不同；
-c  ：进行计数
-u  ：只显示唯一的行


[root@le shell]# uniq test 
hello
world
friend
hello
world
hello


排序文件，默认是去重
[root@le shell]# cat test | sort |uniq
friend
hello
world

排序之后删除了重复行，同时在行首位置输出该行重复的次数
[root@le shell]# sort test | uniq -c
      1 friend
      3 hello
      2 world
     
 仅显示存在重复的行，并在行首显示该行重复的次数
 [root@le shell]# sort test | uniq -dc
      3 hello
      2 world

仅显示不重复的行
[root@le shell]# sort test | uniq -u
friend