uniq命令来自于英文单词unique的缩写,中文译为独特的、唯一的,其功能是用于去除文件中的重复内容行。uniq命令能够去除掉文件中相邻的重复内容行,如果两端相同内容中间夹杂了其他文本行,则需要先使用sort命令进行排序后再去重复,这样保留下来的内容就都是唯一的了。

语法格式:uniq [参数] 文件

常用参数:

-c打印每行在文本中重复出现的次数
-d每个重复纪录只出现一次
-u只显示没有重复的纪录

参考实例

对指定的文件进行去重操作:

[root@linuxcool ~]# cat testfile 
test 30  
test 30  
test 30  
Hello 95  
Hello 95  
Hello 95  
Hello 95  
Linux 85
Linux 85
[root@linuxcool ~]# uniq testfile 
test 30  
Hello 95  
Linux 85

统计相同内容行在文件中重复出现的次数:

[root@linuxcool ~]# uniq -c testfile 
3 test 30  
4 Hello 95  
2 Linux 85

仅显示指定文件中存在一摸一样内容行的信息:

[root@linuxcool ~]# uniq -d testfile 
test 30  
Hello 95  
Linux 85

仅显示指定文件中没有存在一摸一样内容行的信息:

[root@linuxcool ~]# uniq -u testfile 
[root@linuxcool ~]# 
Author