uniq命令 – 去除文件中的重复行
原创uniq命令 – 去除文件中的重复行
原创
用户4988085
修改于 2021-07-26 10:45:32
修改于 2021-07-26 10:45:32
代码可运行
运行总次数：0
代码可运行
uniq命令全称是“unique”，中文释义是“独特的，唯一的”。该命令的作用是用来去除文本文件中连续的重复行，中间不能夹杂其他文本行。去除了重复的，保留的都是唯一的，也就是独特的，唯一的了。
我们应当注意的是，它和sort的区别，sort只要有重复行，它就去除，而uniq重复行必须要连续，也可以用它忽略文件中的重复行。
语法格式：uniq [参数] [文件]
常用参数：
-c | 打印每行在文本中重复出现的次数 |
|---|---|
-d | 只显示有重复的纪录，每个重复纪录只出现一次 |
-u | 只显示没有重复的纪录 |
参考实例
删除连续文件中连续的重复行：
[root@linuxcool ~]# cat testfile
test 30
test 30
test 30
Hello 95
Hello 95
Hello 95
Hello 95
Linux 85
Linux 85
[root@linuxcool ~]# uniq testfile
test 30
Hello 95
Linux 85打印每行在文件中出现重复的次数：
[root@linuxcool ~]# uniq -c testfile
3 test 30
4 Hello 95
2 Linux 85只显示有重复的纪录，且每个纪录只出现一次：
[root@linuxcool ~]# uniq -d testfile
test 30
Hello 95
Linux 85只显示没有重复的纪录：
[root@linuxcool ~]# uniq -u testfile
[root@linuxcool ~]# 原创声明：本文系作者授权腾讯云开发者社区发表，未经许可，不得转载。
如有侵权，请联系 cloudcommunity@tencent.com 删除。
原创声明：本文系作者授权腾讯云开发者社区发表，未经许可，不得转载。
如有侵权，请联系 cloudcommunity@tencent.com 删除。
评论
登录后参与评论
推荐阅读
腾讯云开发者
