使用linux的uniq命令去除文件中的重复行的方法-创新互联

创新互联www.cdcxhl.cn八线动态BGP香港云服务器提供商，新人活动买多久送多久，划算不套路！

广东ssl适用于网站、小程序/APP、API接口等需要进行数据传输应用场景，ssl证书未来市场广阔！成为创新互联的ssl证书销售渠道，可以享受市场价格4-6折优惠！如果有意向欢迎电话联系或者加微信：18982081108（备注：SSL证书合作）期待与您的合作！

这篇文章主要介绍了使用linux的uniq命令去除文件中的重复行的方法，具有一定借鉴价值，需要的朋友可以参考下。下面就和我一起来看看吧。

uniq命令全称是“unique”，中文释义是“独特的，唯一的”。该命令的作用是用来去除文本文件中连续的重复行，中间不能夹杂其他文本行。去除了重复的，保留的都是唯一的，也就是独特的，唯一的了。

我们应当注意的是，它和sort的区别，sort只要有重复行，它就去除，而uniq重复行必须要连续，也可以用它忽略文件中的重复行。

语法格式：uniq [参数] [文件]

常用参数：

-c	打印每行在文本中重复出现的次数
-d	只显示有重复的纪录，每个重复纪录只出现一次
-u	只显示没有重复的纪录

参考实例

删除连续文件中连续的重复行：

[root@linuxcool ~]# cat testfile
test 30
test 30
test 30
Hello 95
Hello 95
Hello 95
Hello 95
Linux 85
Linux 85
[root@linuxcool ~]# uniq testfile
test 30
Hello 95
Linux 85

打印每行在文件中出现重复的次数：

[root@linuxcool ~]# uniq -c testfile
3 test 30
4 Hello 95
2 Linux 85

只显示有重复的纪录，且每个纪录只出现一次：

[root@linuxcool ~]# uniq -d testfile
test 30
Hello 95
Linux 85

只显示没有重复的纪录：

[root@linuxcool ~]# uniq -u testfile
[root@linuxcool ~]# 

以上就是使用linux的uniq命令去除文件中的重复行的方法的详细内容了，看完之后是否有所收获呢？如果想了解更多相关内容，欢迎来创新互联行业资讯！

文章名称：使用linux的uniq命令去除文件中的重复行的方法-创新互联
标题链接：http://www.cdkjz.cn/article/ddoioo.html