uniq命令 – 去除文件中的重复行

2023年 7月 22日 54.6k 0

uniq命令全称是“unique”,中文释义是“独特的,唯一的”。该命令的作用是用来去除文本文件中连续的重复行,中间不能夹杂其他文本行。去除了重复的,保留的都是唯一的,也就是独特的,唯一的了。

我们应当注意的是,它和sort的区别,sort只要有重复行,它就去除,而uniq重复行必须要连续,也可以用它忽略文件中的重复行。

语法格式:uniq [参数] [文件]

常用参数:

-c 打印每行在文本中重复出现的次数
-d 只显示有重复的纪录,每个重复纪录只出现一次
-u 只显示没有重复的纪录

参考实例

删除连续文件中连续的重复行:

[root@xtuos.com ~]# cat testfile  test 30   test 30   test 30   Hello 95   Hello 95   Hello 95   Hello 95   Linux 85 Linux 85 [root@xtuos.com ~]# uniq testfile  test 30   Hello 95   Linux 85

打印每行在文件中出现重复的次数:

[root@xtuos.com ~]# uniq -c testfile        3 test 30         4 Hello 95         2 Linux 85

只显示有重复的纪录,且每个纪录只出现一次:

[root@xtuos.com ~]# uniq -d testfile  test 30   Hello 95   Linux 85

只显示没有重复的纪录:

[root@xtuos.com ~]# uniq -u testfile [root@xtuos.com ~]# 

相关文章

服务器端口转发,带你了解服务器端口转发
服务器开放端口,服务器开放端口的步骤
产品推荐:7月受欢迎AI容器镜像来了,有Qwen系列大模型镜像
如何使用 WinGet 下载 Microsoft Store 应用
百度搜索:蓝易云 – 熟悉ubuntu apt-get命令详解
百度搜索:蓝易云 – 域名解析成功但ping不通解决方案

发布评论