每天学习一个Linux命令之uniq

2024-04-01 16:04
文章标签 linux 学习 命令 每天 uniq

本文主要是介绍每天学习一个Linux命令之uniq,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

每天学习一个Linux命令之uniq

介绍

在Linux操作系统中,有许多强大的命令可以帮助我们提高工作效率。本篇博客将详细介绍一个非常有用的命令:uniquniq命令用于从已排序的文件或标准输入中删除重复的行,并将结果输出到标准输出中。

命令格式

uniq [选项] [输入文件]

选项

uniq命令有许多可用的选项,让我们逐个来了解一下每个选项的用法。

  • -c:在输出行前加上该行在输入文件中出现的次数。
  • -d:仅显示重复的行。
  • -u:仅显示在输入文件中仅出现一次的行。
  • -f <字段>:忽略前面的<字段>个字段。
  • -s <字符>:从每行的第<字符>个字符开始进行比较。默认情况下,<字符>为0,即从每行的第一个字符进行比较。
  • -i:忽略大小写。
  • -w <字符>:指定用于比较的最大字符数。
  • -z:将输入文件视为已压缩文件。
  • -:将标准输入视为输入文件。

用法示例

示例 1:删除重复的行

假设我们有一个名为file.txt的文件,内容如下:

apple
banana
apple
orange
banana

要删除重复的行并输出结果,我们可以使用以下命令:

uniq file.txt

输出结果为:

apple
banana
apple
orange
banana

示例 2:统计重复行的次数

如果我们想要在输出的每行前面添加该行在输入文件中出现的次数,我们可以使用-c选项。还是以file.txt为例,使用以下命令进行操作:

uniq -c file.txt

输出结果为:

   2 apple2 banana1 apple1 orange1 banana

示例 3:仅显示重复的行

如果我们只想要显示重复的行,并删除没有重复的行,可以使用 -d选项。继续以file.txt为例,使用以下命令:

uniq -d file.txt

输出结果为:

apple
banana

示例 4:仅显示不重复的行

相反,如果我们只想要显示在输入文件中仅出现一次的行,可以使用-u选项。

uniq -u file.txt

输出结果为:

orange

示例 5:指定忽略字段和字符数量

在某些情况下,我们可能想要从比较中忽略文件的特定字段,或者指定从每行的特定字符开始进行比较。这时可以使用-f-s选项。

假设我们有一个名为data.txt的文件,内容如下:

1 apple
2 banana
3 apple
4 orange
5 banana

如果我们想要从第二个字段开始进行比较,并忽略前面的字段,则可以使用以下命令:

uniq -f 1 data.txt

输出结果为:

1 apple
2 banana
4 orange

如果我们只想要从每行的第三个字符开始进行比较,则可以使用以下命令:

uniq -s 2 data.txt

输出结果为:

1 apple
3 apple

示例 6:忽略大小写

默认情况下,uniq命令是区分大小写的。但是,如果我们希望在比较中忽略大小写,则可以使用-i选项。

假设我们有一个名为fruits.txt的文件,内容如下:

Apple
apple
banana
Banana

要忽略大小写,并删除重复的行,可以使用以下命令:

uniq -i fruits.txt

输出结果为:

Apple
banana

示例 7:处理压缩文件

如果我们想要处理一个已经压缩的文件,则可以使用-z选项。

假设我们有一个名为data.txt.gz的已压缩文件,要将其解压并删除重复的行,可以使用以下命令:

gunzip -c data.txt.gz | uniq -u

gunzip -c用于解压缩文件,并将结果通过管道传递给uniq -u命令。

结论

uniq命令是一个非常有用的命令,可以帮助我们删除重复的行,统计重复行的次数,并根据不同的选项进行比较。通过本篇博客,我们详细介绍了uniq命令的各种选项和用法示例,希望对你有所帮助。不要停止学习,继续探索Linux命令的奥秘吧!

这篇关于每天学习一个Linux命令之uniq的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/867575

相关文章

linux生产者,消费者问题

pthread_cond_wait() :用于阻塞当前线程,等待别的线程使用pthread_cond_signal()或pthread_cond_broadcast来唤醒它。 pthread_cond_wait() 必须与pthread_mutex 配套使用。pthread_cond_wait()函数一进入wait状态就会自动release mutex。当其他线程通过pthread

51单片机学习记录———定时器

文章目录 前言一、定时器介绍二、STC89C52定时器资源三、定时器框图四、定时器模式五、定时器相关寄存器六、定时器练习 前言 一个学习嵌入式的小白~ 有问题评论区或私信指出~ 提示:以下是本篇文章正文内容,下面案例可供参考 一、定时器介绍 定时器介绍:51单片机的定时器属于单片机的内部资源,其电路的连接和运转均在单片机内部完成。 定时器作用: 1.用于计数系统,可

问题:第一次世界大战的起止时间是 #其他#学习方法#微信

问题:第一次世界大战的起止时间是 A.1913 ~1918 年 B.1913 ~1918 年 C.1914 ~1918 年 D.1914 ~1919 年 参考答案如图所示

[word] word设置上标快捷键 #学习方法#其他#媒体

word设置上标快捷键 办公中,少不了使用word,这个是大家必备的软件,今天给大家分享word设置上标快捷键,希望在办公中能帮到您! 1、添加上标 在录入一些公式,或者是化学产品时,需要添加上标内容,按下快捷键Ctrl+shift++就能将需要的内容设置为上标符号。 word设置上标快捷键的方法就是以上内容了,需要的小伙伴都可以试一试呢!

Linux 安装、配置Tomcat 的HTTPS

Linux 安装 、配置Tomcat的HTTPS 安装Tomcat 这里选择的是 tomcat 10.X ,需要Java 11及更高版本 Binary Distributions ->Core->选择 tar.gz包 下载、上传到内网服务器 /opt 目录tar -xzf 解压将解压的根目录改名为 tomat-10 并移动到 /opt 下, 形成个人习惯的路径 /opt/tomcat-10

AssetBundle学习笔记

AssetBundle是unity自定义的资源格式,通过调用引擎的资源打包接口对资源进行打包成.assetbundle格式的资源包。本文介绍了AssetBundle的生成,使用,加载,卸载以及Unity资源更新的一个基本步骤。 目录 1.定义: 2.AssetBundle的生成: 1)设置AssetBundle包的属性——通过编辑器界面 补充:分组策略 2)调用引擎接口API

RedHat运维-Linux文本操作基础-AWK进阶

你不用整理,跟着敲一遍,有个印象,然后把它保存到本地,以后要用再去看,如果有了新东西,你自个再添加。这是我参考牛客上的shell编程专项题,只不过换成了问答的方式而已。不用背,就算是我自己亲自敲,我现在好多也记不住。 1. 输出nowcoder.txt文件第5行的内容 2. 输出nowcoder.txt文件第6行的内容 3. 输出nowcoder.txt文件第7行的内容 4. 输出nowcode

Javascript高级程序设计(第四版)--学习记录之变量、内存

原始值与引用值 原始值:简单的数据即基础数据类型,按值访问。 引用值:由多个值构成的对象即复杂数据类型,按引用访问。 动态属性 对于引用值而言,可以随时添加、修改和删除其属性和方法。 let person = new Object();person.name = 'Jason';person.age = 42;console.log(person.name,person.age);//'J

【Linux进阶】UNIX体系结构分解——操作系统,内核,shell

1.什么是操作系统? 从严格意义上说,可将操作系统定义为一种软件,它控制计算机硬件资源,提供程序运行环境。我们通常将这种软件称为内核(kerel),因为它相对较小,而且位于环境的核心。  从广义上说,操作系统包括了内核和一些其他软件,这些软件使得计算机能够发挥作用,并使计算机具有自己的特生。这里所说的其他软件包括系统实用程序(system utility)、应用程序、shell以及公用函数库等

大学湖北中医药大学法医学试题及答案,分享几个实用搜题和学习工具 #微信#学习方法#职场发展

今天分享拥有拍照搜题、文字搜题、语音搜题、多重搜题等搜题模式,可以快速查找问题解析,加深对题目答案的理解。 1.快练题 这是一个网站 找题的网站海量题库,在线搜题,快速刷题~为您提供百万优质题库,直接搜索题库名称,支持多种刷题模式:顺序练习、语音听题、本地搜题、顺序阅读、模拟考试、组卷考试、赶快下载吧! 2.彩虹搜题 这是个老公众号了 支持手写输入,截图搜题,详细步骤,解题必备