每天学习一个Linux命令之uniq

2024-04-01 16:04
文章标签 linux 学习 命令 每天 uniq

本文主要是介绍每天学习一个Linux命令之uniq,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

每天学习一个Linux命令之uniq

介绍

在Linux操作系统中,有许多强大的命令可以帮助我们提高工作效率。本篇博客将详细介绍一个非常有用的命令:uniquniq命令用于从已排序的文件或标准输入中删除重复的行,并将结果输出到标准输出中。

命令格式

uniq [选项] [输入文件]

选项

uniq命令有许多可用的选项,让我们逐个来了解一下每个选项的用法。

  • -c:在输出行前加上该行在输入文件中出现的次数。
  • -d:仅显示重复的行。
  • -u:仅显示在输入文件中仅出现一次的行。
  • -f <字段>:忽略前面的<字段>个字段。
  • -s <字符>:从每行的第<字符>个字符开始进行比较。默认情况下,<字符>为0,即从每行的第一个字符进行比较。
  • -i:忽略大小写。
  • -w <字符>:指定用于比较的最大字符数。
  • -z:将输入文件视为已压缩文件。
  • -:将标准输入视为输入文件。

用法示例

示例 1:删除重复的行

假设我们有一个名为file.txt的文件,内容如下:

apple
banana
apple
orange
banana

要删除重复的行并输出结果,我们可以使用以下命令:

uniq file.txt

输出结果为:

apple
banana
apple
orange
banana

示例 2:统计重复行的次数

如果我们想要在输出的每行前面添加该行在输入文件中出现的次数,我们可以使用-c选项。还是以file.txt为例,使用以下命令进行操作:

uniq -c file.txt

输出结果为:

   2 apple2 banana1 apple1 orange1 banana

示例 3:仅显示重复的行

如果我们只想要显示重复的行,并删除没有重复的行,可以使用 -d选项。继续以file.txt为例,使用以下命令:

uniq -d file.txt

输出结果为:

apple
banana

示例 4:仅显示不重复的行

相反,如果我们只想要显示在输入文件中仅出现一次的行,可以使用-u选项。

uniq -u file.txt

输出结果为:

orange

示例 5:指定忽略字段和字符数量

在某些情况下,我们可能想要从比较中忽略文件的特定字段,或者指定从每行的特定字符开始进行比较。这时可以使用-f-s选项。

假设我们有一个名为data.txt的文件,内容如下:

1 apple
2 banana
3 apple
4 orange
5 banana

如果我们想要从第二个字段开始进行比较,并忽略前面的字段,则可以使用以下命令:

uniq -f 1 data.txt

输出结果为:

1 apple
2 banana
4 orange

如果我们只想要从每行的第三个字符开始进行比较,则可以使用以下命令:

uniq -s 2 data.txt

输出结果为:

1 apple
3 apple

示例 6:忽略大小写

默认情况下,uniq命令是区分大小写的。但是,如果我们希望在比较中忽略大小写,则可以使用-i选项。

假设我们有一个名为fruits.txt的文件,内容如下:

Apple
apple
banana
Banana

要忽略大小写,并删除重复的行,可以使用以下命令:

uniq -i fruits.txt

输出结果为:

Apple
banana

示例 7:处理压缩文件

如果我们想要处理一个已经压缩的文件,则可以使用-z选项。

假设我们有一个名为data.txt.gz的已压缩文件,要将其解压并删除重复的行,可以使用以下命令:

gunzip -c data.txt.gz | uniq -u

gunzip -c用于解压缩文件,并将结果通过管道传递给uniq -u命令。

结论

uniq命令是一个非常有用的命令,可以帮助我们删除重复的行,统计重复行的次数,并根据不同的选项进行比较。通过本篇博客,我们详细介绍了uniq命令的各种选项和用法示例,希望对你有所帮助。不要停止学习,继续探索Linux命令的奥秘吧!

这篇关于每天学习一个Linux命令之uniq的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/867575

相关文章

Redis 的 SUBSCRIBE命令详解

《Redis的SUBSCRIBE命令详解》Redis的SUBSCRIBE命令用于订阅一个或多个频道,以便接收发送到这些频道的消息,本文给大家介绍Redis的SUBSCRIBE命令,感兴趣的朋友跟随... 目录基本语法工作原理示例消息格式相关命令python 示例Redis 的 SUBSCRIBE 命令用于订

防止Linux rm命令误操作的多场景防护方案与实践

《防止Linuxrm命令误操作的多场景防护方案与实践》在Linux系统中,rm命令是删除文件和目录的高效工具,但一旦误操作,如执行rm-rf/或rm-rf/*,极易导致系统数据灾难,本文针对不同场景... 目录引言理解 rm 命令及误操作风险rm 命令基础常见误操作案例防护方案使用 rm编程 别名及安全删除

Linux下MySQL数据库定时备份脚本与Crontab配置教学

《Linux下MySQL数据库定时备份脚本与Crontab配置教学》在生产环境中,数据库是核心资产之一,定期备份数据库可以有效防止意外数据丢失,本文将分享一份MySQL定时备份脚本,并讲解如何通过cr... 目录备份脚本详解脚本功能说明授权与可执行权限使用 Crontab 定时执行编辑 Crontab添加定

Java使用jar命令配置服务器端口的完整指南

《Java使用jar命令配置服务器端口的完整指南》本文将详细介绍如何使用java-jar命令启动应用,并重点讲解如何配置服务器端口,同时提供一个实用的Web工具来简化这一过程,希望对大家有所帮助... 目录1. Java Jar文件简介1.1 什么是Jar文件1.2 创建可执行Jar文件2. 使用java

使用docker搭建嵌入式Linux开发环境

《使用docker搭建嵌入式Linux开发环境》本文主要介绍了使用docker搭建嵌入式Linux开发环境,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面... 目录1、前言2、安装docker3、编写容器管理脚本4、创建容器1、前言在日常开发全志、rk等不同

linux系统上安装JDK8全过程

《linux系统上安装JDK8全过程》文章介绍安装JDK的必要性及Linux下JDK8的安装步骤,包括卸载旧版本、下载解压、配置环境变量等,强调开发需JDK,运行可选JRE,现JDK已集成JRE... 目录为什么要安装jdk?1.查看linux系统是否有自带的jdk:2.下载jdk压缩包2.解压3.配置环境

Linux搭建ftp服务器的步骤

《Linux搭建ftp服务器的步骤》本文给大家分享Linux搭建ftp服务器的步骤,本文通过图文并茂的形式给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录ftp搭建1:下载vsftpd工具2:下载客户端工具3:进入配置文件目录vsftpd.conf配置文件4:

Linux实现查看某一端口是否开放

《Linux实现查看某一端口是否开放》文章介绍了三种检查端口6379是否开放的方法:通过lsof查看进程占用,用netstat区分TCP/UDP监听状态,以及用telnet测试远程连接可达性... 目录1、使用lsof 命令来查看端口是否开放2、使用netstat 命令来查看端口是否开放3、使用telnet

Linux系统管理与进程任务管理方式

《Linux系统管理与进程任务管理方式》本文系统讲解Linux管理核心技能,涵盖引导流程、服务控制(Systemd与GRUB2)、进程管理(前台/后台运行、工具使用)、计划任务(at/cron)及常用... 目录引言一、linux系统引导过程与服务控制1.1 系统引导的五个关键阶段1.2 GRUB2的进化优

Unity新手入门学习殿堂级知识详细讲解(图文)

《Unity新手入门学习殿堂级知识详细讲解(图文)》Unity是一款跨平台游戏引擎,支持2D/3D及VR/AR开发,核心功能模块包括图形、音频、物理等,通过可视化编辑器与脚本扩展实现开发,项目结构含A... 目录入门概述什么是 UnityUnity引擎基础认知编辑器核心操作Unity 编辑器项目模式分类工程