Linux 文本处理

2024-08-30 13:44
文章标签 linux 文本处理

本文主要是介绍Linux 文本处理,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.正则表达式

        Linux 正则表达式在文本处理和搜索过程中起着非常重要的作用。它可以用于匹配和查找符合特定模式的字符串,从而实现强大的文本处理功能。以下是一些常见的正则表达式作用:

        1. 匹配字符串:正则表达式可以根据指定的模式匹配字符串。比如,可以使用正则表达式查找所有以特定字符开头或结尾的字符串。

        2. 搜索和替换:正则表达式可以用于搜索和替换文本中的特定字符或模式。可以通过正则表达式匹配需要替换的字符串,并使用新的字符串进行替换。

        3. 字符串提取:正则表达式可以从文本中提取特定的信息或字段。例如,可以使用正则表达式从日志文件中提取特定时间段内的日志记录。

        4. 格式验证:正则表达式可以用于验证输入数据的格式。例如,可以使用正则表达式验证邮箱地址、手机号码、IP地址等。

        5. 数据清理:正则表达式可以帮助清理和规范化数据。可以通过正则表达式删除或替换文本中的非法字符、空白字符等。

        总之,正则表达式在Linux中提供了一种强大的方式来处理和操作文本数据,让文本处理变得更加灵活和高效。

元字符作用
.任意单个字符
*前一个字符匹配0次或多次
?匹配前面的子表达式0到1次
^      匹配行首
$匹配行尾
[ ]匹配中括号中的任意一个字符
[^]匹配除中括号以外的任意一个字符。
\转义符
\{n\}表示其前面的字符恰好出现n次。
\{n, \}表示其前面的字符出现不小于n次。
\{n, m\}

表示其前面的字符至少出现n次,最多出现m次。

2.字符串截取命令 

1.cut命令

语法:cut [选项] 文件名

-f                提取第几列

-d               分隔符:按照指定分隔符分割列

-b               以字节单位进行分割

 例:

提前准备好的数据

ID      Name    Password        Level
1       wang    wang1234        2
2       li      li789456        3
3       xv      xv123456        1
4       liao    liao4567        3               

显示第2-4列的数据

cut -f 2-4 aaa

显示第2和4列的数据

cut -f 2,4 aaa

3.printf命令

语法:printf '输出类型输出格式' 输出内容

类型转换符                        解释

%s                                     输出字符串

%i                                      输出整数

%f                                      输出浮点数

转义字符             解释

\a                        输出警告声音

\b                        输出退格键(Backspace)

\f                         清除屏幕

\n                        换行 常用

\r                         回车 常用

\t                         缩进(tab) 常用

\v                        垂直输出退格键

3、awk命令

语法:awk [参数] [处理内容] [文件名]

1、条件(pattern):

>

>=

==

<=

<

例:大于1级的用户

awk '$4 > 1' aaa

例:在开头添加信息

awk 'BEGIN {printf "----------开头------- \n"}{printf$0 "\n"}' aaa

4.sed命令

语法 sed [选项] [sed内置命令字符] [文件名]

        示例:

        sed -n 'p' 文件路径

选项:

-n取消默认输出格式,只打印处理过的行(通常搭配p使用)
-i 修改保存文件(默认为预览)
-e同时执行多个过滤
-r扩展正则表达式

内置命令字符

a在指定行后添加一条数据或多行数据
d删除匹配的整行内容
i在指定行前添加一条数据或多行数据
p打印当前匹配的数据
c更改匹配行的内容
w筛选的内容保存到文件
r读取文件并追加
s

将匹配的内容进行替换(支持正则表达式)

5.排序命令sort命令

语法:sort [选项] 文件名

选项解释
-f忽略大小写
-n以数值型进行排序,默认使用字符串型排序
-r反向排序
-t指定分隔符,默认是分隔符是制表符
-k n,m按照指定的字段范围排序。从第n字段开始,m字段结束(默认到行尾)
6.统计命令wc 

语法: wc [选项] 文件名

-l           只统计行数

-w         只统计单词数
-m         只统计字符数

如有错误给孩子提醒一下,感谢观看! 

这篇关于Linux 文本处理的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1120988

相关文章

Linux使用nload监控网络流量的方法

《Linux使用nload监控网络流量的方法》Linux中的nload命令是一个用于实时监控网络流量的工具,它提供了传入和传出流量的可视化表示,帮助用户一目了然地了解网络活动,本文给大家介绍了Linu... 目录简介安装示例用法基础用法指定网络接口限制显示特定流量类型指定刷新率设置流量速率的显示单位监控多个

ElasticSearch+Kibana通过Docker部署到Linux服务器中操作方法

《ElasticSearch+Kibana通过Docker部署到Linux服务器中操作方法》本文介绍了Elasticsearch的基本概念,包括文档和字段、索引和映射,还详细描述了如何通过Docker... 目录1、ElasticSearch概念2、ElasticSearch、Kibana和IK分词器部署

Linux流媒体服务器部署流程

《Linux流媒体服务器部署流程》文章详细介绍了流媒体服务器的部署步骤,包括更新系统、安装依赖组件、编译安装Nginx和RTMP模块、配置Nginx和FFmpeg,以及测试流媒体服务器的搭建... 目录流媒体服务器部署部署安装1.更新系统2.安装依赖组件3.解压4.编译安装(添加RTMP和openssl模块

linux下多个硬盘划分到同一挂载点问题

《linux下多个硬盘划分到同一挂载点问题》在Linux系统中,将多个硬盘划分到同一挂载点需要通过逻辑卷管理(LVM)来实现,首先,需要将物理存储设备(如硬盘分区)创建为物理卷,然后,将这些物理卷组成... 目录linux下多个硬盘划分到同一挂载点需要明确的几个概念硬盘插上默认的是非lvm总结Linux下多

linux进程D状态的解决思路分享

《linux进程D状态的解决思路分享》在Linux系统中,进程在内核模式下等待I/O完成时会进入不间断睡眠状态(D状态),这种状态下,进程无法通过普通方式被杀死,本文通过实验模拟了这种状态,并分析了如... 目录1. 问题描述2. 问题分析3. 实验模拟3.1 使用losetup创建一个卷作为pv的磁盘3.

Linux环境变量&&进程地址空间详解

《Linux环境变量&&进程地址空间详解》本文介绍了Linux环境变量、命令行参数、进程地址空间以及Linux内核进程调度队列的相关知识,环境变量是系统运行环境的参数,命令行参数用于传递给程序的参数,... 目录一、初步认识环境变量1.1常见的环境变量1.2环境变量的基本概念二、命令行参数2.1通过命令编程

Linux之进程状态&&进程优先级详解

《Linux之进程状态&&进程优先级详解》文章介绍了操作系统中进程的状态,包括运行状态、阻塞状态和挂起状态,并详细解释了Linux下进程的具体状态及其管理,此外,文章还讨论了进程的优先级、查看和修改进... 目录一、操作系统的进程状态1.1运行状态1.2阻塞状态1.3挂起二、linux下具体的状态三、进程的

Linux编译器--gcc/g++使用方式

《Linux编译器--gcc/g++使用方式》文章主要介绍了C/C++程序的编译过程,包括预编译、编译、汇编和链接四个阶段,并详细解释了每个阶段的作用和具体操作,同时,还介绍了调试和发布版本的概念... 目录一、预编译指令1.1预处理功能1.2指令1.3问题扩展二、编译(生成汇编)三、汇编(生成二进制机器语

Rsnapshot怎么用? 基于Rsync的强大Linux备份工具使用指南

《Rsnapshot怎么用?基于Rsync的强大Linux备份工具使用指南》Rsnapshot不仅可以备份本地文件,还能通过SSH备份远程文件,接下来详细介绍如何安装、配置和使用Rsnaps... Rsnapshot 是一款开源的文件系统快照工具。它结合了 Rsync 和 SSH 的能力,可以帮助你在 li

Linux部署jar包过程

《Linux部署jar包过程》文章介绍了在Linux系统上部署Java(jar)包时需要注意的几个关键点,包括统一JDK版本、添加打包插件、修改数据库密码以及正确执行jar包的方法... 目录linux部署jar包1.统一jdk版本2.打包插件依赖3.修改密码4.执行jar包总结Linux部署jar包部署