运维入门- python实现对.log日志文件的无用行内容过滤,便于留存有价值的信息

本文主要是介绍运维入门- python实现对.log日志文件的无用行内容过滤,便于留存有价值的信息,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

代码原文:

def remove_offline_messages(file_path):try:# 打开文件并读取所有行with open(file_path, 'r', encoding='utf-8') as file:lines = file.readlines()# 过滤掉包含'pc消息离线pcadmin'的行filtered_lines = [line for line in lines if '丢弃消息======' not in line]# 将过滤后的内容写回文件with open(file_path, 'w', encoding='utf-8') as file:file.writelines(filtered_lines)print("文件处理完成,相关行已删除。")except Exception as e:print(f"处理文件时出错: {e}")# 使用方法
file_path = 'ws_business.log'
remove_offline_messages(file_path)

这段 Python 代码定义了一个函数 remove_offline_messages,用于从指定文件中删除包含特定字符串的行,并将处理后的内容写回文件。下面是对这段代码的详细解释:

函数定义

def remove_offline_messages(file_path):
  • def:定义一个函数。
  • remove_offline_messages:函数名,表示删除离线消息。
  • file_path:函数参数,表示要处理的文件路径。

尝试读取文件并处理

try:
  • try:开始一个异常处理块,用于捕获和处理可能出现的异常。
打开文件并读取所有行
# 打开文件并读取所有行
with open(file_path, 'r', encoding='utf-8') as file:lines = file.readlines()
  • with open(file_path, 'r', encoding='utf-8') as file:使用 with 语句以只读模式 ('r') 打开文件,编码方式为 utf-8with 语句会在 file 对象退出上下文时自动关闭文件。
  • file.readlines():读取文件中的所有行,并将它们存储在 lines 列表中,每一行作为列表的一个元素。
过滤掉不需要的行
# 过滤掉包含'丢弃消息======'的行
filtered_lines = [line for line in lines if '丢弃消息======' not in line]
  • 列表推导式 filtered_lines = [line for line in lines if '丢弃消息======' not in line]:遍历 lines 列表,将不包含字符串 '丢弃消息======' 的行保留,形成新的列表 filtered_lines
将过滤后的内容写回文件
# 将过滤后的内容写回文件
with open(file_path, 'w', encoding='utf-8') as file:file.writelines(filtered_lines)
  • with open(file_path, 'w', encoding='utf-8') as file:使用 with 语句以写入模式 ('w') 打开文件,编码方式为 utf-8。此时文件内容会被清空。
  • file.writelines(filtered_lines):将 filtered_lines 列表中的每一行写入文件。

打印处理完成信息

print("文件处理完成,相关行已删除。")
  • print:输出提示信息,表示文件处理已完成,并且相关行已被删除。

异常处理

except Exception as e:print(f"处理文件时出错: {e}")
  • except Exception as e:捕获所有异常,并将异常实例赋值给 e
  • print(f"处理文件时出错: {e}"):输出异常信息,提示处理文件时出现了错误,并显示具体的异常内容。

函数调用

# 使用方法
file_path = 'ws_business.log'
remove_offline_messages(file_path)
  • file_path = 'ws_business.log':定义文件路径变量,指向要处理的日志文件。
  • remove_offline_messages(file_path):调用 remove_offline_messages 函数,传入文件路径,执行文件内容的过滤和写入操作。

代码的功能和目的

  • 功能:从指定文件中删除包含特定字符串(‘丢弃消息======’)的行,并将处理后的文件内容写回原文件。
  • 目的:清理日志文件或其他文本文件,移除不需要的或不相关的信息,保持文件内容的整洁。

应用场景

  • 清理日志文件,移除不必要的消息,减少文件体积。
  • 过滤数据文件,删除包含特定关键词的行。

文章介绍由chatgpt协助整理

这篇关于运维入门- python实现对.log日志文件的无用行内容过滤,便于留存有价值的信息的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1047436

相关文章

Python实现AVIF图片与其他图片格式间的批量转换

《Python实现AVIF图片与其他图片格式间的批量转换》这篇文章主要为大家详细介绍了如何使用Pillow库实现AVIF与其他格式的相互转换,即将AVIF转换为常见的格式,比如JPG或PNG,需要的小... 目录环境配置1.将单个 AVIF 图片转换为 JPG 和 PNG2.批量转换目录下所有 AVIF 图

Python通过模块化开发优化代码的技巧分享

《Python通过模块化开发优化代码的技巧分享》模块化开发就是把代码拆成一个个“零件”,该封装封装,该拆分拆分,下面小编就来和大家简单聊聊python如何用模块化开发进行代码优化吧... 目录什么是模块化开发如何拆分代码改进版:拆分成模块让模块更强大:使用 __init__.py你一定会遇到的问题模www.

Pydantic中model_validator的实现

《Pydantic中model_validator的实现》本文主要介绍了Pydantic中model_validator的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价... 目录引言基础知识创建 Pydantic 模型使用 model_validator 装饰器高级用法mo

详解如何通过Python批量转换图片为PDF

《详解如何通过Python批量转换图片为PDF》:本文主要介绍如何基于Python+Tkinter开发的图片批量转PDF工具,可以支持批量添加图片,拖拽等操作,感兴趣的小伙伴可以参考一下... 目录1. 概述2. 功能亮点2.1 主要功能2.2 界面设计3. 使用指南3.1 运行环境3.2 使用步骤4. 核

Python 安装和配置flask, flask_cors的图文教程

《Python安装和配置flask,flask_cors的图文教程》:本文主要介绍Python安装和配置flask,flask_cors的图文教程,本文通过图文并茂的形式给大家介绍的非常详细,... 目录一.python安装:二,配置环境变量,三:检查Python安装和环境变量,四:安装flask和flas

AJAX请求上传下载进度监控实现方式

《AJAX请求上传下载进度监控实现方式》在日常Web开发中,AJAX(AsynchronousJavaScriptandXML)被广泛用于异步请求数据,而无需刷新整个页面,:本文主要介绍AJAX请... 目录1. 前言2. 基于XMLHttpRequest的进度监控2.1 基础版文件上传监控2.2 增强版多

使用Python自建轻量级的HTTP调试工具

《使用Python自建轻量级的HTTP调试工具》这篇文章主要为大家详细介绍了如何使用Python自建一个轻量级的HTTP调试工具,文中的示例代码讲解详细,感兴趣的小伙伴可以参考一下... 目录一、为什么需要自建工具二、核心功能设计三、技术选型四、分步实现五、进阶优化技巧六、使用示例七、性能对比八、扩展方向建

Redis分片集群的实现

《Redis分片集群的实现》Redis分片集群是一种将Redis数据库分散到多个节点上的方式,以提供更高的性能和可伸缩性,本文主要介绍了Redis分片集群的实现,具有一定的参考价值,感兴趣的可以了解一... 目录1. Redis Cluster的核心概念哈希槽(Hash Slots)主从复制与故障转移2.

springboot+dubbo实现时间轮算法

《springboot+dubbo实现时间轮算法》时间轮是一种高效利用线程资源进行批量化调度的算法,本文主要介绍了springboot+dubbo实现时间轮算法,文中通过示例代码介绍的非常详细,对大家... 目录前言一、参数说明二、具体实现1、HashedwheelTimer2、createWheel3、n

基于Python打造一个可视化FTP服务器

《基于Python打造一个可视化FTP服务器》在日常办公和团队协作中,文件共享是一个不可或缺的需求,所以本文将使用Python+Tkinter+pyftpdlib开发一款可视化FTP服务器,有需要的小... 目录1. 概述2. 功能介绍3. 如何使用4. 代码解析5. 运行效果6.相关源码7. 总结与展望1