logging | 项目开发中日志模块logging在整个工程中的应用

2024-09-03 00:36

本文主要是介绍logging | 项目开发中日志模块logging在整个工程中的应用,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

日志模块

  • 日志介绍
  • 1. logging使用场景
    • 设置级别
  • 2. 实际logging使用 - 学习版
    • 2.1 终端输出StreamHandler
    • 2.2 日志文件中输出FileHandler
    • 2.3 同时写入终端和文件
    • 2.4 .Formatter参数语句
  • 3. 封装logging模块 - 实战版 ⭐
    • 3.1 配置config文件夹下project_config.py文件
      • time模块
    • 3.2 封装util文件夹下logging_until.py文件
    • 3.3 其他模块下的mycode文件
    • 注意事项
      • 解决

日志介绍

一个合格的程序,日志是必须要输出的。 我们借助Python的logging库,来完成日志输出。先编写基础的日志模块代码,可供业务逻辑代码使用。

所说的日志就是程序在运行时,程序当前处于什么状态,通过对外输出信息来确定。对外输出的这个信息,就是程序的运行日志。`

在这里插入图片描述

  • 级别

CRITICAL =50
FATAL= CRITICAL
ERROR= 40
WARNING =30
WARN= WARNING
INFO= 20
DEBUG=10
NOTSET =0

1. logging使用场景

# 注意使用场景   每个类型的级别不同 
logging.debug('debug 日志输出')  # 罗嗦模式
logging.info("info日志输出")     # 代码关键点输出
logging.warning("warning日志输出")  # 可能出问题地方 警告输出
logging.error("error日志输出")      # 出问题
logging.fatal("fatal中志输出")  # 致命的  程序无法执行时

在这里插入图片描述
默认是warnging级别以上的输出信息

设置级别

import logginglogging.getLogger().setLevel(10) # 只会输出 大于等于该数值的 logging# 注意使用场景
logging.debug('debug 日志输出')  # 罗嗦模式
logging.info("info日志输出")     # 代码关键点输出
logging.warning("warning日志输出")  # 可能出问题地方 警告输出
logging.error("error日志输出")      # 出问题
logging.fatal("fatal中志输出")  # 致命的  程序无法执行时

默认的warning级别是30,当设置为10的时候,所有的日志都可以看到 方便我们开发时使用
设置为30 则有些日志 不需要让用看到 产品简介 同时关键信息 是让开发人员获取

2. 实际logging使用 - 学习版

  • Pycharm目录结构
    在这里插入图片描述

在这里插入图片描述

2.1 终端输出StreamHandler

核心理解:

  1. 导入模块 (自己的文件名不要和内置模块名称重名,否则内置模块无法使用)
  2. 日志管理对象: 负责日志的收集工作
  3. 日志处理器: 负责日志的输出形式管理(终端/文件) 日志格式: 负责日志的输出格式管理
  4. 日志格式:
'%(asctime)s - [%(levelname)s] - %(filename)s[%(lineno)d]:%(message)s'
  • 设置logger对象 假设是logger.py
# 导包
import logging##################### 日志器对象的创建和配置 #####################
# 1. 日志器对象的创建
logger = logging.getLogger()# 2. 日志处理器的创建  输出到终端
stream_handler = logging.StreamHandler()# 3. 将日志处理器绑定到日志器对象上
logger.addHandler(stream_handler)# TODO: 4. 创建一个格式对象
fmt = logging.Formatter('%(asctime)s - [%(levelname)s] - %(filename)s[%(lineno)d]:%(message)s')# TODO: 5. 将日志格式对象绑定到日志处理器上
stream_handler.setFormatter(fmt)
  • 在模块文件中引入 mycode.py
 ######################### 日志的输出 ######################## 1. 设置日志输出级别logger.setLevel(logging.INFO)  # INFO级别以上的输出# 2. 输出不同级别的日志信息logger.debug('这是一个debug级别的日志信息')logger.info('这是一个info级别的日志信息')logger.warning('这是一个warning级别的日志信息')logger.error('这是一个error级别的日志信息')logger.critical('这是一个critical级别的日志信息')

在这里插入图片描述

2.2 日志文件中输出FileHandler

  • logger.py 输出到文件
# 导入logging模块
import logging#################### 日志器对象的创建和配置 ####################
# 1. 日志器对象的创建
logger = logging.getLogger()# TODO: 2. 创建换一个文件类型的日志处理器
# 注意: filename要传入一个log文件的路径,可以使用绝对路径也可以使用相对路径,但是文件目录一定要存在,文件可以不存在
# 举例: ../logs/test.log 路径中 logs目录必须存在, test.log可以不存在
file_handler = logging.FileHandler(filename='../logs/test.log',mode='a',encoding='utf8'
)
# 3. 将日志处理器绑定到日志器对象上
logger.addHandler(file_handler)
# 4. 创建一个格式对象
fmt = logging.Formatter('%(asctime)s - [%(levelname)s] - %(filename)s[%(lineno)d]:%(message)s')
# 5. 将日志格式对象绑定到日志处理器上
file_handler.setFormatter(fmt)
  • mycode.py
######################### 日志的输出 #######################
# 1. 设置日志输出级别
logger.setLevel(logging.INFO)
# 2. 输出不同级别的日志信息
logger.debug('这是一个debug级别的日志信息')
logger.info('这是一个info级别的日志信息')
logger.warning('这是一个warning级别的日志信息')
logger.error('这是一个error级别的日志信息')
logger.critical('这是一个critical级别的日志信息')

提前创建好该文件filename=‘…/logs/test.log’

2.3 同时写入终端和文件

file_handler logging.FileHandler('../logs/test.log')
file_handler1 =logging.FileHandler('../logs/test.log')
stream_handler logging.StreamHandler()fmt = logging.Formatter('%(asctime)s - [%(levelname)s] - %(filename)s[%(lineno)d]:%(message)s')file_handler.setFormatter(fmt)
file_handler1.setFormatter(fmt)
stream_handler.setFormatter(fmt)

2.4 .Formatter参数语句

‘%(asctime)s - [%(levelname)s] - %(filename)s[%(lineno)d]:%(message)s’

在这里插入图片描述

3. 封装logging模块 - 实战版 ⭐

在这里插入图片描述

3.1 配置config文件夹下project_config.py文件

测试和发布的时候通过更改配置文件可以更快的帮助我们提高效率

我们的需求是每个整点生成log日志文件,因此要结合time模块

import timelog_root_path = 'E:\\pythonProject\\pythonetl\\logs\\'
log_filename = f'pytel-{time.strftime("%Y%m%d-%H",time.localtime())}.log'
# print(log_filename)   pytel-20240902-16.logslevel = 10

time模块

import timeprint(time.time())   # 距离1970年过了多少秒 (以秒为单位)
print(time.localtime()) #  time.struct_time(tm_year=2024, tm_mon=9, tm_mday=2, tm_hour=16, tm_min=10, tm_sec=57, tm_wday=0, tm_yday=246, tm_isdst=0)print(time.strftime("%Y %m %d",time.localtime())) # 2024 09 02
print(time.strptime("2022-10-20 16:18:30","%Y-%m-%d %H:%M:%S"))

在这里插入图片描述

'''
常见的时间格式化的格式:
%Y:4位数字的年份:2024
%m:2位数字的月份:09
%d:2位数字的日期:02
%H:24小时制的小时
%M:2位数字的分钟
%S:2位数字的秒
如果要格式化为:2022-05-1510:05:55
'''

3.2 封装util文件夹下logging_until.py文件

这里不仅在终端进行了输出日志信息,同时在文件中保存了日志信息

import logging
import osfrom config.project_config import log_root_path,log_filename,level
class Logging():def __init__(self,level=20):self.logger = logging.getLogger()self.logger.setLevel(level)def init_logger():logger = Logging(level).logger# 缓存机制 避免日志重复输出  ⭐⭐if logger.handlers:return loggerpath = log_root_path+log_filename# 创建并打开文件with open(path, 'w') as file:# 文件被创建,但这里不写入任何内容,所以它是空的pass# 构造handler# 优化日志存储文件 StreamHandlerstream_handler = logging.StreamHandler()file_handler = logging.FileHandler(filename=path,mode='a',encoding='utf-8')fmt = logging.Formatter('%(asctime)s - [%(levelname)s] - %(filename)s[%(lineno)d]:%(message)s')stream_handler.setFormatter(fmt)file_handler.setFormatter(fmt)# 组合logger.addHandler(stream_handler)logger.addHandler(file_handler)return logger

3.3 其他模块下的mycode文件

  • 测试1
from util.logging_util import init_loggerlogger = init_logger()
logger.info('This is a test!!')
logger.info('This is aaaaaaaaaaaaaaaaa test!!')

在这里插入图片描述
在这里插入图片描述

  • 测试2
from util.logging_util import init_loggerlogger = init_logger()
logger.info('This is a test!!')
logger.info('This is aaaaaaaaaaaaaaaaa test!!')
logger.info('This is bbbbbbbbbbbbbbbbbbb test!!')

在这里插入图片描述
在这里插入图片描述

注意事项

若是在模块中这样运行代码

from util.logging_util import init_logger#错误用法#是因为python的缓存机制,第一次调用init_logger函数
#这时会添加filehandler streamhandle
init_logger().info("测试info1")
#第二次调用时,因为履存了rootlogger,所以再次会添加filehandler streamhandler
init_logger().info("测试info2")
#第三次就变成了三个hand1er
init_logger().info("测试info3")

在这里插入图片描述

解决

在logging_until.py的init_logger()中加入是否存在句柄的语句

def init_logger():logger = Logging(level).logger# 缓存机制 避免日志重复输出if logger.handlers:return logger
...

这篇关于logging | 项目开发中日志模块logging在整个工程中的应用的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1131525

相关文章

Ilya-AI分享的他在OpenAI学习到的15个提示工程技巧

Ilya(不是本人,claude AI)在社交媒体上分享了他在OpenAI学习到的15个Prompt撰写技巧。 以下是详细的内容: 提示精确化:在编写提示时,力求表达清晰准确。清楚地阐述任务需求和概念定义至关重要。例:不用"分析文本",而用"判断这段话的情感倾向:积极、消极还是中性"。 快速迭代:善于快速连续调整提示。熟练的提示工程师能够灵活地进行多轮优化。例:从"总结文章"到"用

这15个Vue指令,让你的项目开发爽到爆

1. V-Hotkey 仓库地址: github.com/Dafrok/v-ho… Demo: 戳这里 https://dafrok.github.io/v-hotkey 安装: npm install --save v-hotkey 这个指令可以给组件绑定一个或多个快捷键。你想要通过按下 Escape 键后隐藏某个组件,按住 Control 和回车键再显示它吗?小菜一碟: <template

中文分词jieba库的使用与实景应用(一)

知识星球:https://articles.zsxq.com/id_fxvgc803qmr2.html 目录 一.定义: 精确模式(默认模式): 全模式: 搜索引擎模式: paddle 模式(基于深度学习的分词模式): 二 自定义词典 三.文本解析   调整词出现的频率 四. 关键词提取 A. 基于TF-IDF算法的关键词提取 B. 基于TextRank算法的关键词提取

水位雨量在线监测系统概述及应用介绍

在当今社会,随着科技的飞速发展,各种智能监测系统已成为保障公共安全、促进资源管理和环境保护的重要工具。其中,水位雨量在线监测系统作为自然灾害预警、水资源管理及水利工程运行的关键技术,其重要性不言而喻。 一、水位雨量在线监测系统的基本原理 水位雨量在线监测系统主要由数据采集单元、数据传输网络、数据处理中心及用户终端四大部分构成,形成了一个完整的闭环系统。 数据采集单元:这是系统的“眼睛”,

python: 多模块(.py)中全局变量的导入

文章目录 global关键字可变类型和不可变类型数据的内存地址单模块(单个py文件)的全局变量示例总结 多模块(多个py文件)的全局变量from x import x导入全局变量示例 import x导入全局变量示例 总结 global关键字 global 的作用范围是模块(.py)级别: 当你在一个模块(文件)中使用 global 声明变量时,这个变量只在该模块的全局命名空

Hadoop企业开发案例调优场景

需求 (1)需求:从1G数据中,统计每个单词出现次数。服务器3台,每台配置4G内存,4核CPU,4线程。 (2)需求分析: 1G / 128m = 8个MapTask;1个ReduceTask;1个mrAppMaster 平均每个节点运行10个 / 3台 ≈ 3个任务(4    3    3) HDFS参数调优 (1)修改:hadoop-env.sh export HDFS_NAMENOD

如何用Docker运行Django项目

本章教程,介绍如何用Docker创建一个Django,并运行能够访问。 一、拉取镜像 这里我们使用python3.11版本的docker镜像 docker pull python:3.11 二、运行容器 这里我们将容器内部的8080端口,映射到宿主机的80端口上。 docker run -itd --name python311 -p

深入探索协同过滤:从原理到推荐模块案例

文章目录 前言一、协同过滤1. 基于用户的协同过滤(UserCF)2. 基于物品的协同过滤(ItemCF)3. 相似度计算方法 二、相似度计算方法1. 欧氏距离2. 皮尔逊相关系数3. 杰卡德相似系数4. 余弦相似度 三、推荐模块案例1.基于文章的协同过滤推荐功能2.基于用户的协同过滤推荐功能 前言     在信息过载的时代,推荐系统成为连接用户与内容的桥梁。本文聚焦于

csu 1446 Problem J Modified LCS (扩展欧几里得算法的简单应用)

这是一道扩展欧几里得算法的简单应用题,这题是在湖南多校训练赛中队友ac的一道题,在比赛之后请教了队友,然后自己把它a掉 这也是自己独自做扩展欧几里得算法的题目 题意:把题意转变下就变成了:求d1*x - d2*y = f2 - f1的解,很明显用exgcd来解 下面介绍一下exgcd的一些知识点:求ax + by = c的解 一、首先求ax + by = gcd(a,b)的解 这个

hdu1394(线段树点更新的应用)

题意:求一个序列经过一定的操作得到的序列的最小逆序数 这题会用到逆序数的一个性质,在0到n-1这些数字组成的乱序排列,将第一个数字A移到最后一位,得到的逆序数为res-a+(n-a-1) 知道上面的知识点后,可以用暴力来解 代码如下: #include<iostream>#include<algorithm>#include<cstring>#include<stack>#in