logger使用,解决中文乱码问题,重复缓存问题

2024-05-16 09:28

本文主要是介绍logger使用,解决中文乱码问题,重复缓存问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

目的

在模型训练过程中,想把控制台内容输出的内容缓存起来,以便后期检查使用,就用起了logger。用的时候遇到过中文乱码问题以及重复缓存问题(即后面的logger对象将前面的logger对象缓存内容也缓存下来了)。

解决方法:

  1. 设置编码格式(encoding=“utf-8”
  2. 写了清楚logger对象的函数。

在 Python 中使用 logging 模块时,如果实例化了多个 loggers 并且日志处理器没有被正确地移除,可能会导致日志数据重复。

代码

'''
Descripttion: 
Result: 
Author: Philo
Date: 2023-10-10 10:04:28
LastEditors: Philo
LastEditTime: 2024-05-15 20:53:44
'''
import logging
import osdef get_logger(log_name, verbosity=1):level_dict = {0: logging.DEBUG, 1: logging.INFO, 2: logging.WARNING} # 创建了一个字典,用于将传入的 verbosity 参数转换为相应的日志记录级别。formatter = logging.Formatter("[%(asctime)s][%(filename)s] %(message)s"   # 创建了一个格式化对象,用于指定日志记录的格式,其中包含了记录时间、文件名和消息内容。)logger = logging.getLogger(log_name)  # 获取一个 Logger 对象logger.setLevel(level_dict[verbosity]) # 设置记录器的记录级别,根据传入的 verbosity 参数选择相应的记录级别。fh = logging.FileHandler(log_name, "w", encoding="utf-8") # 创建了一个文件处理器对象,用于将日志记录写入到指定的文件中,以追加的方式写入。fh.setFormatter(formatter) # 为文件处理器对象设置了格式化器,指定了写入到文件中的日志记录格式。logger.addHandler(fh) # 将文件处理器对象添加到记录器中,以便将日志记录写入到文件中。return logger # 返回创建的记录器对象,以便在其他地方使用。def clear_loggers():for handler in logging.root.handlers[:]:logging.root.removeHandler(handler)if __name__ == "__main__":# 设置日志文件路径和记录级别log_filename = "example.log"log_verbosity = 1  # 0: DEBUG, 1: INFO, 2: WARNING# 创建记录器logger = get_logger(log_filename)# 记录不同级别的消息logger.debug("这是一条调试信息")logger.info("这是一条普通信息")logger.warning("这是一条警告信息")logger.error("这是一条错误信息")logger.critical("这是一条严重错误信息")clear_loggers()

输出结果:
在这里插入图片描述
代码训练过程中使用:
在这里插入图片描述

这篇关于logger使用,解决中文乱码问题,重复缓存问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/994513

相关文章

中文分词jieba库的使用与实景应用(一)

知识星球:https://articles.zsxq.com/id_fxvgc803qmr2.html 目录 一.定义: 精确模式(默认模式): 全模式: 搜索引擎模式: paddle 模式(基于深度学习的分词模式): 二 自定义词典 三.文本解析   调整词出现的频率 四. 关键词提取 A. 基于TF-IDF算法的关键词提取 B. 基于TextRank算法的关键词提取

使用SecondaryNameNode恢复NameNode的数据

1)需求: NameNode进程挂了并且存储的数据也丢失了,如何恢复NameNode 此种方式恢复的数据可能存在小部分数据的丢失。 2)故障模拟 (1)kill -9 NameNode进程 [lytfly@hadoop102 current]$ kill -9 19886 (2)删除NameNode存储的数据(/opt/module/hadoop-3.1.4/data/tmp/dfs/na

Hadoop数据压缩使用介绍

一、压缩原则 (1)运算密集型的Job,少用压缩 (2)IO密集型的Job,多用压缩 二、压缩算法比较 三、压缩位置选择 四、压缩参数配置 1)为了支持多种压缩/解压缩算法,Hadoop引入了编码/解码器 2)要在Hadoop中启用压缩,可以配置如下参数

Makefile简明使用教程

文章目录 规则makefile文件的基本语法:加在命令前的特殊符号:.PHONY伪目标: Makefilev1 直观写法v2 加上中间过程v3 伪目标v4 变量 make 选项-f-n-C Make 是一种流行的构建工具,常用于将源代码转换成可执行文件或者其他形式的输出文件(如库文件、文档等)。Make 可以自动化地执行编译、链接等一系列操作。 规则 makefile文件

好题——hdu2522(小数问题:求1/n的第一个循环节)

好喜欢这题,第一次做小数问题,一开始真心没思路,然后参考了网上的一些资料。 知识点***********************************无限不循环小数即无理数,不能写作两整数之比*****************************(一开始没想到,小学没学好) 此题1/n肯定是一个有限循环小数,了解这些后就能做此题了。 按照除法的机制,用一个函数表示出来就可以了,代码如下

hdu1043(八数码问题,广搜 + hash(实现状态压缩) )

利用康拓展开将一个排列映射成一个自然数,然后就变成了普通的广搜题。 #include<iostream>#include<algorithm>#include<string>#include<stack>#include<queue>#include<map>#include<stdio.h>#include<stdlib.h>#include<ctype.h>#inclu

使用opencv优化图片(画面变清晰)

文章目录 需求影响照片清晰度的因素 实现降噪测试代码 锐化空间锐化Unsharp Masking频率域锐化对比测试 对比度增强常用算法对比测试 需求 对图像进行优化,使其看起来更清晰,同时保持尺寸不变,通常涉及到图像处理技术如锐化、降噪、对比度增强等 影响照片清晰度的因素 影响照片清晰度的因素有很多,主要可以从以下几个方面来分析 1. 拍摄设备 相机传感器:相机传

poj2406(连续重复子串)

题意:判断串s是不是str^n,求str的最大长度。 解题思路:kmp可解,后缀数组的倍增算法超时。next[i]表示在第i位匹配失败后,自动跳转到next[i],所以1到next[n]这个串 等于 n-next[n]+1到n这个串。 代码如下; #include<iostream>#include<algorithm>#include<stdio.h>#include<math.

poj3261(可重复k次的最长子串)

题意:可重复k次的最长子串 解题思路:求所有区间[x,x+k-1]中的最小值的最大值。求sa时间复杂度Nlog(N),求最值时间复杂度N*N,但实际复杂度很低。题目数据也比较水,不然估计过不了。 代码入下: #include<iostream>#include<algorithm>#include<stdio.h>#include<math.h>#include<cstring

如何解决线上平台抽佣高 线下门店客流少的痛点!

目前,许多传统零售店铺正遭遇客源下降的难题。尽管广告推广能带来一定的客流,但其费用昂贵。鉴于此,众多零售商纷纷选择加入像美团、饿了么和抖音这样的大型在线平台,但这些平台的高佣金率导致了利润的大幅缩水。在这样的市场环境下,商家之间的合作网络逐渐成为一种有效的解决方案,通过资源和客户基础的共享,实现共同的利益增长。 以最近在上海兴起的一个跨行业合作平台为例,该平台融合了环保消费积分系统,在短