python中编码与解码简记

2024-06-04 03:04
文章标签 python 编码 解码 简记

本文主要是介绍python中编码与解码简记,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

python中编码与解码简记

  • 一、读取文本文件指定的编码方式
  • 二、字符串与字节格式互转
  • 三、Base64编码解码
    • 3.1Base64 编解码使用的参数类型
    • 3.2Base64 编码后的字符串显示
    • 3.3Base64 解码后的字符串显示
  • 四、Quoted-Printable编码解码
    • 4.1Quoted-Printable编解码使用的参数类型
    • 4.2Quoted-Printable编码后的字符串显示
    • 4.3Quoted-Printable解码后的字符串显示
  • 参考文档

一、读取文本文件指定的编码方式

示例代码如下:

# 读取输入文件内容
with open(input_file_path, 'r', encoding='utf-8') as input_file:input_data = input_file.read()

在 Python 中,open 函数的 encoding 参数用于指定打开文件时使用的字符编码方式,如果指定的编码方式文件本身的编码方式不匹配,可能会导致读取错误或乱码问题。

文件本身的编码方式取决于操作系统和使用的文本编辑器,可以使用支持显示文件编码的编辑器(如 Notepad++),打开文件查看编码信息。

各操作系统和文本编辑器默认编码如下:

  1. Windows 10 之前的版本——记事本:默认编码是 ANSI,这通常是指当前系统区域设置的代码页,例如 GBK(简体中文区域设置)或 Windows-1252(英语区域设置)。
  2. Windows 10及之后的版本——记事本:默认使用UTF-8编码。
  3. Visual Studio Code、Notepad++编辑器:默认使用 UTF-8 编码,但这可以根据用户配置进行更改。
  4. Linux 和 macOS 系统上:默认的文本文件编码通常是 UTF-8。

在现代操作系统中,UTF-8 已经成为默认和推荐的文本编码标准,使用 encoding=‘utf-8’ 可以最大程度上确保 Python 正确读取文件内容。
如果不指定 encoding 参数,Python 将使用系统默认的编码方式
例如:

  1. Windows 系统的默认编码通常是 cp1252 或 gbk。
  2. Linux 和 macOS 系统的默认编码通常是 utf-8。

UTF-8 是一种常见的字符编码方式,主要特点为:

  1. 广泛支持:UTF-8 是一种通用的字符编码方式,在多种系统和平台上都得到广泛支持。
  2. 能够表示多种字符:UTF-8 可以表示几乎所有的 Unicode 字符,包括 ASCII 字符和其他国际字符。
  3. 兼容性:使用 UTF-8 编码可以确保文件或数据在不同系统和应用程序之间的兼容性。
  4. 标准化:UTF-8 已经成为事实上的标准,许多软件和协议都默认使用 UTF-8 编码。

二、字符串与字节格式互转

示例代码如下:

# 将输入字符串编码为字节数据
input_bytes = input_str.encode('utf-8')
# 将字节数据解码为字符串
input_str = input_bytes.decode('utf-8')

.encode(‘utf-8’):这是字符串对象的方法,用于将字符串按照指定的编码方式进行编码。在这里,编码方式是 UTF-8,指定 UTF-8 编码是一种通用的做法。

  1. 字符串编码为字节数据时,如果包含非 ASCII 字符:可以使用 UTF-8 或GBK编码方式。
  2. 字符串编码为字节数据时,如果仅包含 ASCII 字符:编码方式可以任选,可以使用 ASCII 编码,也可以使用 UTF-8 或GBK编码,但UTF-8 或GBK编码的结果与ASCII 编码的结果一致
  3. 字节数据解码为字符串使用的解码方式要与编码时选择的编码方式一致,但如果编码使用的是ASCII,解码方式可以任选,并不影响结果。

三、Base64编码解码

Base64编码是一种将二进制数据转换为ASCII字符的编码方式,它起源于1960年代的美国军方通信系统,如今已成为网络通信领域的标准编码方法。
Base64编码解码示例代码如下:

import base64# 要编码的二进制数据
binary_data = b'Hello, World!'# 进行 Base64 编码
encoded_data = base64.b64encode(binary_data)# 将编码后的数据转换为字符串
encoded_string = encoded_data.decode('utf-8')print("Base64 编码结果:", encoded_string)# 要解码的 Base64 编码字符串
encoded_string = 'SGVsbG8sIFdvcmxkIQ=='# 解码 Base64 编码字符串
decoded_data = base64.b64decode(encoded_string)# 将解码后的数据转换为字符串
decoded_string = decoded_data.decode('utf-8')print("Base64 解码结果:", decoded_string)

3.1Base64 编解码使用的参数类型

  1. Base64编码,输入必须为字节,输出为字节。
  2. Base64解码,输入可以为字节,也可以为字符串,即如下两条代码等价:
decoded_data = base64.b64decode(encoded_string)
decoded_data = base64.b64decode(encoded_data)

不过,传入字节对象是更常见和推荐的做法,因为 Base64 编码本质上是处理字节数据的。

  1. Base64解码,输出为字节。

3.2Base64 编码后的字符串显示

Base64 编码将二进制数据转换为由 64 个字符组成的字符串,每个字符都代表 6 位二进制数据,这些字符是 ASCII 字符集中的可打印字符。
因此要显示编码后的结果而将编码后的字节数据转换为字符串时,既可指定utf-8,也可指定ascii,如下两条代码,两者效果等价:

#指定utf-8
encoded_string = encoded_data.decode('utf-8')
#指定ascii
encoded_string = encoded_data.decode('ascii')

3.3Base64 解码后的字符串显示

当原始数据为二进制数据时,不需要将解码后的字节数据转换为字符串,但如果原始数据为文本数据,那么就需要显示解码后的文本字符串。
在将解码后的二进制数据转换为字符串时,需要根据原始数据是否包含非 ASCII 字符来选择适当的编码方式。

  1. 原始数据包含非 ASCII 字符,应该使用 UTF-8 编码或其他适当的 Unicode 编码方式进行解码。
  2. 原始数据仅包含 ASCII 字符,可以使用 ASCII 编码或UTF-8 编码进行解码。

四、Quoted-Printable编码解码

Quoted-printable(引用打印)是一种用于在电子邮件和其他文本协议中编码非ASCII字符的方法。该编码将非ASCII字符转换为可打印字符,以便它们可以在各种系统和协议之间正确传输。

Quoted-printable编码的基本原则是:

  1. ASCII字符(字节值小于128)保持不变。
  2. 非ASCII字符(字节值大于或等于128)被转换为等号(=)后跟其十六进制值的表示形式。例如,字母“é”被编码为“=E9”。
  3. 编码要求每行不能超过 76 个字符,如果编码后的内容超过 76 个字符,会在 76 个字符处插入一个软换行符(等号 =),然后在下一行继续。

Quoted-Printable编码解码示例代码如下:

import quopri# 原始字符串
string_data = "Hello, World!"# 将字符串编码为字节
byte_data = string_data.encode('utf-8')# Quoted-Printable 编码
encoded_data = quopri.encodestring(byte_data)
encoded_string = encoded_data.decode('utf-8')
print("Quoted-Printable 编码结果:", encoded_string)# Quoted-Printable 解码
decoded_data = quopri.decodestring(encoded_data)# 将字节数据解码为字符串
decoded_string = decoded_data.decode('utf-8')
print("解码后的字符串:", decoded_string)

4.1Quoted-Printable编解码使用的参数类型

与Base64编解码使用的参数类型完全相同,如下:

  1. Base64编码,输入必须为字节,输出为字节。
  2. Base64解码,输入可以为字节,也可以为字符串,输出为字节。

4.2Quoted-Printable编码后的字符串显示

与Base64编码后的字符串显示方法相同,因为编码后的字符也是ASCII 字符集中的可打印字符。
在将编码后的字节数据转换为字符串时,既可指定utf-8,也可指定ascii,代码与3.2中相同。

4.3Quoted-Printable解码后的字符串显示

与Base64解码后的字符串显示方法相同,不再赘述。

参考文档

Quoted-printable 编码介绍、编码解码转换

这篇关于python中编码与解码简记的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1028883

相关文章

使用Python删除Excel中的行列和单元格示例详解

《使用Python删除Excel中的行列和单元格示例详解》在处理Excel数据时,删除不需要的行、列或单元格是一项常见且必要的操作,本文将使用Python脚本实现对Excel表格的高效自动化处理,感兴... 目录开发环境准备使用 python 删除 Excphpel 表格中的行删除特定行删除空白行删除含指定

Python通用唯一标识符模块uuid使用案例详解

《Python通用唯一标识符模块uuid使用案例详解》Pythonuuid模块用于生成128位全局唯一标识符,支持UUID1-5版本,适用于分布式系统、数据库主键等场景,需注意隐私、碰撞概率及存储优... 目录简介核心功能1. UUID版本2. UUID属性3. 命名空间使用场景1. 生成唯一标识符2. 数

Python办公自动化实战之打造智能邮件发送工具

《Python办公自动化实战之打造智能邮件发送工具》在数字化办公场景中,邮件自动化是提升工作效率的关键技能,本文将演示如何使用Python的smtplib和email库构建一个支持图文混排,多附件,多... 目录前言一、基础配置:搭建邮件发送框架1.1 邮箱服务准备1.2 核心库导入1.3 基础发送函数二、

Python包管理工具pip的升级指南

《Python包管理工具pip的升级指南》本文全面探讨Python包管理工具pip的升级策略,从基础升级方法到高级技巧,涵盖不同操作系统环境下的最佳实践,我们将深入分析pip的工作原理,介绍多种升级方... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核

基于Python实现一个图片拆分工具

《基于Python实现一个图片拆分工具》这篇文章主要为大家详细介绍了如何基于Python实现一个图片拆分工具,可以根据需要的行数和列数进行拆分,感兴趣的小伙伴可以跟随小编一起学习一下... 简单介绍先自己选择输入的图片,默认是输出到项目文件夹中,可以自己选择其他的文件夹,选择需要拆分的行数和列数,可以通过

Python中反转字符串的常见方法小结

《Python中反转字符串的常见方法小结》在Python中,字符串对象没有内置的反转方法,然而,在实际开发中,我们经常会遇到需要反转字符串的场景,比如处理回文字符串、文本加密等,因此,掌握如何在Pyt... 目录python中反转字符串的方法技术背景实现步骤1. 使用切片2. 使用 reversed() 函

Python中将嵌套列表扁平化的多种实现方法

《Python中将嵌套列表扁平化的多种实现方法》在Python编程中,我们常常会遇到需要将嵌套列表(即列表中包含列表)转换为一个一维的扁平列表的需求,本文将给大家介绍了多种实现这一目标的方法,需要的朋... 目录python中将嵌套列表扁平化的方法技术背景实现步骤1. 使用嵌套列表推导式2. 使用itert

使用Docker构建Python Flask程序的详细教程

《使用Docker构建PythonFlask程序的详细教程》在当今的软件开发领域,容器化技术正变得越来越流行,而Docker无疑是其中的佼佼者,本文我们就来聊聊如何使用Docker构建一个简单的Py... 目录引言一、准备工作二、创建 Flask 应用程序三、创建 dockerfile四、构建 Docker

Python使用vllm处理多模态数据的预处理技巧

《Python使用vllm处理多模态数据的预处理技巧》本文深入探讨了在Python环境下使用vLLM处理多模态数据的预处理技巧,我们将从基础概念出发,详细讲解文本、图像、音频等多模态数据的预处理方法,... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核

Python使用pip工具实现包自动更新的多种方法

《Python使用pip工具实现包自动更新的多种方法》本文深入探讨了使用Python的pip工具实现包自动更新的各种方法和技术,我们将从基础概念开始,逐步介绍手动更新方法、自动化脚本编写、结合CI/C... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核