python中编码与解码简记

2024-06-04 03:04
文章标签 python 编码 解码 简记

本文主要是介绍python中编码与解码简记,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

python中编码与解码简记

  • 一、读取文本文件指定的编码方式
  • 二、字符串与字节格式互转
  • 三、Base64编码解码
    • 3.1Base64 编解码使用的参数类型
    • 3.2Base64 编码后的字符串显示
    • 3.3Base64 解码后的字符串显示
  • 四、Quoted-Printable编码解码
    • 4.1Quoted-Printable编解码使用的参数类型
    • 4.2Quoted-Printable编码后的字符串显示
    • 4.3Quoted-Printable解码后的字符串显示
  • 参考文档

一、读取文本文件指定的编码方式

示例代码如下:

# 读取输入文件内容
with open(input_file_path, 'r', encoding='utf-8') as input_file:input_data = input_file.read()

在 Python 中,open 函数的 encoding 参数用于指定打开文件时使用的字符编码方式,如果指定的编码方式文件本身的编码方式不匹配,可能会导致读取错误或乱码问题。

文件本身的编码方式取决于操作系统和使用的文本编辑器,可以使用支持显示文件编码的编辑器(如 Notepad++),打开文件查看编码信息。

各操作系统和文本编辑器默认编码如下:

  1. Windows 10 之前的版本——记事本:默认编码是 ANSI,这通常是指当前系统区域设置的代码页,例如 GBK(简体中文区域设置)或 Windows-1252(英语区域设置)。
  2. Windows 10及之后的版本——记事本:默认使用UTF-8编码。
  3. Visual Studio Code、Notepad++编辑器:默认使用 UTF-8 编码,但这可以根据用户配置进行更改。
  4. Linux 和 macOS 系统上:默认的文本文件编码通常是 UTF-8。

在现代操作系统中,UTF-8 已经成为默认和推荐的文本编码标准,使用 encoding=‘utf-8’ 可以最大程度上确保 Python 正确读取文件内容。
如果不指定 encoding 参数,Python 将使用系统默认的编码方式
例如:

  1. Windows 系统的默认编码通常是 cp1252 或 gbk。
  2. Linux 和 macOS 系统的默认编码通常是 utf-8。

UTF-8 是一种常见的字符编码方式,主要特点为:

  1. 广泛支持:UTF-8 是一种通用的字符编码方式,在多种系统和平台上都得到广泛支持。
  2. 能够表示多种字符:UTF-8 可以表示几乎所有的 Unicode 字符,包括 ASCII 字符和其他国际字符。
  3. 兼容性:使用 UTF-8 编码可以确保文件或数据在不同系统和应用程序之间的兼容性。
  4. 标准化:UTF-8 已经成为事实上的标准,许多软件和协议都默认使用 UTF-8 编码。

二、字符串与字节格式互转

示例代码如下:

# 将输入字符串编码为字节数据
input_bytes = input_str.encode('utf-8')
# 将字节数据解码为字符串
input_str = input_bytes.decode('utf-8')

.encode(‘utf-8’):这是字符串对象的方法,用于将字符串按照指定的编码方式进行编码。在这里,编码方式是 UTF-8,指定 UTF-8 编码是一种通用的做法。

  1. 字符串编码为字节数据时,如果包含非 ASCII 字符:可以使用 UTF-8 或GBK编码方式。
  2. 字符串编码为字节数据时,如果仅包含 ASCII 字符:编码方式可以任选,可以使用 ASCII 编码,也可以使用 UTF-8 或GBK编码,但UTF-8 或GBK编码的结果与ASCII 编码的结果一致
  3. 字节数据解码为字符串使用的解码方式要与编码时选择的编码方式一致,但如果编码使用的是ASCII,解码方式可以任选,并不影响结果。

三、Base64编码解码

Base64编码是一种将二进制数据转换为ASCII字符的编码方式,它起源于1960年代的美国军方通信系统,如今已成为网络通信领域的标准编码方法。
Base64编码解码示例代码如下:

import base64# 要编码的二进制数据
binary_data = b'Hello, World!'# 进行 Base64 编码
encoded_data = base64.b64encode(binary_data)# 将编码后的数据转换为字符串
encoded_string = encoded_data.decode('utf-8')print("Base64 编码结果:", encoded_string)# 要解码的 Base64 编码字符串
encoded_string = 'SGVsbG8sIFdvcmxkIQ=='# 解码 Base64 编码字符串
decoded_data = base64.b64decode(encoded_string)# 将解码后的数据转换为字符串
decoded_string = decoded_data.decode('utf-8')print("Base64 解码结果:", decoded_string)

3.1Base64 编解码使用的参数类型

  1. Base64编码,输入必须为字节,输出为字节。
  2. Base64解码,输入可以为字节,也可以为字符串,即如下两条代码等价:
decoded_data = base64.b64decode(encoded_string)
decoded_data = base64.b64decode(encoded_data)

不过,传入字节对象是更常见和推荐的做法,因为 Base64 编码本质上是处理字节数据的。

  1. Base64解码,输出为字节。

3.2Base64 编码后的字符串显示

Base64 编码将二进制数据转换为由 64 个字符组成的字符串,每个字符都代表 6 位二进制数据,这些字符是 ASCII 字符集中的可打印字符。
因此要显示编码后的结果而将编码后的字节数据转换为字符串时,既可指定utf-8,也可指定ascii,如下两条代码,两者效果等价:

#指定utf-8
encoded_string = encoded_data.decode('utf-8')
#指定ascii
encoded_string = encoded_data.decode('ascii')

3.3Base64 解码后的字符串显示

当原始数据为二进制数据时,不需要将解码后的字节数据转换为字符串,但如果原始数据为文本数据,那么就需要显示解码后的文本字符串。
在将解码后的二进制数据转换为字符串时,需要根据原始数据是否包含非 ASCII 字符来选择适当的编码方式。

  1. 原始数据包含非 ASCII 字符,应该使用 UTF-8 编码或其他适当的 Unicode 编码方式进行解码。
  2. 原始数据仅包含 ASCII 字符,可以使用 ASCII 编码或UTF-8 编码进行解码。

四、Quoted-Printable编码解码

Quoted-printable(引用打印)是一种用于在电子邮件和其他文本协议中编码非ASCII字符的方法。该编码将非ASCII字符转换为可打印字符,以便它们可以在各种系统和协议之间正确传输。

Quoted-printable编码的基本原则是:

  1. ASCII字符(字节值小于128)保持不变。
  2. 非ASCII字符(字节值大于或等于128)被转换为等号(=)后跟其十六进制值的表示形式。例如,字母“é”被编码为“=E9”。
  3. 编码要求每行不能超过 76 个字符,如果编码后的内容超过 76 个字符,会在 76 个字符处插入一个软换行符(等号 =),然后在下一行继续。

Quoted-Printable编码解码示例代码如下:

import quopri# 原始字符串
string_data = "Hello, World!"# 将字符串编码为字节
byte_data = string_data.encode('utf-8')# Quoted-Printable 编码
encoded_data = quopri.encodestring(byte_data)
encoded_string = encoded_data.decode('utf-8')
print("Quoted-Printable 编码结果:", encoded_string)# Quoted-Printable 解码
decoded_data = quopri.decodestring(encoded_data)# 将字节数据解码为字符串
decoded_string = decoded_data.decode('utf-8')
print("解码后的字符串:", decoded_string)

4.1Quoted-Printable编解码使用的参数类型

与Base64编解码使用的参数类型完全相同,如下:

  1. Base64编码,输入必须为字节,输出为字节。
  2. Base64解码,输入可以为字节,也可以为字符串,输出为字节。

4.2Quoted-Printable编码后的字符串显示

与Base64编码后的字符串显示方法相同,因为编码后的字符也是ASCII 字符集中的可打印字符。
在将编码后的字节数据转换为字符串时,既可指定utf-8,也可指定ascii,代码与3.2中相同。

4.3Quoted-Printable解码后的字符串显示

与Base64解码后的字符串显示方法相同,不再赘述。

参考文档

Quoted-printable 编码介绍、编码解码转换

这篇关于python中编码与解码简记的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1028883

相关文章

Python 字符串占位

在Python中,可以使用字符串的格式化方法来实现字符串的占位。常见的方法有百分号操作符 % 以及 str.format() 方法 百分号操作符 % name = "张三"age = 20message = "我叫%s,今年%d岁。" % (name, age)print(message) # 我叫张三,今年20岁。 str.format() 方法 name = "张三"age

一道经典Python程序样例带你飞速掌握Python的字典和列表

Python中的列表(list)和字典(dict)是两种常用的数据结构,它们在数据组织和存储方面有很大的不同。 列表(List) 列表是Python中的一种有序集合,可以随时添加和删除其中的元素。列表中的元素可以是任何数据类型,包括数字、字符串、其他列表等。列表使用方括号[]表示,元素之间用逗号,分隔。 定义和使用 # 定义一个列表 fruits = ['apple', 'banana

Python应用开发——30天学习Streamlit Python包进行APP的构建(9)

st.area_chart 显示区域图。 这是围绕 st.altair_chart 的语法糖。主要区别在于该命令使用数据自身的列和指数来计算图表的 Altair 规格。因此,在许多 "只需绘制此图 "的情况下,该命令更易于使用,但可定制性较差。 如果 st.area_chart 无法正确猜测数据规格,请尝试使用 st.altair_chart 指定所需的图表。 Function signa

python实现最简单循环神经网络(RNNs)

Recurrent Neural Networks(RNNs) 的模型: 上图中红色部分是输入向量。文本、单词、数据都是输入,在网络里都以向量的形式进行表示。 绿色部分是隐藏向量。是加工处理过程。 蓝色部分是输出向量。 python代码表示如下: rnn = RNN()y = rnn.step(x) # x为输入向量,y为输出向量 RNNs神经网络由神经元组成, python

python 喷泉码

因为要完成毕业设计,毕业设计做的是数据分发与传输的东西。在网络中数据容易丢失,所以我用fountain code做所发送数据包的数据恢复。fountain code属于有限域编码的一部分,有很广泛的应用。 我们日常生活中使用的二维码,就用到foutain code做数据恢复。你遮住二维码的四分之一,用手机的相机也照样能识别。你遮住的四分之一就相当于丢失的数据包。 为了实现并理解foutain

python 点滴学

1 python 里面tuple是无法改变的 tuple = (1,),计算tuple里面只有一个元素,也要加上逗号 2  1 毕业论文改 2 leetcode第一题做出来

Python爬虫-贝壳新房

前言 本文是该专栏的第32篇,后面会持续分享python爬虫干货知识,记得关注。 本文以某房网为例,如下图所示,采集对应城市的新房房源数据。具体实现思路和详细逻辑,笔者将在正文结合完整代码进行详细介绍。接下来,跟着笔者直接往下看正文详细内容。(附带完整代码) 正文 地址:aHR0cHM6Ly93aC5mYW5nLmtlLmNvbS9sb3VwYW4v 目标:采集对应城市的

python 在pycharm下能导入外面的模块,到terminal下就不能导入

项目结构如下,在ic2ctw.py 中导入util,在pycharm下不报错,但是到terminal下运行报错  File "deal_data/ic2ctw.py", line 3, in <module>     import util 解决方案: 暂时方案:在终端下:export PYTHONPATH=/Users/fujingling/PycharmProjects/PSENe

将一维机械振动信号构造为训练集和测试集(Python)

从如下链接中下载轴承数据集。 https://www.sciencedirect.com/science/article/pii/S2352340918314124 import numpy as npimport scipy.io as sioimport matplotlib.pyplot as pltimport statistics as statsimport pandas

Python利用qq邮箱发送通知邮件(已封装成model)

因为经常喜欢写一些脚本、爬虫之类的东西,有需要通知的时候,总是苦于没有太好的通知方式,虽然邮件相对于微信、短信来说,接收性差了一些,但毕竟免费,而且支持html直接渲染,所以,折腾了一个可以直接使用的sendemail模块。这里主要应用的是QQ发邮件,微信关注QQ邮箱后,也可以实时的接收到消息,肾好! 好了,废话不多说,直接上代码。 # encoding: utf-8import lo