7分钟0基础彻底理解常用数据压缩原理---哈夫曼编码

本文主要是介绍7分钟0基础彻底理解常用数据压缩原理---哈夫曼编码,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

前言

如果你之前没有做过数据压缩,或者想要了解数据压缩的原理,那么这编文章将会帮到你。这编文章将会带你彻底了解哈夫曼编码原理,这种编码方式常用作的图片无损压缩,和ZIP的等压缩存储。

思考,计算机的存储与解析获取

这里有一组数据为1, 3,4,5,6,1,4,3,5. 单位为字节,把他们存起来。那么二进制就是1,11,100,101,110,1,100,11, 101. 但是计算机存储的时候,他们每个数据占8个“格子” ,即为**00000001, 00000011,00000100,00000101,00000110,
00000001,00000100, 00000011,00000101.**真正存储的时候是没有分割区分的,数据都是放在一起的。000000010000001100000100000001010000011000000001000001000000001100000101 。那么是怎么识别获取的数据的呢? 读取的时候,每8个位置作为一个数据读取,如果是int类型,一般都是32位,即每32位作为一个数据。
即为

可见,前缀为00000这部分是无效数据,无疑会浪费了很大一部分空间。这种存储编码被成为定长编码。这是为什么会这样子存储?因为如果不固定长度,计算机就不会知道读的数据是什么。举个例子,1和3放在在一起为111,如果不固定位数,可能识别为3和1(11,1)也可以识别为1和3(1,11),甚至全部读取为一个数字为7(111)

那么有没有一种存储方式可以按需节约来存储呢?答案是

树的知识

我们先回顾下关于树的知识点,方便我们理解下面的内容。

叶子结点

叶子结点是指一个树形结构中,没有任何子结点的节点,也就是说它是树结构的最底层节点

在这里插入图片描述

什么是度?

当前结点的最大的子节点数目。也就是分支的数目。
在这里插入图片描述
如图,A的度为2, B的度为2. 而叶子结点的度为0. 由此可见,二叉树结点的最大的度为2.最小为0.

什么是路径,路径长度

路径: 是指从树中一个节点到另一个节点的分支所构成的路线。
路径长度: 从一个结点到另一个结点所经过的“边”的数量,被我们称为两个结点之间的路径长度。
在这里插入图片描述

例如:A到F的路径长度为2。A到H的路径长度为3

什么是权值

权值就是某个结点存储的数据的值。如下图,H结点存了一个数据是100,那么久叫他的权值为100
在这里插入图片描述

什么是带权路径长度

权路径长度是指根结点到某的结点的路径的长度和该结点的权值相乘的结果。
如上图, 根结点A到H的路径为3, 而H结点的权值为100,那么他的带权路径长度为3*100=300

哈夫曼编码

我们不急着怎么看他的定义,先通过例子去理解。

现在有个一串字母"ACCCCCABDDD",按照下面方式将它进行特殊存储
下面是字符对应二进制表格

字符二进制
A01000001
B01000010
C01000011
D01000100

第一步,将数据进行节约存储。

为了节约数据空间,我们把前面可以理解为多余的部分空间去掉,做个映射表,即为

字符二进制
A1
B10
C11
D100

第二步,统计每一个字符的出现个数

字符出现个数
A1
B2
C5
D3

第三步,按“出现个数”进行排序

字符出现个数
C5
D3
B2
A1

第四步,构建带权值的二叉树

将“出现个数”作为父结点权值(具体规则看下面步骤), 将字符二进制数据作为叶子结点权值,构建二叉树。将权值越大的,距离根节点越近,最大权值带权路径最短,以此例推。(如果忘记的概念,请到上面重复阅读)

(1)首先把最小的两个权值的作为叶子节点 ,出现次数大的在左边, 构建一个二叉树。如下图
在这里插入图片描述

(2)将这个新组成的二叉树他的父节点求权值,将A和B的权值相加,得到 3,如下
在这里插入图片描述

(3)将比A和B最近的数据进行构建新组合二叉树,刚刚好比A和B大的数据是D,将D与A,B的父节点,作为同一层构建二叉树,如下。

在这里插入图片描述

然后继续求顶部根节点的权值,将D的权值与A,B的父节点的权值相加求值。
在这里插入图片描述
依次类推,可以得出整棵树如下

在这里插入图片描述
然后,把除了叶子节点的权值全部改成1.

在这里插入图片描述

最后,叶子节点全部改成0,除B 外,B 改成1

在这里插入图片描述

第五步,制作代号表

把左边节点权值, 我们从顶点触发,把经过的叶子节点带权路径轨迹记录下来。

第一个为: 1 - 0
第二个为: 1 - 1 - 0
第三个为: 1 - 1 - 1 - 0
第四个为: 1 - 1 -1 - 1

由此可以推出

代号字母
10C
110D
1110A
1111B

没错,这时候你已经猜出来,为什么要这么做了。

第六步,存储

有了上面这个表格后,就可以存储和读取了。
字符串为:ACCCCCABDDD
那么按照上面的表格,分布存储为如下
1110 10 10 10 10 10 1110 1111 110 110 110

第七步,读取

我们需要根据这个树,通过轨迹来读取对于的值。
在这里插入图片描述
根节点出发,遇到1右边,遇到0左边
读取这串数据“1110 10 10 10 10 10 1110 1111 110 110 110”,如图
在这里插入图片描述
所以读取第一个值是A,(存储表的的时候是存二进制(1),这里只不过是为了好阅读)
剩下的数据为“ 10 10 10 10 10 1110 1111 110 110 110”,继续解析数据,如图

口诀: 遇到1右边,遇到0左边
在这里插入图片描述
剩下的数据为“10 10 10 1110 1111 110 110 110”,继续解析数据,如图,
口诀: 遇到1右边,遇到0左边

在这里插入图片描述
剩下的数据为“ 10 10 1110 1111 110 110 110”,继续解析数据,如图,
口诀: 遇到1右边,遇到0左边
在这里插入图片描述
剩下的数据为“ 10 1110 1111 110 110 110”,继续解析数据,如图,
口诀: 遇到1右边,遇到0左边
在这里插入图片描述
剩下的数据为“ 1110 1111 110 110 110”,继续解析数据,如图,
口诀: 遇到1右边,遇到0左边
在这里插入图片描述
剩下的数据为“ 1111 110 110 110”,继续解析数据,如图,
口诀: 遇到1右边,遇到0左边
在这里插入图片描述
剩下的数据为“ 110 110 110”,继续解析数据,如图,
口诀: 遇到1右边,遇到0左边
在这里插入图片描述

以此类推下去,全部都能解析出来。

这样的二叉树树,称为哈夫曼树。

下面是哈夫曼树的概念引用

给定N个权值作为N个叶子结点,构造一棵二叉树,若该树的带权路径长度达到最小,称这样的二叉树为最优二叉树,也称为哈夫曼树(Huffman Tree)。哈夫曼树是带权路径长度最短的树,权值较大的结点离根较近。

由此,对比传统的存储二进制,可见节约了多少空间!通过这个规则,你已经知道为什么出现次数最多的要到前面,这样可以大大地提高读取效率。

有兴趣的朋友可以思考下图片的数据是怎么压缩的?欢迎到评论区 下留言哈哈。提示:一张图片可能有颜色值大量重复,比如一区域只有蓝色,其他全是红色的图片。

如果这篇文章有帮助到你,请点赞,评论,关注,收藏。

这篇关于7分钟0基础彻底理解常用数据压缩原理---哈夫曼编码的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/740834

相关文章

Java String字符串的常用使用方法

《JavaString字符串的常用使用方法》String是JDK提供的一个类,是引用类型,并不是基本的数据类型,String用于字符串操作,在之前学习c语言的时候,对于一些字符串,会初始化字符数组表... 目录一、什么是String二、如何定义一个String1. 用双引号定义2. 通过构造函数定义三、St

Python基础文件操作方法超详细讲解(详解版)

《Python基础文件操作方法超详细讲解(详解版)》文件就是操作系统为用户或应用程序提供的一个读写硬盘的虚拟单位,文件的核心操作就是读和写,:本文主要介绍Python基础文件操作方法超详细讲解的相... 目录一、文件操作1. 文件打开与关闭1.1 打开文件1.2 关闭文件2. 访问模式及说明二、文件读写1.

Java编译生成多个.class文件的原理和作用

《Java编译生成多个.class文件的原理和作用》作为一名经验丰富的开发者,在Java项目中执行编译后,可能会发现一个.java源文件有时会产生多个.class文件,从技术实现层面详细剖析这一现象... 目录一、内部类机制与.class文件生成成员内部类(常规内部类)局部内部类(方法内部类)匿名内部类二、

Python使用自带的base64库进行base64编码和解码

《Python使用自带的base64库进行base64编码和解码》在Python中,处理数据的编码和解码是数据传输和存储中非常普遍的需求,其中,Base64是一种常用的编码方案,本文我将详细介绍如何使... 目录引言使用python的base64库进行编码和解码编码函数解码函数Base64编码的应用场景注意

Python中随机休眠技术原理与应用详解

《Python中随机休眠技术原理与应用详解》在编程中,让程序暂停执行特定时间是常见需求,当需要引入不确定性时,随机休眠就成为关键技巧,下面我们就来看看Python中随机休眠技术的具体实现与应用吧... 目录引言一、实现原理与基础方法1.1 核心函数解析1.2 基础实现模板1.3 整数版实现二、典型应用场景2

Java的IO模型、Netty原理解析

《Java的IO模型、Netty原理解析》Java的I/O是以流的方式进行数据输入输出的,Java的类库涉及很多领域的IO内容:标准的输入输出,文件的操作、网络上的数据传输流、字符串流、对象流等,这篇... 目录1.什么是IO2.同步与异步、阻塞与非阻塞3.三种IO模型BIO(blocking I/O)NI

C#基础之委托详解(Delegate)

《C#基础之委托详解(Delegate)》:本文主要介绍C#基础之委托(Delegate),具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1. 委托定义2. 委托实例化3. 多播委托(Multicast Delegates)4. 委托的用途事件处理回调函数LINQ

Linux上设置Ollama服务配置(常用环境变量)

《Linux上设置Ollama服务配置(常用环境变量)》本文主要介绍了Linux上设置Ollama服务配置(常用环境变量),Ollama提供了多种环境变量供配置,如调试模式、模型目录等,下面就来介绍一... 目录在 linux 上设置环境变量配置 OllamPOgxSRJfa手动安装安装特定版本查看日志在

Java常用注解扩展对比举例详解

《Java常用注解扩展对比举例详解》:本文主要介绍Java常用注解扩展对比的相关资料,提供了丰富的代码示例,并总结了最佳实践建议,帮助开发者更好地理解和应用这些注解,需要的朋友可以参考下... 目录一、@Controller 与 @RestController 对比二、使用 @Data 与 不使用 @Dat

Mysql中深分页的五种常用方法整理

《Mysql中深分页的五种常用方法整理》在数据量非常大的情况下,深分页查询则变得很常见,这篇文章为大家整理了5个常用的方法,文中的示例代码讲解详细,大家可以根据自己的需求进行选择... 目录方案一:延迟关联 (Deferred Join)方案二:有序唯一键分页 (Cursor-based Paginatio