一、Huffman算法介绍

  霍夫曼编码(英语:Huffman Coding),又译为哈夫曼编码赫夫曼编码,是一种用于无损数据压缩的熵编码(权编码)算法。在计算机数据处理中,霍夫曼编码使用变长编码表对源符号(如文件中的一个字母)进行编码,其中变长编码表是通过一种评估来源符号出现几率的方法得到的,出现几率高的字母使用较短的编码,反之出现几率低的则使用较长的编码,这便使编码之后的字符串的平均长度、期望值降低,从而达到无损压缩数据的目的。

  霍夫曼树又称最优二叉树,是一种带权路径长度最短的二叉树。所谓树的带权路径长度,就是树中所有的叶结点的权值乘上其到根结点的路径长度(若根结点为0层,叶结点到根结点的路径长度为叶结点的层数)。

  前缀代码表示以一种方式分配代码(位序列),以使分配给一个字符的代码不是分配给任何其他字符的代码的前缀。这就是霍夫曼编码如何确保在解码生成的比特流时没有歧义的地方。

  让我们通过一个反例来了解前缀代码。假设有四个字符a,b,c和d,它们对应的可变长度代码分别为00、01、0和1。由于分配给c的代码是分配给a和b的代码的前缀,因此这种编码会产生歧义。如果压缩的比特流是0001,则解压缩的输出可以是“ cccd”或“ ccb”或“ acd”或“ ab”。

  霍夫曼编码主要包括两个主要部分:

  1)根据输入字符构建霍夫曼树。

  2)遍历霍夫曼树并将代码分配给字符。

二、构建霍夫曼树的步骤

  输入是唯一字符及其出现频率的数组,输出是霍夫曼树。

  1. 为每个唯一字符创建一个叶节点,并为所有叶节点建立一个最小堆(Min Heap用作优先级队列。frequency字段的值用于比较最小堆中的两个节点。最初,把最不频繁的字符作为根)

  2. 从最小堆中提取频率最小的两个节点。

  3. 创建一个频率等于两个节点频率之和的新内部节点。使第一个提取的节点为其左子节点,另一个提取的节点为其右子节点。将此节点添加到最小堆中。

  4. 重复步骤2和3,直到堆仅包含一个节点。其余节点是根节点,树已完成。

  一个例子:

字符 A B C D E
频率 1 7 6 5 2

  步骤1:构建一个包含5个节点的最小堆,其中每个节点代表具有单个节点的树的根。

  步骤2:从最小堆中提取两个最小频率节点。添加一个频率为1 + 2 = 3的新内部节点。

  现在最小堆包含4个节点,其中3个节点是每个具有单个元素的结点,一个堆节点是具有3个元素。

字符 频率
内部节点 3
D 5
C 6
B 7

  步骤3:从堆中提取两个最低频率节点。添加频率为12 + 13 = 25的新内部节点

  现在最小堆包含3个节点,其中2个节点是每个具有单个元素的节点,两个堆节点是具有多个节点的子树。

字符 频率
内部节点 8
C 6
B 7

  步骤4:提取两个最低频率节点。添加频率为6 + 7 = 13的新内部节点

  现在,最小堆包含2个节点。

字符 频率
内部节点 8
内部节点 13

  步骤6:提取两个最低频率节点。添加频率为8 + 13 = 21的新内部节点

  现在最小堆中只剩下一个节点,因此算法在此处停止。

  从霍夫曼树打印代码的步骤:

  遍历从根开始形成的树。维护一个辅助阵列。当移到左孩子时,将0写入数组。当移动到正确的孩子时,将1写入数组。遇到叶节点时打印阵列。

  输出如下:

源代码:

  1 package tree;
2
3 import java.util.Comparator;
4 import java.util.PriorityQueue;
5
6 /**
7 * 这是一个哈夫曼树 (Huffman Tree),用于无损数据压缩的熵编码算法
8 * 哈夫曼树是带权路径长度最短的树,权值较大的结点离根较近。
9 */
10 public class HuffmanTree {
11
12 /**
13 * 通过树遍历的霍夫曼代码
14 * @param root
15 * @param s
16 */
17 public static void printCode(HuffmanNode root, String s) {
18 /* 如果左右为空,那么这就是一个叶子结点 */
19 if (root.left == null && root.right == null && Character.isLetter(root.c)) {
20 System.out.println(root.c + ":" + s);
21 return;
22 }
23 assert root.left != null;
24 printCode(root.left, s + "0");
25 printCode(root.right, s + "1");
26 }
27
28 public static void main(String[] args) {
29
30 int n = 5; // 字符数量
31
32 /* 下面那个例子的最后结果:
33 A:000
34 E:001
35 D:01
36 C:10
37 B:11
38 */
39 char[] charArray = {'A', 'B', 'C', 'D', 'E'};
40 int[] charfreq = {1, 7, 6, 5, 2};
41
42 /* 创建优先级队列q,创建一个最低优先级队列(min-heap)。*/
43 PriorityQueue<HuffmanNode> q = new PriorityQueue<>(n, new MyComparator());
44
45 /* 为每个字符创建一个Huffman树的叶子结点,并 */
46 for (int i = 0; i < n; i++) {
47 /* 创建一个Huffman节点对象,并将其添加到优先级队列。*/
48 HuffmanNode hn = new HuffmanNode();
49
50 hn.c = charArray[i];
51 hn.data = charfreq[i];
52
53 hn.left = null;
54 hn.right = null;
55
56 q.add(hn);
57 }
58
59 /* 创建一个Huffman根节点 */
60 HuffmanNode root = null;
61
62 while (q.size() > 1) {
63 /* 提取第一个最小的。*/
64 HuffmanNode x = q.peek();
65 q.poll();
66
67 /* 提取第二个最小的。*/
68 HuffmanNode y = q.peek();
69 q.poll();
70
71 /* 新建一个新结点,将两个节点的频率之和分配给f节点 */
72 HuffmanNode f = new HuffmanNode();
73 f.data = x.data + y.data;
74 f.c = '-';
75
76 f.left = x;
77 f.right = y;
78
79 root = f;
80
81 q.add(f);
82 }
83
84 printCode(root, "");
85 }
86 }
87
88 /**
89 * 哈夫曼节点
90 */
91 class HuffmanNode {
92 int data;
93 char c;
94
95 HuffmanNode left;
96 HuffmanNode right;
97 }
98
99 /**
100 * 用于比较哈夫曼节点值的大小
101 */
102 class MyComparator implements Comparator<HuffmanNode> {
103
104 @Override
105 public int compare(HuffmanNode o1, HuffmanNode o2) {
106 return o1.data - o2.data;
107 }
108 }

Huffman算法的更多相关文章

  1. Codeforces Round #263 (Div. 2)C(贪心,联想到huffman算法)

    数学家伯利亚在<怎样解题>里说过的解题步骤第二步就是迅速想到与该题有关的原型题.(积累的重要性!) 对于这道题,可以发现其实和huffman算法的思想很相似(可能出题人就是照着改编的).当 ...

  2. 闲来无事写写-Huffman树的生成过程

    前言:最近项目上一直没事干,感觉无聊到了极点,给自己找点事做,补一下大学没有完成的事情,写一个huffman算法Java版的,学校里面写过c语言的. 因为很久没搞数据结构和算法这方面了(现在搞Java ...

  3. 哈夫曼树【最优二叉树】【Huffman】

    [转载]只为让价值共享,如有侵权敬请见谅! 一.哈夫曼树的概念和定义 什么是哈夫曼树? 让我们先举一个例子. 判定树:         在很多问题的处理过程中,需要进行大量的条件判断,这些判断结构的设 ...

  4. Huffman 编码压缩算法

    前两天发布那个rsync算法后,想看看数据压缩的算法,知道一个经典的压缩算法Huffman算法.相信大家应该听说过 David Huffman 和他的压缩算法—— Huffman Code,一种通过字 ...

  5. FastText算法原理解析

    1. 前言 自然语言处理(NLP)是机器学习,人工智能中的一个重要领域.文本表达是 NLP中的基础技术,文本分类则是 NLP 的重要应用.fasttext是facebook开源的一个词向量与文本分类工 ...

  6. [转载]Huffman编码压缩算法

    转自http://coolshell.cn/articles/7459.html 前两天发布那个rsync算法后,想看看数据压缩的算法,知道一个经典的压缩算法Huffman算法.相信大家应该听说过 D ...

  7. 数据压缩算法之哈夫曼编码(HUFFMAN)的实现

    HUFFMAN编码可以很有效的压缩数据,通常可以压缩20%到90%的空间(算法导论).具体的压缩率取决于数据的特性(词频).如果采取标准的语料库进行编码,一般可以得到比较满意的编码结果(对不同文件产生 ...

  8. FastText算法

    转载自: https://www.cnblogs.com/huangyc/p/9768872.html 0. 目录 1. 前言 2. FastText原理 2.1 模型架构 2.2 层次SoftMax ...

  9. Huffman编码实现压缩解压缩

    这是我们的课程中布置的作业.找一些资料将作业完毕,顺便将其写到博客,以后看起来也方便. 原理介绍 什么是Huffman压缩 Huffman( 哈夫曼 ) 算法在上世纪五十年代初提出来了,它是一种无损压 ...

随机推荐

  1. HCNP Routing&Switching之IS-IS路由聚合和认证

    前文我们了解了IS-IS路由渗透和开销相关话题,回顾请参考https://www.cnblogs.com/qiuhom-1874/p/15302382.html:今天我们来聊一聊IS-IS路由聚合和认 ...

  2. select后给字段起别名,where和group后不能用,但having后可以

    为什么mysql having的条件表达式可以直接使用select后的别名? SQL语句的语法顺序: FROM -> WHERE -> GROUP BY -> HAVING -> ...

  3. 机器学习——支持向量机SVM

    前言 学习本章节前需要先学习: <机器学习--最优化问题:拉格朗日乘子法.KKT条件以及对偶问题> <机器学习--感知机> 1 摘要: 支持向量机(SVM)是一种二类分类模型, ...

  4. Shell系列(30)- 单分支if语句判断分区使用率

    需求 监控分区已用空间,超过80%,抛出警告 脚本 #!/bin/bash #给tets赋值用于接收参数,传递给if进行判断 #申明变量test并赋值,由于赋的值是系统变量的结果,所以得用$()引用 ...

  5. Park-2018论文

    太阳射电图:Solar magnetograms, EUV images, GOES X-ray flux data. Magnetograms:    http://solar-center.sta ...

  6. 一文让你彻底理解SQL连接查询

    表结构 内连接 笛卡尔积问题 普通内连接:inner join on 隐式内连接: 外连接 内连接与外连接查询的区别 内连接查询是查询两张表交集的数据,主外键关联的数据. 左连接查询是查询左表中的所有 ...

  7. Python语句,表达式的区别?

    参考了网上的文章,说 表达式的结果是值,对象 比如1+2, 是表达式 具体根据运算符不同有算术,逻辑,比较等等类型的表达式 语句是控制程序走向,不产生值 例如if/else等 参考: https:// ...

  8. 多个ssh key 配置多个网址

    多个 ssh key 配置多个网站 一.生成ssh key ssh-keygen -t rsa -C "你的邮箱" -f ~/.ssh/id_rsa_one ssh-keygen ...

  9. WPF进阶技巧和实战07--自定义元素01

    完善和扩展标准控件的方法: 样式:可使用样式方便地重用控件属性的集合,甚至可以使用触发器应用效果 内容控件:所有继承自ContentControl类的控件都支持嵌套的内容.使用内容控件,可以快速创建聚 ...

  10. Windows下Vim插件管理器Vundle的安装以及使用简介

    Vundle下载 从GitHub clone仓库 cd %USERPROFILE% git clone git@github.com:VundleVim/Vundle.vim.git %USERPRO ...