LZW编解码算法实现与分析

最新推荐文章于 2022-04-24 18:50:28 发布
最新推荐文章于 2022-04-24 18:50:28 发布
阅读量383 收藏
点赞数
CC 4.0 BY-SA版权
文章标签： 算法 数据结构
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46338427/article/details/105755884

一、实验原理

1、LZW编码原理

​LZW的编码思想是不断地从字符流中提取新的字符串，通俗地理解为新“词条”，然 后用“代号”也就是码字表示这个“词条”。这样一来，对字符流的编码就变成了用码字去 替换字符流，生成码字流，从而达到压缩数据的目的。LZW编码是围绕称为词典的转换 表来完成的。LZW编码器通过管理这个词典完成输入与输出之间的转换。LZW编码器的 输入是字符流，字符流可以是用8位ASCII字符组成的字符串，而输出是用n位(例如12位) 表示的码字流。

在这里插入图片描述
LZW编码算法的步骤如下:
​步骤1:将词典初始化为包含所有可能的单字符，当前前缀P初始化为空。 ​
步骤2:当前字符C=字符流中的下一个字符。 ​
步骤3:判断P+C是否在词典中
​(1)如果“是”，则用C扩展P，即让P=P+C，返回到步骤2。
​(2)如果“否”，则
输出与当前前缀P相对应的码字W;
将P+C添加到词典中;
令P=C，并返回到步骤2

2、LZW解码原理

在这里插入图片描述
​LZW解码算法开始时，译码词典和编码词典相同，包含所有可能的前缀根。具体解码算法如下: ​
步骤1:在开始译码时词典包含所有可能的前缀根。 ​
步骤2:令CW:=码字流中的第一个码字。 ​
步骤3:输出当前缀-符串string.CW到码字流。 ​
步骤4:先前码字PW:=当前码字CW。 ​
步骤5:当前码字CW:=码字流的下一个码字。 ​
步骤6:判断当前缀-符串string.CW 是否在词典中。 ​
(1)如果”是”，则把当前缀-符串string.CW输出到字符流。
​ ​当前前缀P:=先前缀-符串string.PW。
​ ​当前字符C:=当前前缀-符串string.CW的第一个字符。 ​ ​把缀-符串P+C添加到词典。
​(2)如果”否”，则当前前缀P:=先前缀-符串string.PW。
​当前字符C:=当前缀-符串string.CW的第一个字符。
​ ​输出缀-符串P+C到字符流,然后把它添加到词典中。
​步骤7:判断码字流中是否还有码字要译。
​(1)如果”是”，就返回步骤4。
​(2)如果”否”，结束。

二、实验代码

bitio.h

/*
 * Declaration for bitwise IO
 *
 * vim: ts=4 sw=4 cindent
 */
#ifndef __BITIO__
#define __BITIO__

#include <stdio.h>

typedef struct{
	FILE *fp;
	unsigned char mask;
	int rack;
}BITFILE;

BITFILE *OpenBitFileInput( char *filename);
BITFILE *OpenBitFileOutput( char *filename);
void CloseBitFileInput( BITFILE *bf);
void CloseBitFileOutput( BITFILE *bf);
int BitInput( BITFILE *bf);
unsigned long BitsInput( BITFILE *bf, int count);
void BitOutput( BITFILE *bf, int bit);
void BitsOutput( BITFILE *bf, unsigned long code, int count);
#endif	// __BITIO__

bitio.cpp

/*
 * Definitions for bitwise IO
 *
 * vim: ts=4 sw=4 cindent
 */

#define _CRT_SECURE_NO_WARNINGS
#include <stdlib.h>
#include <stdio.h>
#include "bitio.h"

BITFILE *OpenBitFileInput( char *filename){
	BITFILE *bf;
	bf = (BITFILE *)malloc( sizeof(BITFILE));
	if( NULL == bf) return NULL;
	if( NULL == filename)	bf->fp = stdin;
	else bf->fp = fopen( filename, "rb");
	if( NULL == bf->fp) return NULL;
	bf->mask = 0x80;
	bf->rack = 0;
	return bf;
}

BITFILE *OpenBitFileOutput( char *filename){
	BITFILE *bf;
	bf = (BITFILE *)malloc( sizeof(BITFILE));
	if( NULL == bf) return NULL;
	if( NULL == filename)	bf->fp = stdout;
	else bf->fp = fopen( filename, "wb");
	if( NULL == bf->fp) return NULL;
	bf->mask = 0x80;
	bf->rack = 0;
	return bf;
}

void CloseBitFileInput( BITFILE *bf){
	fclose( bf->fp);
	free( bf);
}

void CloseBitFileOutput( BITFILE *bf){
	// Output the remaining bits
	if( 0x80 != bf->mask) fputc( bf->rack, bf->fp);
	fclose( bf->fp);
	free( bf);
}

int BitInput( BITFILE *bf){
	int value;

	if( 0x80 == bf->mask){
		bf->rack = fgetc( bf->fp);
		if( EOF == bf->rack){
			fprintf(stderr, "Read after the end of file reached\n");
			exit( -1);
		}
	}
	value = bf->mask & bf->rack;
	bf->mask >>= 1;
	if( 0==bf->mask) bf->mask = 0x80;
	return( (0==value)?0:1);
}

unsigned long BitsInput( BITFILE *bf, int count){
	unsigned long mask;
	unsigned long value;
	mask = 1L << (count-1);
	value = 0L;
	while( 0!=mask){
		if( 1 == BitInput( bf))
			value |= mask;
		mask >>= 1;
	}
	return value;
}

void BitOutput( BITFILE *bf, int bit){
	if( 0 != bit) bf->rack |= bf->mask;
	bf->mask >>= 1;
	if( 0 == bf->mask){	// eight bits in rack
		fputc( bf->rack, bf->fp);
		bf->rack = 0;
		bf->mask = 0x80;
	}
}

void BitsOutput( BITFILE *bf, unsigned long code, int count){
	unsigned long mask;

	mask = 1L << (count-1);
	while( 0 != mask){
		BitOutput( bf, (int)(0==(code&mask)?0:1));
		mask >>= 1;
	}
}
#if 0
int main( int argc, char **argv){
	BITFILE *bfi, *bfo;
	int bit;
	int count = 0;

	if( 1<argc){
		if( NULL==OpenBitFileInput( bfi, argv[1])){
			fprintf( stderr, "fail open the file\n");
			return -1;
		}
	}else{
		if( NULL==OpenBitFileInput( bfi, NULL)){
			fprintf( stderr, "fail open stdin\n");
			return -2;
		}
	}
	if( 2<argc){
		if( NULL==OpenBitFileOutput( bfo, argv[2])){
			fprintf( stderr, "fail open file for output\n");
			return -3;
		}
	}else{
		if( NULL==OpenBitFileOutput( bfo, NULL)){
			fprintf( stderr, "fail open stdout\n");
			return -4;
		}
	}
	while( 1){
		bit = BitInput( bfi);
		fprintf( stderr, "%d", bit);
		count ++;
		if( 0==(count&7))fprintf( stderr, " ");
		BitOutput( bfo, bit);
	}
	return 0;
}
#endif

lzw_E.cpp

/*
 * Definition for LZW coding 
 *
 * vim: ts=4 sw=4 cindent nowrap
 */
#define _CRT_SECURE_NO_WARNINGS
#include <stdlib.h>
#include <stdio.h>
#include "bitio.h"
#define MAX_CODE 65535


struct {
	int suffix;
	int parent, firstchild, nextsibling;
} dictionary[MAX_CODE+1];
int next_code;
int d_stack[MAX_CODE]; // stack for decoding a phrase

#define input(f) ((int)BitsInput( f, 16))
#define output(f, x) BitsOutput( f, (unsigned long)(x), 16)

int DecodeString( int start, int code);
void InitDictionary( void);
void PrintDictionary( void){
	int n;
	int count;
	for( n=256; n<next_code; n++){
		count = DecodeString( 0, n);
		printf( "%4d->", n);
		while( 0<count--) printf("%c", (char)(d_stack[count]));
		printf( "\n");
	}
}

int DecodeString( int start, int code){
	int count;
	count = start;
	while( 0<=code){
		d_stack[ count] = dictionary[code].suffix;
		code = dictionary[code].parent;
		count ++;
	}
	return count;
}
void InitDictionary( void){
	int i;

	for( i=0; i<256; i++){
		dictionary[i].suffix = i;
		dictionary[i].parent = -1;
		dictionary[i].firstchild = -1;
		dictionary[i].nextsibling = i+1;
	}
	dictionary[255].nextsibling = -1;
	next_code = 256;
}
/*
 * Input: string represented by string_code in dictionary,
 * Output: the index of character+string in the dictionary
 * 		index = -1 if not found
 */
int InDictionary( int character, int string_code){
	int sibling;
	if( 0>string_code) return character;
	sibling = dictionary[string_code].firstchild;
	while( -1<sibling){
		if( character == dictionary[sibling].suffix) return sibling;
		sibling = dictionary[sibling].nextsibling;
	}
	return -1;
}

void AddToDictionary( int character, int string_code){
	int firstsibling, nextsibling;
	if( 0>string_code) return;
	dictionary[next_code].suffix = character;
	dictionary[next_code].parent = string_code;
	dictionary[next_code].nextsibling = -1;
	dictionary[next_code].firstchild = -1;
	firstsibling = dictionary[string_code].firstchild;
	if( -1<firstsibling){	// the parent has child
		nextsibling = firstsibling;
		while( -1<dictionary[nextsibling].nextsibling ) 
			nextsibling = dictionary[nextsibling].nextsibling;
		dictionary[nextsibling].nextsibling = next_code;
	}else{// no child before, modify it to be the first
		dictionary[string_code].firstchild = next_code;
	}
	next_code ++;
}

void LZWEncode( FILE *fp, BITFILE *bf){
	int character;
	int string_code;
	int index;
	unsigned long file_length;

	fseek( fp, 0, SEEK_END);
	file_length = ftell( fp);
	fseek( fp, 0, SEEK_SET);
	BitsOutput( bf, file_length, 4*8);
	InitDictionary();
	string_code = -1;
	while( EOF!=(character=fgetc( fp))){
		index = InDictionary( character, string_code);
		if( 0<=index){	// string+character in dictionary
			string_code = index;
		}else{	// string+character not in dictionary
			output( bf, string_code);
			if( MAX_CODE > next_code){	// free space in dictionary
				// add string+character to dictionary
				AddToDictionary( character, string_code);
			}
			string_code = character;
		}
	}
	output( bf, string_code);
}

void LZWDecode(BITFILE *bf, FILE *fp) {
	int character;
	int new_code, last_code;
	int phrase_length;
	unsigned long file_length;

	file_length = BitsInput(bf, 4 * 8);
	if (-1 == file_length) file_length = 0;
	/*填充部分*/
	InitDictionary();
	last_code = -1;
	while (0 < file_length) 
	{
		new_code = input(bf);
		if (new_code >= next_code) { // this is the case CSCSC( not in dict)
			d_stack[0] = character;
			phrase_length = DecodeString(1, last_code);
		}
		else 
		{
			phrase_length = DecodeString(0, new_code);
		}
		character = d_stack[phrase_length - 1];
		while(0<phrase_length)
		{
			phrase_length--;
			fputc(d_stack[phrase_length], fp); 
			file_length--;
		}
		if (MAX_CODE > next_code)
		{// add the new phrase to dictionary
			AddToDictionary(character, last_code);
		}
		
		last_code = new_code;
	}
}



int main( int argc, char **argv){
	FILE *fp;
	BITFILE *bf;

	if( 4>argc){
		fprintf( stdout, "usage: \n%s <o> <ifile> <ofile>\n", argv[0]);
		fprintf( stdout, "\t<o>: E or D reffers encode or decode\n");
		fprintf( stdout, "\t<ifile>: input file name\n");
		fprintf( stdout, "\t<ofile>: output file name\n");
		return -1;
	}
	if( 'E' == argv[1][0]){ // do encoding
		fp = fopen( argv[2], "rb");
		bf = OpenBitFileOutput( argv[3]);
		if( NULL!=fp && NULL!=bf){
			LZWEncode( fp, bf);
			fclose( fp);
			CloseBitFileOutput( bf);
			fprintf( stdout, "encoding done\n");
		}
	}else if( 'D' == argv[1][0]){	// do decoding
		bf = OpenBitFileInput( argv[2]);
		fp = fopen( argv[3], "wb");
		if( NULL!=fp && NULL!=bf){
			LZWDecode( bf, fp);
			fclose( fp);
			CloseBitFileInput( bf);
			fprintf( stdout, "decoding done\n");
		}
	}else{	// otherwise
		fprintf( stderr, "not supported operation\n");
	}
	return 0;
}

三、实验结果

1、写一个 test.dat 作为输入，得到编码文件 en.dat，运行结果如下：
在这里插入图片描述

再对 en.dat，进行解码，得到 de.dat，运行结果：
在这里插入图片描述
用二进制编辑器打开上述三个文件：
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
可见解码后的文件与原文件内容一致。

2、选择十种不同格式的文件：
在这里插入图片描述

使用LZW编码器进行压缩得到输出的压缩比特流文件，结果如下：
在这里插入图片描述
对比发现，压缩后 docx、jpg、pdf、mp4、xlsx 文件的大小反而增大了，而 dpj、mak、pcf 文件减小，选取的 m 和 txt 文件可能因为本身大小太小，看不出明显的压缩前后大小变化。

LZW 编解码算法实现与分析
weixin_46083513的博客
04-08 655
一、实验目的 掌握词典编码的基本原理，用C/C++/Python等语言编程实现LZW解码器并分析编解码算法。 二、实验思想 三、实验内容 1．LZW编码原理及步骤 LZW的编码思想是不断地从字符流中提取新的字符串，通俗地理解为新“词条”，然后用“代号”也就是码字表示这个“词条”。这样一来，对字符流的编码就变成了用码字去替换字符流，生成码字流，从而达到压缩数据的目的。LZW编码是围绕称为词典的转换表来完成的。LZW编码器通过管理这个词典完成输入与输出之间的转换。LZW编码器的输入是字符流，字符流可以是用8位
LZW示例代码
deadgamer的博客
04-21 195
头文件 #ifndef __BITIO__ #define __BITIO__ #include <stdio.h> typedef struct { FILE* fp; unsigned char mask; int rack; }BITFILE; BITFILE* OpenBitFileInput(char* filename); BITFILE* OpenBitFileOutput(char* filename); void CloseBitFileInput(BITFILE*
数据压缩之LZW编解码算法实现与分析
weixin_46393626的博客
04-11 447
实验目的 掌握词典编码的基本原理，用C/C++/Python等语言编程实现LZW解码器并分析编解码算法。 主要设备 安装 Windows 和 Visual Studio 等编程平台的个人计算机。 实验内容 LZW编码原理和实现算法 LZW的编码思想是不断地从字符流中提取新的字符串，通俗地理解为新“词条”，然后用“代号”也就是码字表示这个“词条”。这样一来，对字符流的编码就变成了用码字去替 换字符流，生成码字流，从而达到压缩数据的目的。LZW编码是围绕称为词典的转换表 来完成的。LZW编码器通过管理这个词典
【实验三】LZW编解码算法实现与分析
qq_44018041的博客
04-17 386
一.实验设备 安装 Windows 和 Visual Studio 等编程平台的个人计算机。 二.实验目的 掌握词典编码的基本原理，用C/C++/Python等语言编程实现LZW解码器并分析编解码算法。 三.实验内容 1.原理 （1）LZW编码原理： LZW的编码思想是不断地从字符流中提取新的字符串，通俗地理解为新“词条”，然后用“代号”也就是码字表示这个“词条”。这样一来，对字符流的编码就变成了用码字去替换字符流，生成码字流，从而达到压缩数据的目的。LZW编码是围绕称为词典的转换表来完成的。
LZW编解码算法实现与分析完整代码
04-24
LZW编解码算法实现与分析完整代码
【数据压缩】LZW编解码算法实现与分析
weixin_48930491的博客
04-24 548
一、LZW编码原理和实现算法 LZW的编码思想是不断地从字符流中提取新的字符串，通俗地理解为新“词条”，然 后用“代号”也就是码字表示这个“词条”。这样一来，对字符流的编码就变成了用码字去替 换字符流，生成码字流，从而达到压缩数据的目的。LZW编码是围绕称为词典的转换表来完成的。LZW编码器通过管理这个词典完成输入与输出之间的转换。LZW编码器的输入是字符流，字符流可以是用8位ASCII字符组成的字符串，而输出是用n位(例如12位)表示的码字流。 编码算法步骤 步骤1：将词典初......
LZW编码解码原理及编程实现
weixin_48318588的博客
04-21 1960
首先先来介绍一下，LZW的编码原理，LZW编码其实简单来说就是将一个个字符或者字符组映射到一个数字上，这样就会大大减少数据量，将这种映射关系存放在字典里，但是问题是这个字典如果传输给解码端也需要占用一定的空间，所以在这次实验中我们采用的是ASCII码的字典，这样就不用传了，但在解释编码解码原理时采用的是自己定义的字典，下面分别解释编码和解码的原理。 一 编码原理 初始状态，字典里只有所有的默认项，例如0->a，1->b，2->c。此时P和C都是空的。 读入新的字符C，与P合并形成字符串
lzw的编码分析及实现原理
11-14
LZW 是一种无损数据压缩算法，是对1978 年发表的 LZ78 的改进。LZW应用于Unix系统的标准工具、GIF图片格式以及TIFF格式等。同时LZW压缩算法对于较大规模的英文文本的压缩具有良好的效果，一般可以压缩到原来大小的一半。然而LZW的专利曾一度限制了其使用范围，不过，LZW专利于2003年过期。对事物的好奇心驱使我深入学习LZW压缩和解压缩算法。
多媒体图像压缩算法lzw编码
05-24
lzw编码lzw编码lzw编码lzw编码lzw编码lzw编码lzw编码多媒体
LZW编码及解码实现
06-14
设计一个LZW编码解码系统，掌握LZW编码的特点、储存方法及基本原理。运用理论课知识解决实际问题，选用一种语言实现LZW编码译码的相关函数的基本框架设计，如LZW树的构建，LZW编码的实现，LZW译码的实现。
C语言实现LZ编码
09-28
用C语言实现LZ编码,包括队列头文件定义，队列操作，编码的具体实现，简单易懂
【数据压缩】LZW编解码原理及算法实现
热门推荐
spadeK2020的博客
04-21 1万+
一、LZW简介 LZW压缩（LZW compression）是一种由Abraham Lempel、Jacob Ziv和Terry Welch发明的基于表查寻算法把文件压缩成小文件的无损压缩方法。 二、LZW编解码举例 1、LZW编码算法思想 举例：输入流 a b b a b a b a c 首先，以ASCII码为基础词典 已编码：a b 遇到a，用97表示，编码为97。 遇到b，用98表示，编码为98。 发现ab，加入词典，ab索引为256。 已编码：a b b a b 遇到b，编码为98，发
编程实现LZW编解码
cxrabc的博客
04-10 497
这里写目录标题一、实验目的二、实验思路1. 编码2. 解码3. 数据结构分析三、代码部分1. bitio.h2. bitio.c3. main.c四、结果分析LZW编码的应用 一、实验目的 首先调试LZW的编码程序，以一个文本文件作为输入，得到输出的LZW编码文件。 以实验步骤一得到的编码文件作为输入，编写LZW的解码程序。在写解码程序时需要对关键语句加上注释，并说明进行何操作。重点说明当前码字在词典中不存在时应如何处理并解释原因。 选择至少十种不同格式类型的文件，使用LZW编码器进行压缩得到输出的压缩比
LZW解码的原理及cpp实现
m0_46340275的博客
04-28 410
原理 LZW的思想通过一系列编号来代替短语，再次遇到此短语是用编号来替代，以此来达到压缩的目的。由于词典的构建过程固定故不需要传词典，解决了码表传输的问题。解码时在解码端重建词典即可进行解码。 编码 LZW编码算法的步骤如下： 步骤1：将词典初始化为包含所有可能的单字符，当前前缀P初始化为空。 步骤2：当前字符C=字符流中的下一个字符。 步骤3：判断P＋C是否在词典中 （1）如果“是”，则用C扩展...
LZW 编码算法
qq_34244712的博客
12-24 445
参考:https://blog.csdn.net/hanzhen7541/article/details/91141112
LZW编解码程序的简易实现与应用
### LZW解码过程 1. **初始化字典**：解码时，同样需要根据编码时的字典初始化状态来进行初始化。 2. **码字序列处理**：读取编码后的码字序列，首先将第一个码字转换回对应的字符（或字符串），因为字典是在编码...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值