内容简介
本书从基本概念和基本方法人手,尽量使用初等的数学工具,系统而又全面地介绍信息论的基础理论、基本方法以及近年来发展的新成果,包括一些最新的、较为成熟的原理。全书共分10章。第1章介绍香农信息理论的基本概念、基本内容和发展简史。第2章讨论信源、信息的度量等。第3章介绍互信息。第4章主要介绍有关信源编码的一些基本概念和Huffman最优编码。
第5章主要介绍离散信道编码定理。第6章介绍线性码。第7章介绍有关率失真理论。第8章介绍最大熵原理和最小鉴别信息原理。在第9章中对非统计意义下的信息理论(组合信息与算法信息)作了介绍,同时给出通用编码方法的代表——Lempel-Ziv编码方法。第10章介绍密码学的基础知识。大部分内容附有习题。
本书适用于信息与计算科学、应用数学、概率统计、计算机科学、自动控制、通信工程等专业的本科生作教材,也可作为这些专业的研究生的学习参考,并可供有关工程技术人员自学。