第1章 緒論

信息論是人們在長期通信工程的實踐中，由通信技術與概率論、隨機過程和數理統計相結合逐步發展起來的一門新興科學。信息論的奠基人一般公認為是美國科學家香農（C．E．Shannon），他于 1948年發表的著名論文《通信的數學理論》（“A Mathematical Theory of Communication”）為信息論的誕生和發展奠定了理論基礎。在香農信息論的指導下，為提高通信系統信息傳輸的有效性和可靠性，使系統達到最優化，人們在信源編碼、信道編碼以及保密編碼等領域進行了卓有成效的研究，取得了豐碩的成果。近幾十年來，隨著信息理論的迅猛發展和信息概念的不斷深化，信息論所涉及的內容早已超越了通信工程的范疇，它已滲透到許多學科，日益得到眾多領域的科學工作者的重視。

本章首先引出信息的概念，然后討論了信息論的研究對象、目的和內容，并分析了信息論對信源編碼和信道編碼研究的指導意義，最后簡要回顧了信息論與編碼的發展歷史。