《電子信息工程專業(yè)本科系列教材:信息論與編碼》共分7章,即緒論、信息的量度、無失真信源與信息熵、信道及其容量、信源編碼、信道編碼、信息工程中的數(shù)據(jù)保密。
《電子信息工程專業(yè)本科系列教材:信息論與編碼》重點介紹信息處理的理論基礎(chǔ)以及實現(xiàn)原理與方法。內(nèi)容分為兩大部分,即:理論基礎(chǔ)(前4章)和應(yīng)用(后3章)。理論基礎(chǔ)部分主要介紹信息的基本理論與基本概念:信息熵、互信息、信息率失真R(D)函數(shù),信道容量以及它們的性質(zhì)與計算。應(yīng)用部分主要介紹信息與通信系統(tǒng)中的優(yōu)化及其實現(xiàn)手段與方法,包括:信源編碼定理、無失真的統(tǒng)計匹配編碼、解除相關(guān)性的預測編碼與變換編碼以及實用性的文字傳真編碼、語音編碼與圖像編碼等提高系統(tǒng)有效性的信源編碼;信道編碼定理、分組碼的基本理論與方法、卷積碼的基本理論與方法等提高系統(tǒng)可靠性的信道編碼以及信息工程中的數(shù)據(jù)保密。
第1章 緒論
1.1 信息的概念
1.1.1 信息的定義、特征與性質(zhì)
1.1.2 信息的分類
1.2 信息傳輸系統(tǒng)的組成及其各部分的功能
1.2.1 模擬信息傳輸系統(tǒng)
1.2.2 數(shù)字信息傳輸系統(tǒng)
1.3 信息論研究對象和內(nèi)容
1.4 信息論發(fā)展簡史和現(xiàn)狀
第2章 信息的量度
2.1 自信息量和條件自信息量
2.1.1 自信息量
2.1.2 條件自信息量
2.2 互信息量和條件互信息量
2.2.1 互信息量
2.2.2 互信息量的性質(zhì)
2.2.3 條件互信息量
2.3 離散集的平均自信息量
2.3.1 平均自信息量(熵)
2.3.2 熵函數(shù)的數(shù)學特性
2.3.3 條件熵
2.3.4 聯(lián)合熵(共熵)
2.3.5 各種熵的性質(zhì)
2.3.6 加權(quán)熵
2.4 離散集的平均互信息量
2.4.1 平均條件互信息量
2.4.2 平均互信息量
2.4.3 平均互信息量的性質(zhì)
習題
第3章 無失真信源與信息熵
3.1 信源的數(shù)學模型及其分類
3.1.1 信源的數(shù)學模型
3.1.2 信源的分類
3.2 離散無記憶信源
3.3 離散無記憶信源的擴展信源
3.3.1 最簡單的離散信源
3.3.2 N次擴展信源
3.3.3 N次擴展信源的熵
3.4 離散平穩(wěn)信源
3.4.1 離散平穩(wěn)信源
3.4.2 平均自信息量
3.5 馬爾可夫信源
3.5.1 有限狀態(tài)馬爾可夫鏈
3.5.2 馬爾可夫信源
3.6 信源的相關(guān)性和剩余度
3.7 連續(xù)信源及其熵
3.7.1 連續(xù)信源
3.7.2 連續(xù)信源熵的定義
3.7.3 連續(xù)信源的最大熵
3.7.4 熵功率
3.7.5 聯(lián)合熵、條件熵和平均交互信
習題
第4章 信道及其容量
4.1 信道的分類與描述
4.1.1 信道的分類
4.1.2 信道描述
4.2 離散無記憶信道
4.2.1 離散信道的數(shù)學模型
4.2.2 單符號離散信道
4.2.3 信道疑義度及平均互信息
4.3 離散無記憶的擴展信道
4.3.1 N次擴展信道數(shù)學模型
4.3.2 N次擴展信道平均互信息
4.4 信道的組合
4.4.1 串聯(lián)信道
4.4.2 并聯(lián)信道
4.4.3 和信道
4.5 信道容量
4.5.1 幾個基本定義
4.5.2 幾種典型信道的容量計算
4.6 信源與信道的匹配
4.7 連續(xù)信道及其容量
4.7.1 時間離散信道及其容量
4.7.2 時間連續(xù)信道的容量
4.8 多用戶信道
4.8.1 引言
4.8.2 多址信道
4.8.3 廣播信道
4.8.4 相關(guān)信源的多用戶信道
習題
第5章 信源編碼
5.1 無失真信源編碼
5.1.1 編碼器
5.1.2 分組碼
5.1.3 等長碼和等長信源編碼定理
5.1.4 變長編碼定理
5.2 限失真信源編碼定理
5.2.1 失真測度
5.2.2 信息率失真函數(shù)
5.2.3 離散信源的信息率失真函數(shù)R(D)計算
5.2.4 限失真信源編碼定理
5.2.5 連續(xù)信源的信息率失真函數(shù)R(D)
5.3 矢量量化編碼
5.3.1 最佳標量量化編碼
5.3.2 矢量量化編碼
5.4 預測編碼
5.4.1 預測編碼的基本原理
5.4.2 預測編碼的基本類型
5.5 變換編碼
5.5.1 基本原理
5.5.2 幾種主要離散變換編碼
5.6 傳真編碼
5.6.1 文件傳真的基本特性
5.7 語音壓縮編碼
5.7.1 波形編碼ADPCM基本原理
5.7.2 參量編碼的線性預測編碼器LPC
5.7.3 混合編碼的各類方法
5.8 圖像編碼
5.8.1 靜止圖像壓縮編碼及其技術(shù)標準JPEG
5.8.2 面向通信的視頻壓縮編碼及其技術(shù)標準H.261
5.8.3 活動圖像壓縮編碼及其技術(shù)標準MPEG
習題
第6章 信道編碼
6.1 信道編碼的基本概念
6.1.1 信道編碼在數(shù)字通信系統(tǒng)的地位和作用
6.1.2 信道編碼的基本思想和分類
6.1.3 差錯控制的基本方式
6.1.4 信道編碼基本數(shù)學知識
6.2 有噪信道編碼
6.2.1 噪聲信道的編碼問題
6.2.2 錯誤概率與編碼方法
6.2.3 有噪信道編碼定理
6.3 線性分組碼
6.3.1 分組碼的性質(zhì)
6.3.2 生成矩陣與奇偶校驗矩陣
6.3.3 幾種典型的分組碼
6.4 卷積碼
6.4.1 卷積碼編碼
6.4.2 卷積碼的譯碼
6.5 糾正突發(fā)錯誤碼
6.5.1 突發(fā)差錯與糾突發(fā)差錯的基本概
6.5.2 法爾碼
6.6 交織碼
習題
第7章 信息工程中的數(shù)據(jù)保密
7.1 信息保密通信的模型
7.2 傳統(tǒng)密碼體制
7.2.1 單表代換密碼
7.2.2 多表代換密碼
7.2.3 多字母代換
7.2.4 轉(zhuǎn)置密碼
7.3 分組(塊)密碼
7.3.1 分組加密的基本概念
7.3.2 數(shù)據(jù)加密標準(DES)
7.4 公開密鑰密碼體制
7.4.1 公開密鑰的一般原理
7.4.2 RSA體制
習題
參考文獻