📔2. 信道容量
2.1 介绍
一个常见的通信系统如图

在通信系统中,通过观察 ,我们的目标是恢复 。互信息量定义了收到之后不确定性的减少量(反之亦然),这种不确定性是由于信道的传输。让输入和输出的取值分别为和,信道转移概率为(知道 已传输,则观察到 的概率。它定义了信道质量。)因此和之间的互信息为
则信道容量的定义为:
信道容量表示在所有信源分布上可以实现的最大互信息。在无线通信系统中,它指的是一个调制符号所能携带的最大信息比特数量,使得信息能够以任意低的错误概率被恢复。
一个无线通信系统如下

需要信道编码来实现这种可靠的通信,给定位信息符号(或比特),添加冗余以获得位码字符号(或位),编码率为。编码了可以理解为信息冗余程度。使用二进制调制,例如BPSK,如果,则可以进行可靠的通信。这个性质将在香农信道编码定理(第4章)中得到证明。
离散无记忆信道:

离散输入:
离散输出:
信道转移概率大于等于0,即,同时信道具有归一性,即,注意。
信道具有无记忆性:给定输入和输出序列和,有
即每一对符号之间的转移概率相互独立。转移概率可以用转移概率矩阵表示
2.2 二元对称信道(BSC)

输入:0 1 0 0 0 1 1 0 1 0
输出:0 1 1 1 0 0 1 0 0 0
输入和输出是离散的
信道传输条件概率如下:
信道概率转移矩阵为:
这是最简单的无线通信信道模型。
现在来考虑它的信道容量。由于,分析可知,当去最大值,取最小值时,此时最大。其中,计算如下
当时,信道容量
为什么信源等概分布时,互信息量最大,即达到信道容量?比较浅层的理解是,当信源等概分布时,最大,而与信源概率分布无关,所以此时互信息量最大,更深层次的理解是,信号0和信号1的传输出错概率是一样的,即,所以传输时没有必要考虑两者的差别,即等概率分布时最优。
综上,二元对称信道的信道容量

2.3 二元擦除信道(BEC)

输入:1 0 0 1 0 1 0 1 0 0...
输出:1 e 0 1 e 0 e 0 e 1...
信道传输条件概率如下
信道概率转移矩阵为
它是计算机网络中常用的信道模型。数据包要么被完美接收,要么丢失。
现在来考虑它的信道容量,和BSC的分析类似,时互信息量最接近信道容量。信道容量,又因为且,所以的熵为
在条件下的条件熵为
综上可得

上图可以理解为,丢包率越小,信道容量越大,这里没有出现对称关系,是因为收到0不会翻转得到1
2.4 加性高斯白噪声信道(AWGN)

加性高斯白噪声的信道模型为:
:离散的输入信号,调制信号
:独立于x的白噪声,服从的高斯分布
:连续的输出信号,是的变化形式
这是一种更现实的无线信道模型,其中传输的信号受到噪声的干扰。
它用于表示能够确保视距传输(LoS)的空间通信信道。
它也经常被用作评估信道代码的通用平台。
信道的互信息为
信道容量为
对于AWGN,,它的PDF为
在噪声的熵为
直接分析,如果输入是连续的且服从高斯分布,则互信息量将取得最大值,即信道容量为
对于输入,,它的PDF为
则的熵为
因为,且和相互独立,则输出服从高斯分布,则的熵为
综上,信道容量为
其中,是发射信号的功率,是噪声的功率,因此通常称为信噪比(SNR)。
上面的结论是通过假设服从高斯分布得来的,在实际的系统中,不是高斯分布的,因此这个限制是无法实现的。
电磁波中的传输因素(维度):振幅、频率、相位,调制的维度会影响信道容量,如下图

常用的信道容量公式:
信噪比()写成分贝(dB)的形式为:
现在我们考虑带宽受限的AWGN信号。在实际系统中,接收端需要进行采样来重建接收信号,如图所示

如果信号的频率为 ,则采样频率至少应为 ,才能完美重构信号,如图所示
通过采样,我们现在得到了一系列时间离散的高斯样本,信道模型变为
信号有方差,噪声有方差。
每个时刻离散高斯信道的容量为
:噪声样本的功率谱密度
:噪声符号的功率谱密度
:信号样本的功率
:信号符号的功率
取一段时间,由
得
同理,由
得
因此
这是用信号高能量和噪声功率的比值来表示某个采样点的信道容量。
带宽受限的AWGN信号的信道容量为
继续展开
香农极限:要通过高斯信道实现无误差传输,信噪比至少为
证明:
这种可能性是通过信道编码(信息长度k,码字长度n)来保证的,令和分别表示每个信息符号和每个编码符号的能量,使它们满足
这样添加冗余度就不会增加传输能量。
以BPSK为例,调制符号的能量为
假设信号频率,则
为了实现无错误传输,需要
夹断信噪比为
有限调制字母表,即不再假设输入为高斯信号,而是有限调制字母表。在无线通信系统中,数字信号被调制(映射)为模拟信号进行传输。常用的调制方案包括:

AWGN 信道具有有限输入但连续输出。
输入,BPSK:M=2,QPSK:M=4,16QAM:M=16
输出,其中是AWGN
信道容量
由于
可继续化简为
假设每个调制符号都有同等的可能性被传输,则有
所以信道容量为
考虑有限输入的信道容量

2.5 衰落信道

信道模型:
衰落系数𝛼进一步表示信号衰减、信号散射、路径损耗和多径累积的影响。
它是城市通信常采用的信道模型。
如果服从的瑞利分布,则称为瑞利衰落信道。
衰落类型
快速衰落:每个都经过一个独立的衰落系数
准静态衰落:在传输一个代码字的过程中,保持不变,并且从一个代码字到另一个代码字独立地变化。
块衰落:逐块变化
假设发射机和接收机都知道衰落系数,瞬时容量为
:信号功率取决于,它是由特定衰落实现所定义的最大可实现传输速率。
遍历容量:
它是所有衰落实现中可以实现的平均传输速率。
Last updated
