N维连续型随机序列X1X2...XN，有概率密度p（X1X2...XN）以及证明：当随机序列的分量各自达到正态分布并彼此统计独立时熵最大。最大熵为：

在连续信源中，根据差熵、条件差熵和联合差熵的定义，证明
（1）h（X|Y）≤h（X），当且仅当X和Y统计独立时等号成立；
（2）h（X1X2...XN）≤h（X1）+h（X2）+h（XN），当且仅当X1X2...XN彼此统计独立时等式成立。

有一信源发出恒定宽度，但不同幅度的脉冲，幅度值处在a1和a2之间，此信源连至某信道，信道接收端接收脉冲的幅度y处在b1和b2之间。已知随机变量X和Y的联合概率密度函数：

试计算h（X），h（Y），h（XY）和I（X；Y）。