信息论考试题(填空简答).doc

《信息论考试题(填空简答).doc》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、一．填空题（每空1分，共20分）1．香农信息论的三个基本概念分别为____________、____________、____________。2．对离散无记忆信源来说，当信源呈____________分布情况下，信源熵取最大值。3．写出平均互信息的三种表达公式____________、____________、____________。4．若连续信源输出的平均功率和均值被限定，则其输出信号幅度的概率密度函数为____________时，信源具有最大熵值；若连续信源输出非负信号的均值受限，则其输出信号幅

2、度呈____________分布时，信源具有最大熵值。5．信道容量是为了解决通信的________问题，而信息率失真函数是为了解决通信的________问题。6．费诺编码比较适合于____________________________________的信源。7．无记忆编码信道的每一个二元符号输出可以用多个比特表示，理想情况下为实数，此时的无记忆二进制信道又称为____________。8．差错控制的4种基本方式是：____________、____________、____________、_____

3、_______。9．(n,k)线性码能纠t个错误，并能发现l个错误(l>t)，码的最小距离为：____________________________________。10．循环码码矢的i次循环移位等效于将码多项式乘____________后再模____________。二．简答题（每小题5分，共30分）1．分别说明平均符号熵与极限熵的物理含义并写出它们的数学表达式。2．写出二进制均匀信道的数学表达式，并画出信道容量C与信道转移概率p的曲线图。3.简述保真度准则下的信源编码定理及其物理意义。4．在哈夫曼

4、编码过程中，对缩减信源符号按概率由大到小的顺序重新排列时，应将合并后的新符号排在同概率大小信源符号的前面还是后面？并说明原因。5．设某二元码为C={11100,01001,10010,00111},请问此码的最小码距是多少？码率R（假设码字等概率分布）为多少？此码能纠正几位码元错误？6．目前对卷积码有哪些描述方法？各从什么角度考虑的？