《信息论考试题》由会员分享，可在线阅读，更多相关《信息论考试题（4页珍藏版）》请在装配图网上搜索。
1、.填空题（每空1分，共20分）1. 香农信息论的三个基本概念分别为、。2. 对离散无记忆信源来说，当信源呈分布情况下，信源熵取最大值。3. 写出平均互信息的三种表达公式、。4. 若连续信源输出的平均功率和均值被限定，则其输出信号幅度的概率密度函数为 时，信源具有最大熵值；若连续信源输出非负信号的均值受限，则其输出信号幅度呈分布时，信源具有最大熵值。5. 信道容量是为了解决通信的 问题，而信息率失真函数是为了解决通信的 问题。6. 费诺编码比较适合于 的信源。7. 无记忆编码信道的每一个二元符号输出可以用多个比特表示，理想情况下为实数，此时的无记忆二进制信道又称为8.差错控制的4种基本方式是:、
2、 、 、 9 . （n,k）线性码能纠t个错误，并能发现l个错误（1。，码的最小距离为：10.循环码码矢的i次循环移位等效于将码多项式乘 后再模。二简答题（每小题5分，共30分）1. 分别说明平均符号熵与极限熵的物理含义并写出它们的数学表达式。2. 写出二进制均匀信道的数学表达式，并画出信道容量C与信道转移概率p的曲线图。3. 简述保真度准则下的信源编码定理及其物理意义。4. 在哈夫曼编码过程中，对缩减信源符号按概率由大到小的顺序重新排列时，应将合并后的新符号排在 同概率大小信源符号的前面还是后面？并说明原因。5. 设某二元码为C=11100,01001,10010,00111，请问此码的最小
3、码距是多少？码率R （假设码字等概率分 布）为多少？此码能纠正几位码元错误？6. 目前对卷积码有哪些描述方法？各从什么角度考虑的？二、名词解释（3x1分） 离散平稳信源*各维联令概率分布均七时间起Cl无关的完全平稳主源口 线性如-|四：若Sim ）的口重1槃rill V则称E为I性狞叫吗.简称携性牛 也均：L真度：规定机个符七失皿.度传输一个符小;1起T：J以均失匕 即侑源平均失如盅万=对U林的联合个间求平均=一、填空题（共18分）I. 某元 S H线性分组码的全部许用码字为* 00000, 01011, 10110, 1110b则该码的码I； =,侑息位K度k=o2. 编码分为信源编码和信道
4、编码两种，信源编码以提高 性能为目的.信道编码以提离 竹能为目也3. 对于某个含有7个消息的信源，其炳的最大值为，对应为 分布,4. 当信道给定平均互信息量尤f）是信源概率分布风工）的 凸函数5. 0 k）线性分组码，要检测e个错误，则码的最小距离,要纠正 、个错比码的最小距离 T6. 七3（出丹召（XR沱关系式七 条件蜥H （X/Y与无条件炳H （X）的大小关系为.&从错误概率最小这一角度来说当信源非等概分布时应采用 译码准贝L等概分布时应采用 译码准则。9. 从信源的统计特性看,如xiiw值各时刻相耳独立,称为信源*10. 对于*想信道，H（. X/Y） - : IX Y）-,10 0 1
5、10。-II. （7, 3）线性码，G= 0 I 0 0 I U I ,苜接收矢t： fr =0011101,二知该码0 0 I II其中一位码元出错，则正确译码值是,L简述信息传输系统的五个组成部分及其作用口（10分）2. 简述Shannon关于信息论的三大定理占（6分）3, 写出Fm不等式，并说明其物理成义.6分）一.简答题。:分，何题6分）1什么是信源编码,试述香农第一编码定理的物理意义?答二所谓信源编码就是对是源的原始符号按一定的规则进行变换,以新的编码符号代替原始信源符号,从而降低原始倍源的冗余度。香农第一编码定邛的物理意义：无失真信源编码的实质就是对离散信源进行 适汽的变换,使变换
6、后新的码符号信源信道的输入信源）即川.能等概分布，以 使新信源的何个码符号平均所含的信息惜达到最大，从而使信道的信息传输率R 达到侑道容晕c.实现信源一与信道理想的统计匹配，一填空题(共15分*每题1分)I单符号离散信源一般用随机变里描述,而多符号信源一般用随机矢量描述*2离散*稳无2忆信源X H(X| Y). I (X; Y)、T(yj;xi). I (xi |yj)、T(xi)中,只有 不-具有弥负的性质,19, 信道2秒钟传一个符号,信道的I (X; ?) -3bi l Rt -biW.20. 给定信源翕信道输出为匚I(X;Y)是 概率的下色函数“21-离散对称伯道愉入 时，输巾为 分祚，位到伫道容量：
信息论考试题
