信息论与编码试题
1、平均自信息为。表示信源的平均不确定度。也表示平均每个信源消息所提供的信息量。也表示平均每个信源消息所提供的信息量。2、最大离散熵定理为。离散无记忆信源。(3) 离散平稳无记忆信源X的N次扩展信源的熵等于离散信源X的熵的 N倍。信息的概念 信息科学技术概述 信息论概述。
信息论与编码试题Tag内容描述:<p>1、蚆蚄罿莆莆衿袅蒆蒈蚂膄蒅薀袈肀蒄蚃蚁羆蒃莂袆羂蒂薅蝿芁蒁蚇羄膇蒀蝿螇肃蒀葿羃罿肆薁螅袅膅蚄羁膃膄莃螄聿膃薆罿肅膃蚈袂羁膂螀蚅芀膁蒀袀膆膀薂蚃肂腿蚄衿羈芈莄蚁袄芈蒆袇膂芇虿蚀膈芆螁羅肄芅蒁螈羀芄薃羃袆芃蚅螆膅节莅羂肁莂蒇螅羇莁薀羀袃莀螂螃芁荿蒂蚆膇莈薄袁肃莇蚆蚄罿莆莆衿袅蒆蒈蚂膄蒅薀袈肀蒄蚃蚁羆蒃莂袆羂蒂薅蝿芁蒁蚇羄膇蒀蝿螇肃蒀葿羃罿肆薁螅袅膅蚄羁膃膄莃螄聿膃薆罿肅膃蚈袂羁膂螀蚅芀膁蒀袀膆膀薂蚃肂腿蚄衿羈芈莄蚁袄芈蒆袇膂芇虿蚀膈芆螁羅肄芅蒁螈羀芄薃羃袆芃蚅螆膅节莅羂肁莂蒇螅羇莁薀羀袃莀螂螃芁荿蒂蚆。</p><p>2、一填空题(本题20分,每小题2分)1、平均自信息为表示信源的平均不确定度,也表示平均每个信源消息所提供的信息量。平均互信息表示从Y获得的关于每个X的平均信息量,也表示发X前后Y的平均不确定性减少的量,还表示通信前后整个系统不确定性减少的量。2、最大离散熵定理为:离散无记忆信源,等概率分布时熵最大。3、最大熵值为。4、通信系统模型如下:5、香农公式为为保证足够大的信道容量,可采用(1)用频带换信噪比;(2)用信噪比换频带。6、只要,当N足够长时,一定存在一种无失真编码。7、当RC时,只要码长足够长,一定能找到一种编。</p><p>3、一、(11)填空题(1) 1948年,美国数学家 香农 发表了题为“通信的数学理论”的长篇论文,从而创立了信息论。(2) 必然事件的自信息是 0 。 (3) 离散平稳无记忆信源X的N次扩展信源的熵等于离散信源X的熵的 N倍 。 (4) 对于离散无记忆信源,当信源熵有最大值时,满足条件为__信源符号等概分布_。(5) 若一离散无记忆信源的信源熵H(X)等于2.5,对信源进行等长的无失真二进制编码,则编码长度至少为 3 。(6) 对于香农编码、费诺编码和霍夫曼编码,编码方法惟一的是 香农编码 。(7) 已知某线性分组码的最小汉明距离为3,那么这。</p><p>4、(一)一、判断题.1. 当随机变量和相互独立时,条件熵等于信源熵. ( )2. 由于构成同一空间的基底不是唯一的,所以不同的基底或生成矩阵有可能生成同一码集. ( )3.一般情况下,用变长编码得到的平均码长比定长编码大得多. ( )4. 只要信息传输率大于信道容量,总存在一种信道编译码,可以以所要求的任意小的误差概率实现可靠的通信. ( )5. 各码字的长度符合克拉夫特不等式,是唯一可译码存在的充分和必要条件. ( )6. 连续信源和离散信源的熵都具有非负性. ( )7. 信源的消息通过信道传输后的误差或失真越大,信宿收到消息后对信。</p><p>5、1、平均自信息为表示信源的平均不确定度,也表示平均每个信源消息所提供的信息量。平均互信息表示从Y获得的关于每个X的平均信息量、发X前后Y的平均不确定性减少的量、通信前后整个系统不确定性减少的量。2、最大离散熵定理为:离散无记忆信源,等概率分布时熵最大,最大熵值为。3、香农公式为为保证足够大的信道容量,采用(1用频带换信噪比;(2用信噪比换频带。4、只要,当N足够长时,一定存在一种无失真编码。5、当RC时,只要码长足够长,一定能找到一种编码方法和译码规则,使译码错误概率无穷小。6、1948年,美国数学家 香农 发表了题。</p><p>6、1,要点:,第一章:信息科学技术概论,信息的概念 信息科学技术概述 信息论概述,2,1.1 信息的概念,内容:,1.1.1 信息的定义 1.1.2 信息的特征与性质,3,信息是一个十分通俗而广泛的名词,抽象和复杂。 不同的学科领域对其有不同的定义和解释。,4,1.1.1 信息的定义,消息、新闻与知识 据新词源考证,唐代诗人李中,暮春怀故人,“梦断美人沉信息,目穿长路倚楼台”,“信息”是消息的同义词; 在西方的早期文献著作中,信息(information)和消息(message)也是互相通用的; 英国牛津字典中,信息是谈论的事情、新闻和知识(sth told;news or knowl。</p><p>7、1. 在无失真的信源中,信源输出由 H(X) 来度量;在有失真的信源中,信源输出由 R(D) 来度量。 2. 要使通信系统做到传输信息有效、可靠和保密,必须首先 信源 编码, 然后_____加密____编码,再______信道。</p><p>8、单项选择题 1.下面表达式中正确的是(A )。 A. B. C. D. 2.彩色电视显像管的屏幕上有5105 个像元,设每个像元有64种彩色度,每种彩度又有16种不同的亮度层次,如果所有的彩色品种和亮度层次的组合均以。</p>