信息論與編碼章節(jié)練習(2020.06.01)

來源：考試資料網(wǎng)

1.名詞解釋即時碼

參考答案：在唯一可譯變長碼中，有一類碼，它在譯碼時無須參考后續(xù)的碼符號就能立即做出判斷，譯成對應的信源符號，則這類碼稱為即時碼。

進入題庫練習

2.問答題簡述連續(xù)信源的熵的定義。

參考答案：連續(xù)信源的不確定度應為無窮大，是相對熵，或叫差熵。在取兩熵之間的差時才具有信息的所有特性。

進入題庫練習

3.問答題證明：若（X，Y，Z）是馬氏鏈，則（Z，Y，X）也是馬氏鏈。

參考答案：

進入題庫練習

4.填空題根據(jù)信道特性是否隨時間變化，信道可以分為（）和（）。

參考答案：恒參信道；隨參信道

進入題庫練習

5.問答題簡述香農(nóng)公式的含義。

參考答案：

進入題庫練習

6.問答題如果你在不知道今天是星期幾的情況下問你的朋友“明天星期幾？”則答案中含有多少信息量？如果你在已知今天是星期四的情況下提出同樣的問題，則答案中你能獲得多少信息量（假設已知星期一至星期日的順序）？

參考答案：

進入題庫練習

7.問答題 黑白氣象傳真圖的消息只有黑色和白色兩種，求：
（1）黑色出現(xiàn)的概率為0.3，白色出現(xiàn)的概率為0.7.給出這個只有兩個符號的信源X的數(shù)學模型，假設圖上黑白消息出現(xiàn)前后沒有關(guān)聯(lián)，求熵X（H）；
（2）假設黑白消息出現(xiàn)前后有關(guān)聯(lián)，其依賴關(guān)系為：P（白/白）=0.9，P（黑/白）=0.1，P（白/黑）=0.2，P（黑/黑）=0.8，求其熵H₂（X）.

參考答案：