信息論與編碼章節(jié)練習(xí)(2020.06.01)
來(lái)源:考試資料網(wǎng)2.問(wèn)答題簡(jiǎn)述平均互信息量的性質(zhì)及理解。
參考答案:限失真信源編碼定理
參考答案:譯碼規(guī)則;編碼方法
7.問(wèn)答題寫(xiě)出這個(gè)碼能檢測(cè)的所有錯(cuò)誤模式。
參考答案:
這個(gè)碼能檢測(cè)的所有錯(cuò)誤模式
{00001,00010,00100,01000,10000}
8.問(wèn)答題試證明n維隨機(jī)變量的共熵,不大于它們各自的熵之和。
10.問(wèn)答題簡(jiǎn)述連續(xù)信源的熵的定義。
參考答案:連續(xù)信源的不確定度應(yīng)為無(wú)窮大,是相對(duì)熵,或叫差熵。在取兩熵之間的差時(shí)才具有信息的所有特性。