一個(gè)DMS只有三個(gè)輸出符號(hào)，它們的概率為{0.5，0.4，0.1}。
（1）給出此信源的霍夫曼碼并確定編碼效率。
（2）每次考慮兩個(gè)符號(hào)時(shí)，給出此信源的霍夫曼碼并確定編碼效率。
（3）每次考慮三個(gè)符號(hào)時(shí)，給出此信源的霍夫曼碼并確定編碼效率。

考慮一個(gè)信源的概率為{0.35，0.25，0.20，0.15，0.05}的DMS。
（1）給出此信源的霍夫曼碼。
（2）計(jì)算出這些碼子的平均碼長(zhǎng)。
（3）這個(gè)碼的效率η是多少？

計(jì)算概率分布函數(shù)為的均勻分布隨機(jī)變量X的微分熵H（X）。畫出H（X）相對(duì)于參數(shù)a（0.1〈a〈10）的平面圖，并對(duì)結(jié)果進(jìn)行評(píng)論。

考慮一個(gè)只取整數(shù)值的隨機(jī)變量X，滿足，其中。求熵H（X）。