黑白氣象傳真圖的消息只有黑色和白色兩種，即信源X={黑，白}。設(shè)黑色出現(xiàn)的概率為p（黑）=0.3，白色的出現(xiàn)概率p（白）=0.7。
（1）假設(shè)圖上黑白消息出現(xiàn)前后沒有關(guān)聯(lián)，求熵H（X）；
（2）假設(shè)消息前后有關(guān)聯(lián)，其依賴關(guān)系為p（白/白）=0.9，p（黑/白）=0.1，p（白/黑）=0.2，p（黑/黑）=0.8，求此一階馬爾可夫信源的熵H2（X）；
（3）分別求上述兩種信源的剩余度，比較H（X）和H2（X）的大小，并說明其物理意義。
您可能感興趣的試卷
你可能感興趣的試題
及
；
最新試題
關(guān)于信源的冗余度，下面說法不正確的是（）。
差熵在通信前后計算平均互信息時，替代信息熵做差，替代了信息熵的作用，因此稱為差熵。
當信源概率分布p（x）固定時，平均互信息I（X；Y）是信道轉(zhuǎn)移概率p（y/x）的（）函數(shù)。
關(guān)于平均互信息I（X；Y），下列說法正確的有（）。
二元等概信源接到二元對稱信道，其中錯誤轉(zhuǎn)移概率為p，輸出1推測輸入0的后驗概率是（）。
給定信道轉(zhuǎn)移概率矩陣P后，平均互信息I（X；Y）是信源概率分布p（x）的（）函數(shù)。
若X、Y、Z構(gòu)成馬爾可夫鏈，則平均互信息滿足（）。
單符號離散信道的相關(guān)概率關(guān)系中的后驗概率，以下說法正確的是（）。
二元信源X接到二元對稱信道，信道輸入隨機變量X，其中0的概率為w，1的概率為m=1-w，輸出隨機變量為Y，其中錯誤轉(zhuǎn)移概率為p，正確轉(zhuǎn)移概率為q=1-p，則信道輸出Y=0的概率是（）。
對于無損信道，輸入隨機變量X，輸出隨機變量Y，以下說法錯誤的是（）。