問答題什么是平均自信息量與平均互信息,比較一下這兩個概念的異同?

您可能感興趣的試卷

你可能感興趣的試題

3.多項(xiàng)選擇題信道剩余度與()有關(guān)。

A.信道容量C
B.信源通過信道實(shí)際傳輸?shù)钠骄畔⒘縄(X;Y)
C.信源的熵H(X)

4.多項(xiàng)選擇題關(guān)于平均互信息I(X;Y),下列說法正確的有()。

A.它代表接收到符號集Y后所能獲得的關(guān)于X的信息量
B.它有可能取負(fù)值
C.I(X;Y)=H(X)-H(X/Y)
D.0≤I(X;Y)≤H(X)
E.當(dāng)X與Y相互獨(dú)立時,I(X;Y)=H(X)

5.單項(xiàng)選擇題高斯分布連續(xù)信源的差熵,以下說法正確的是()。

A.與數(shù)學(xué)期望無關(guān),與方差有關(guān)
B.與數(shù)學(xué)期望有關(guān),與方差無關(guān)
C.與數(shù)學(xué)期望無關(guān),與方差無關(guān)
D.與數(shù)學(xué)期望有關(guān),與方差有關(guān)

6.單項(xiàng)選擇題關(guān)于數(shù)據(jù)處理定理,以下說法不正確的是()。

A.信息處理過程中熵是不會增加的
B.通過數(shù)據(jù)處理后,一般只會增加信息的損失,最多保持原來獲得的信息
C.若X、Y、Z組成一個馬爾可夫鏈,則有I(X;Z)≥I(X;Y)
D.若X、Y、Z組成一個馬爾可夫鏈,則有I(X;Z)≤I(X;Y)
E.當(dāng)消息通過多級處理器時,隨著處理器數(shù)目的增多,輸入消息與輸出消息之間的平均互信息量趨于變小

7.多項(xiàng)選擇題關(guān)于離散平穩(wěn)信源,下列說法錯誤的有()。

A.信源所發(fā)符號的概率分布與時間起點(diǎn)無關(guān)
B.H(X1X2…XL)=H(X1)+H(X2/X1)+H(X3/X2)+…+H(XL/XL-1)
C.H(X1X2…XL)=LH(X)
D.H(XL/XL-1)是L的單調(diào)非增函數(shù)
E.HL(X)≥H(XL/XL-1)

8.單項(xiàng)選擇題對于隨機(jī)變量X與Y之間平均互信息的非負(fù)性,以下說法正確的是()。

A.當(dāng)Y平穩(wěn)時等式成立
B.當(dāng)X、Y統(tǒng)計不獨(dú)立時等式成立
C.當(dāng)X平穩(wěn)時等式成立
D.當(dāng)X、Y統(tǒng)計獨(dú)立時等式成立

10.單項(xiàng)選擇題BSC信道的錯誤轉(zhuǎn)移概率是0.5,該BSC信道的信道容量是()。

A.其余選項(xiàng)都不正確
B.1
C.2
D.0