資源描述：
《信息論與編碼課后作業(yè)答案》由會員上傳分享，免費在線閱讀，更多相關內容在教育資源-天天文庫。
1、2.4設離散無記憶信源，其發(fā)出的信息為(202120130213001203210110321010021032011223210)，求(1)此消息的自信息量是多少？(2)此消息中平均每符號攜帶的信息量是多少？解：(1)此消息總共有14個0、13個1、12個2、6個3，因此此消息發(fā)出的概率是：此消息的信息量是：(2)此消息中平均每符號攜帶的信息量是：2.10對某城市進行交通忙閑的調查，并把天氣分成晴雨兩種狀態(tài)，氣溫分成冷暖兩個狀態(tài)，調查結果得聯合出現的相對頻度如下：若把這些頻度看作概率測度，求：(1)忙閑的無條件熵；(2)天氣狀態(tài)和氣溫狀態(tài)已知時忙閑的條件熵；(3)從天氣狀
2、態(tài)和氣溫狀態(tài)獲得的關于忙閑的信息。解：(1)根據忙閑的頻率，得到忙閑的概率分布如下：(2)設忙閑為隨機變量X，天氣狀態(tài)為隨機變量Y，氣溫狀態(tài)為隨機變量Z(3)2.11有兩個二元隨機變量X和Y，它們的聯合概率為YXx1=0x2=1y1=01/83/8y2=13/81/8并定義另一隨機變量Z=XY（一般乘積），試計算：(1)H(X),H(Y),H(Z),H(XZ),H(YZ)和H(XYZ)；(2)H(X/Y),H(Y/X),H(X/Z),H(Z/X),H(Y/Z),H(Z/Y),H(X/YZ),H(Y/XZ)和H(Z/XY)；(3)I(X;Y),I(X;Z),I(Y;Z),I(
3、X;Y/Z),I(Y;Z/X)和I(X;Z/Y)。解：(1)Z=XY的概率分布如下：(2)(3)2.13設有一個信源，它產生0，1序列的信息。它在任意時間而且不論以前發(fā)生過什么符號，均按P(0)=0.4，P(1)=0.6的概率發(fā)出符號。(1)試問這個信源是否是平穩(wěn)的？(2)試計算H(X2),H(X3/X1X2)及H∞；(3)試計算H(X4)并寫出X4信源中可能有的所有符號。解：(1)這個信源是平穩(wěn)無記憶信源。因為有這些詞語：“它在任意時間而且不論以前發(fā)生過什么符號……”(2)(3)2.16一階馬爾可夫信源的狀態(tài)圖如下圖所示。信源X的符號集為{0,1,2}。(1)求平穩(wěn)后信源
4、的概率分布；(2)求信源的熵H∞。解：(1)(2)
