離散信源題與答案_第1頁
離散信源題與答案_第2頁
離散信源題與答案_第3頁
離散信源題與答案_第4頁
離散信源題與答案_第5頁
已閱讀5頁，還剩1頁未讀， 繼續免費閱讀

下載本文檔

版權說明：本文檔由用戶提供并上傳，收益歸屬內容提供方，若內容存在侵權，請進行舉報或認領

文檔簡介

1、3.1 設有一離散無記憶信源，其概率空間為該信源發出的信息序列為(202 120 130 213 001 203 210 110 321 010 021 032 011 223 210)。求：(1) 此消息的自信息量是多少？(2) 此消息中平均每符號攜帶的信息量是多少？解：(1) 此消息總共有14個0、13個1、12個2、6個3，因此消息發出的概率是：此消息的信息量是：(2) 此消息中平均每符號攜帶的信息量是：3.2 某一無記憶信源的符號集為0, 1，已知信源的概率空間為(1) 求信息符號的平均熵；(2) 由100個符號構成的序列，求某一特定序列（例如有m個“0”和（100 - m）個“1”）

2、的自信息量的表達式；(3) 計算(2)中序列的熵。解：(1)(2) (3) 3.5 某信源的消息符號集的概率分布和二進制代碼如題表3.2所列。題表 3.2信源1/21/41/81/8代碼010110111(1) 求信息的符號熵；(2) 求每個消息符號所需要的平均二進制碼的個數或平均代碼長度。進而用這一結果求碼序列中的一個二進制碼的熵；(3) 當消息是由符號序列組成時，各符號之間若相互獨立，求其對應的二進制碼序列中出現0和1的無條件概率和，求相鄰碼間的條件概率、。解：(1) (2) (3) 設消息序列長為，則、的個數分別為個。則0的個數為而1的個數為因而3.7 設有一個信源，它產生0，1序列的信

3、息。該信源在任意時間而且不論以前發生過什么消息符號，均按P(0) = 0.4，P(1) = 0.6的概率發出符號。(1) 試問這個信源是否是平穩的；(2) 試計算H(X2), H(X3/X1X2)及H；(3) 試計算H(X4)并寫出X4信源中可能有的所有符號。解：(1) 這個信源是平穩無記憶信源。因為有這些詞語：“它在任意時間而且不論以前發生過什么符號”(2) (3) 3.11 有一馬爾可夫信源，已知轉移概率為，。試畫出狀態轉移圖，并求出信源熵。解：3.21黑白傳真機的信息元只有黑色和白色兩種X=黑，白，一般氣象圖上黑色出現的概率為P(黑) = 0.3，白色出現的概率為P(白) = 0.7，黑白消息前后沒有關聯，其轉移概率為P(白/白) = 0.9，P(黑/白) = 0.1，P(白/黑) = 0.2，P(黑/黑) = 0.8。求該一階馬爾可夫信源的不確定性H(X/X)，并畫出該信源的狀態轉移圖。解：3.23 設信源產生A, B, C三種符號，。試計算冗余度。解：3.26 一階馬爾可夫信源的狀態圖如下

溫馨提示

  • 1. 本站所有資源如無特殊說明，都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等，如果需要附件，請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙，網頁內容里面會有圖紙預覽，若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間，僅對用戶上傳內容的表現方式做保護處理，對用戶上傳分享的文檔內容本身不做任何修改或編輯，并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容，請與我們聯系，我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論