資訊理論與編碼基礎知識點2019下

2022-09-19 11:42:02 字數 822 閱讀 8040

資訊理論與編碼基礎知識點

(僅供複習參考,不作為出卷依據)

1. 當代文明的三大科學支柱

2. 資訊理論發展的過程

3. 資訊理論的奠基人,代表作?

4. 資訊理論中度量資訊的基本觀點

5. 乙個通訊系統中常用的編碼有哪些?其目標是什麼?

6. 信源符號自資訊量的含義與計算

7. 信源符號間互資訊量與平均互資訊量的三個含義(對應公式)

8. 信源熵的三種物理含義。

9. 離散信源的聯合熵、條件熵、平均互資訊量的含義及相互之間的關係。

10. 平均互資訊量的三種物理含義、性質及相應的公式,與通道容量、資訊率失真函式的關係

11. 信源的平穩性和無記憶性的含義

12. 離散無記憶信源的信源熵、n次擴充套件的信源熵計算。

13. n階馬爾科夫信源的定義

14. 低階(1、2)馬爾科夫信源的狀態轉移圖、各狀態的穩態分布概率(狀態極限概率)、極限熵h∞=hn+1

15. 通道容量的含義

16. 常見通道(無噪通道、強對稱、對稱、準對稱)容量的計算,達到通道容量時對應信源的概率分布情況。

17. 二進位制夏農編碼、費諾編碼、哈夫曼編碼方法及步驟,其編碼效率的計算

18. 資訊率失真函式的含義

19. dmax的含義

20. 二、三元離散信源的rmax rmin dmin、dmax計算,及等概率信源分布資訊率失真函式r(d)的計算

21. 在通道編碼中檢錯與糾錯的含意是什麼?

22. 最小碼距?最小碼距與檢錯、糾錯的能力關係

理解相關基本概念(定理、性質) 多練習課後習題(作業和講解)

2019資訊理論與編碼試卷

考試時間120分鐘 班級學號姓名 1.15分 彩色電視顯象管的螢幕上有5 105 個象元,設每個象元有64種彩色度,每種彩度又有16種不同的亮度層次,如果所有的彩色品種和亮度層次的組合均以等概率出現並且各個組合之間相互獨立。1 計算每秒傳送25幀圖象所需要的通道容量 2 如果在加性高斯白雜訊通道上訊...

資訊理論與編碼基礎複習題

1.從通訊的實質意義來講,如果信宿收到的訊息是已知的,則等於沒有收到任何訊息。2.當乙個信源中所有的符號訊息為等概時,該信源的熵最大。3.即時碼一定是單義可解碼。4.不使用間隔即可區分碼字,就必然要求碼字具有惟一性。5.雜訊熵為0的通道稱為確定通道。6.從通訊的實質意義來講,人們對訊息中所包含的未知...

資訊理論與編碼課程總結

08資訊 1 班 0807011039 趙傳來 資訊理論是人們在長期通訊工程的實踐中,由通訊技術與概率論 隨機過程和數理統計相結合而逐步發展起來的一門科學。緒論首先引出資訊的概念,進而討論資訊理論這一科學的研究物件 目的和內容,並簡述本學科的發展歷史 現狀和動向。經總結有以下知識點。資訊是指各個事物...