現(xiàn)代多媒體通信技術(shù)

目錄



第1章多媒體通信技術(shù)概論

1.1多媒體的基本概念

1.1.1多媒體及多媒體技術(shù)

1.1.2多媒體技術(shù)的特點(diǎn)

1.2多媒體技術(shù)的發(fā)展歷程

1.3多媒體通信的特點(diǎn)

1.3.1多媒體通信的特點(diǎn)

1.3.2多媒體通信終端的特點(diǎn)

1.4多媒體通信中的關(guān)鍵技術(shù)

1.4.1音視頻編解碼技術(shù)

1.4.2多媒體網(wǎng)絡(luò)通信技術(shù)

1.4.3多媒體存儲(chǔ)技術(shù)

1.4.4多媒體數(shù)據(jù)庫(kù)

1.5流媒體技術(shù)

1.6多媒體通信的應(yīng)用領(lǐng)域

習(xí)題一

第2章人的聽(tīng)覺(jué)感知與聲音信號(hào)

2.1人類(lèi)的聽(tīng)覺(jué)系統(tǒng)

2.2人耳的聽(tīng)覺(jué)特性

2.2.1聲強(qiáng)級(jí)和響度

2.2.2聽(tīng)閾與痛閾

2.2.3聽(tīng)覺(jué)定律

2.2.4人耳的聽(tīng)覺(jué)效應(yīng)

2.3聲音信號(hào)

2.3.1人聲信號(hào)

2.3.2音樂(lè)信號(hào)

2.3.3其他聲信號(hào)

2.4*聲音質(zhì)量評(píng)價(jià)方法

2.4.1基于人體的生理反應(yīng)評(píng)價(jià)方法

2.4.2聲品質(zhì)評(píng)價(jià)方法簡(jiǎn)述

2.4.3噪聲的主觀感覺(jué)

習(xí)題二
第3章人的視覺(jué)感知與視頻信號(hào)

3.1人的視覺(jué)系統(tǒng)

3.2人眼視覺(jué)特性

3.2.1亮度感覺(jué)特性

3.2.2光敏感特性

3.2.3亮度自適應(yīng)與亮點(diǎn)偏差感知

3.2.4空間掩模與時(shí)間掩模

3.2.5視覺(jué)注意機(jī)制

3.2.6視覺(jué)掩蔽效應(yīng)

3.2.7視覺(jué)暫留與閃爍

3.2.8視覺(jué)顯著性

3.3視頻信號(hào)

3.4電視視頻信號(hào)的制式

3.4.1NTSC制

3.4.2PAL制

3.4.3SECAM制

3.5電視信號(hào)原理

習(xí)題三

第4章色彩與多媒體顏色管理

4.1色彩的形成原理和描述方法

4.1.1光源、物體和人眼的顏色視覺(jué)

4.1.2色彩的描述

4.2多媒體設(shè)備與色彩

4.2.1多媒體色彩設(shè)備類(lèi)型

4.2.2設(shè)備的呈色原理

4.2.3設(shè)備的顏色表達(dá)能力——色域

4.3多媒體設(shè)備的顏色管理

4.3.1色彩管理

4.3.2色彩校準(zhǔn)

4.3.3色彩特征化和ICC特性文件

4.3.4色彩轉(zhuǎn)換

4.3.5色域映射

習(xí)題四

第5章語(yǔ)音與音頻壓縮編碼

5.1語(yǔ)音與音頻編碼技術(shù)概況

5.1.1語(yǔ)音與音頻壓縮的必要性

5.1.2語(yǔ)音與音頻壓縮的區(qū)別

5.1.3音頻壓縮方法

5.2語(yǔ)音與音頻編碼技術(shù)

5.2.1時(shí)域編碼

5.2.2頻帶編碼

5.3目前主流音頻壓縮編碼標(biāo)準(zhǔn)及應(yīng)用

5.3.1MPEG1

5.3.2MPEG2

5.3.3MPGE4 HEAAC

5.3.4MPEG通用語(yǔ)音與音頻編碼算法

5.3.5*語(yǔ)音頻編碼的未來(lái)發(fā)展方向

5.4*常用的音頻信號(hào)處理軟件

5.5*常見(jiàn)的音頻格式

5.5.1無(wú)損壓縮的音頻編碼文件格式

5.5.2有損壓縮的音頻編碼文件格式

習(xí)題五

第6章視頻壓縮編碼: 以HEVC為例

6.1視頻壓縮編碼概述

6.2HEVC概述

6.3HEVC中的圖像分割方式

6.4編碼單元

6.5幀內(nèi)預(yù)測(cè)

6.5.1幀內(nèi)預(yù)測(cè)模式

6.5.2幀內(nèi)預(yù)測(cè)流程

6.6運(yùn)動(dòng)估計(jì)與運(yùn)動(dòng)補(bǔ)償

6.6.1運(yùn)動(dòng)估計(jì)和運(yùn)動(dòng)補(bǔ)償?shù)幕驹?br />
6.6.2影響運(yùn)動(dòng)估計(jì)的主要因素

6.6.3搜索策略

6.6.4HEVC中的運(yùn)動(dòng)估計(jì)流程

6.6.5運(yùn)動(dòng)融合

6.6.6高級(jí)運(yùn)動(dòng)矢量預(yù)測(cè)

6.7變換與量化

6.7.1離散余弦變換

6.7.2量化與量化矩陣

6.8HEVC的后處理技術(shù)

6.8.1去方塊濾波

6.8.2樣點(diǎn)自適應(yīng)補(bǔ)償

6.8.3自適應(yīng)環(huán)路濾波技術(shù)

6.9熵編碼

6.9.1CAVLC

6.9.2CABAC

6.9.3HEVC標(biāo)準(zhǔn)熵編碼過(guò)程

6.10并行運(yùn)算優(yōu)化設(shè)計(jì)

6.11*碼率控制

6.11.1率失真理論

6.11.2碼率控制與率失真優(yōu)化

習(xí)題六

第7章流媒體傳輸與控制

7.1流媒體技術(shù)概況

7.1.1流式傳輸基礎(chǔ)

7.1.2流媒體播放方式

7.1.3流媒體系統(tǒng)基本結(jié)構(gòu)

7.2流媒體傳輸和控制協(xié)議

7.2.1傳輸層協(xié)議

7.2.2實(shí)時(shí)傳輸協(xié)議RTP

7.2.3實(shí)時(shí)傳輸控制協(xié)議RTCP

7.2.4實(shí)時(shí)流傳輸協(xié)議RTSP

7.2.5資源預(yù)留協(xié)議RSVP

7.3基于RTCP反饋的擁塞控制

7.3.1擁塞控制的方式

7.3.2RTCP反饋擁塞控制的實(shí)現(xiàn)

7.4流媒體碼流復(fù)接

7.4.1基本概念

7.4.2流程

習(xí)題七

第8章流媒體同步機(jī)制

8.1多媒體同步的標(biāo)準(zhǔn)

8.2多媒體同步的參考模型

8.2.1媒體層

8.2.2流層

8.2.3對(duì)象層

8.3典型同步模型

8.3.1時(shí)間軸模型

8.3.2時(shí)間間隔模型

8.3.3層次模型

8.3.4時(shí)序Petri網(wǎng)模型

8.4網(wǎng)絡(luò)環(huán)境下的流媒體同步

8.4.1流媒體同步關(guān)系

8.4.2流媒體同步的分類(lèi)

8.4.3流媒體同步規(guī)范

8.4.4多級(jí)同步機(jī)制

8.5影響流媒體同步的關(guān)鍵因素及解決方案

8.5.1延時(shí)與抖動(dòng)

8.5.2亂序

8.6緩沖區(qū)容量設(shè)置及自適應(yīng)帶寬技術(shù)

8.6.1自適應(yīng)帶寬技術(shù)

8.6.2流內(nèi)同步中緩沖大小設(shè)置及自適應(yīng)帶寬技術(shù)

8.6.3流間同步中緩沖大小設(shè)置及自適應(yīng)帶寬技術(shù)

習(xí)題八

第9章異構(gòu)網(wǎng)絡(luò)環(huán)境中視頻處理與傳輸

9.1流媒體技術(shù)應(yīng)用于異構(gòu)環(huán)境主要面臨的挑戰(zhàn)

9.2視頻質(zhì)量自適應(yīng)概覽

9.3視頻可伸縮編碼

9.3.1可伸縮性編碼概念

9.3.2可伸縮視頻編碼

9.4流媒體視頻質(zhì)量自適應(yīng)技術(shù)

9.4.1流媒體視頻質(zhì)量自適應(yīng)技術(shù)概況

9.4.2采用SVC的流媒體質(zhì)量自適應(yīng)技術(shù)

9.5視頻轉(zhuǎn)碼

9.5.1視頻轉(zhuǎn)碼器框架結(jié)構(gòu)

9.5.2視頻轉(zhuǎn)碼技術(shù)分類(lèi)介紹

9.5.3視覺(jué)顯著性在視頻轉(zhuǎn)碼領(lǐng)域的應(yīng)用

習(xí)題九

第10章立體視覺(jué)與三維電視技術(shù)

10.1三維電視的發(fā)展

10.2立體視覺(jué)原理

10.2.1單眼的視覺(jué)的局限性

10.2.2雙目視覺(jué)與深度暗示

10.3多視點(diǎn)裸眼3D顯示技術(shù)

10.3.1深度提取算法

10.3.2DIBR算法

10.4三維電視技術(shù)

10.4.13DTV系統(tǒng)架構(gòu)

10.4.23DTV立體顯示技術(shù)

10.4.33DTV系統(tǒng)的3D數(shù)據(jù)表示

10.4.43DTV視頻編碼技術(shù)

習(xí)題十

參考文獻(xiàn)