现代多媒体通信技术

目录



第1章多媒体通信技术概论

1.1多媒体的基本概念

1.1.1多媒体及多媒体技术

1.1.2多媒体技术的特点

1.2多媒体技术的发展历程

1.3多媒体通信的特点

1.3.1多媒体通信的特点

1.3.2多媒体通信终端的特点

1.4多媒体通信中的关键技术

1.4.1音视频编解码技术

1.4.2多媒体网络通信技术

1.4.3多媒体存储技术

1.4.4多媒体数据库

1.5流媒体技术

1.6多媒体通信的应用领域

习题一

第2章人的听觉感知与声音信号

2.1人类的听觉系统

2.2人耳的听觉特性

2.2.1声强级和响度

2.2.2听阈与痛阈

2.2.3听觉定律

2.2.4人耳的听觉效应

2.3声音信号

2.3.1人声信号

2.3.2音乐信号

2.3.3其他声信号

2.4*声音质量评价方法

2.4.1基于人体的生理反应评价方法

2.4.2声品质评价方法简述

2.4.3噪声的主观感觉

习题二
第3章人的视觉感知与视频信号

3.1人的视觉系统

3.2人眼视觉特性

3.2.1亮度感觉特性

3.2.2光敏感特性

3.2.3亮度自适应与亮点偏差感知

3.2.4空间掩模与时间掩模

3.2.5视觉注意机制

3.2.6视觉掩蔽效应

3.2.7视觉暂留与闪烁

3.2.8视觉显著性

3.3视频信号

3.4电视视频信号的制式

3.4.1NTSC制

3.4.2PAL制

3.4.3SECAM制

3.5电视信号原理

习题三

第4章色彩与多媒体颜色管理

4.1色彩的形成原理和描述方法

4.1.1光源、物体和人眼的颜色视觉

4.1.2色彩的描述

4.2多媒体设备与色彩

4.2.1多媒体色彩设备类型

4.2.2设备的呈色原理

4.2.3设备的颜色表达能力——色域

4.3多媒体设备的颜色管理

4.3.1色彩管理

4.3.2色彩校准

4.3.3色彩特征化和ICC特性文件

4.3.4色彩转换

4.3.5色域映射

习题四

第5章语音与音频压缩编码

5.1语音与音频编码技术概况

5.1.1语音与音频压缩的必要性

5.1.2语音与音频压缩的区别

5.1.3音频压缩方法

5.2语音与音频编码技术

5.2.1时域编码

5.2.2频带编码

5.3目前主流音频压缩编码标准及应用

5.3.1MPEG1

5.3.2MPEG2

5.3.3MPGE4 HEAAC

5.3.4MPEG通用语音与音频编码算法

5.3.5*语音频编码的未来发展方向

5.4*常用的音频信号处理软件

5.5*常见的音频格式

5.5.1无损压缩的音频编码文件格式

5.5.2有损压缩的音频编码文件格式

习题五

第6章视频压缩编码: 以HEVC为例

6.1视频压缩编码概述

6.2HEVC概述

6.3HEVC中的图像分割方式

6.4编码单元

6.5帧内预测

6.5.1帧内预测模式

6.5.2帧内预测流程

6.6运动估计与运动补偿

6.6.1运动估计和运动补偿的基本原理

6.6.2影响运动估计的主要因素

6.6.3搜索策略

6.6.4HEVC中的运动估计流程

6.6.5运动融合

6.6.6高级运动矢量预测

6.7变换与量化

6.7.1离散余弦变换

6.7.2量化与量化矩阵

6.8HEVC的后处理技术

6.8.1去方块滤波

6.8.2样点自适应补偿

6.8.3自适应环路滤波技术

6.9熵编码

6.9.1CAVLC

6.9.2CABAC

6.9.3HEVC标准熵编码过程

6.10并行运算优化设计

6.11*码率控制

6.11.1率失真理论

6.11.2码率控制与率失真优化

习题六

第7章流媒体传输与控制

7.1流媒体技术概况

7.1.1流式传输基础

7.1.2流媒体播放方式

7.1.3流媒体系统基本结构

7.2流媒体传输和控制协议

7.2.1传输层协议

7.2.2实时传输协议RTP

7.2.3实时传输控制协议RTCP

7.2.4实时流传输协议RTSP

7.2.5资源预留协议RSVP

7.3基于RTCP反馈的拥塞控制

7.3.1拥塞控制的方式

7.3.2RTCP反馈拥塞控制的实现

7.4流媒体码流复接

7.4.1基本概念

7.4.2流程

习题七

第8章流媒体同步机制

8.1多媒体同步的标准

8.2多媒体同步的参考模型

8.2.1媒体层

8.2.2流层

8.2.3对象层

8.3典型同步模型

8.3.1时间轴模型

8.3.2时间间隔模型

8.3.3层次模型

8.3.4时序Petri网模型

8.4网络环境下的流媒体同步

8.4.1流媒体同步关系

8.4.2流媒体同步的分类

8.4.3流媒体同步规范

8.4.4多级同步机制

8.5影响流媒体同步的关键因素及解决方案

8.5.1延时与抖动

8.5.2乱序

8.6缓冲区容量设置及自适应带宽技术

8.6.1自适应带宽技术

8.6.2流内同步中缓冲大小设置及自适应带宽技术

8.6.3流间同步中缓冲大小设置及自适应带宽技术

习题八

第9章异构网络环境中视频处理与传输

9.1流媒体技术应用于异构环境主要面临的挑战

9.2视频质量自适应概览

9.3视频可伸缩编码

9.3.1可伸缩性编码概念

9.3.2可伸缩视频编码

9.4流媒体视频质量自适应技术

9.4.1流媒体视频质量自适应技术概况

9.4.2采用SVC的流媒体质量自适应技术

9.5视频转码

9.5.1视频转码器框架结构

9.5.2视频转码技术分类介绍

9.5.3视觉显著性在视频转码领域的应用

习题九

第10章立体视觉与三维电视技术

10.1三维电视的发展

10.2立体视觉原理

10.2.1单眼的视觉的局限性

10.2.2双目视觉与深度暗示

10.3多视点裸眼3D显示技术

10.3.1深度提取算法

10.3.2DIBR算法

10.4三维电视技术

10.4.13DTV系统架构

10.4.23DTV立体显示技术

10.4.33DTV系统的3D数据表示

10.4.43DTV视频编码技术

习题十

参考文献