多媒体技术应用4视频处理技术(陈永强).ppt

《多媒体技术应用4视频处理技术(陈永强).ppt》由会员分享，可在线阅读，更多相关《多媒体技术应用4视频处理技术(陈永强).ppt（55页珍藏版）》请在得力文库 - 分享文档赚钱的网站上搜索。

1、多媒体技术应用4视频处理技术(陈永强) Four short words sum up what has lifted most successful Four short words sum up what has lifted most successful individuals above the crowd: a little bit more. individuals above the crowd: a little bit more. -author -author -date-date第四章第四章 视频处理技术视频处理技术n4 4.1.1视频概述视频概述 4 4.1.1.1.

2、1视频的视觉原理视频的视觉原理 4 4.1.2.1.2模拟视频模拟视频 4 4.1.1.3 3数字视频数字视频n4 4.2 .2 常用视频压缩标准常用视频压缩标准 4 4.2.1.2.1视频压缩原理视频压缩原理 4 4.2.2MPEG .2.2MPEG 4 4.2.3H.26X.2.3H.26Xn4 4.3.3常用视频处理软件常用视频处理软件 4 4.3.1.3.1 Windows Movie MakerWindows Movie Maker 4 4.3.2 .3.2 Adobe PremiereAdobe Premiere第四章第四章 视频处理技术视频处理技术n4.1视频概述视频概述 4.1

3、.1视频的视觉原理视频的视觉原理 4.1.2模拟视频模拟视频 4.1.3数字视频数字视频视觉是人类感知外部世界最重要的途径之一，人类视觉是人类感知外部世界最重要的途径之一，人类接受的所有信息中大约有接受的所有信息中大约有70%70%来自视觉。来自视觉。视觉接受的信息可分为两大类：视觉接受的信息可分为两大类：静止静止的和的和运动运动的。的。相对静止的图形图像，视频所含的信息量更丰富相对静止的图形图像，视频所含的信息量更丰富、更直观、更生动。、更直观、更生动。在多媒体技术中，视频信息的获取和处理无疑占有在多媒体技术中，视频信息的获取和处理无疑占有举足轻重的地位，视频处理技术在目前和将来都举足轻重的

4、地位，视频处理技术在目前和将来都是多媒体应用的一个核心技术。是多媒体应用的一个核心技术。4.1.1视频的视觉原理视频的视觉原理视频与图像是两个既有联系又有区别的概念：视频与图像是两个既有联系又有区别的概念：静止的图片称为静止的图片称为图像图像，运动的图像称为，运动的图像称为视频视频。二者的信源方式不同，图像的输入主要有扫描仪、数二者的信源方式不同，图像的输入主要有扫描仪、数码相机等设备，而视频的输入只能是电视接收机、码相机等设备，而视频的输入只能是电视接收机、摄像机、录像机等可以输入连续图像信号的设备。摄像机、录像机等可以输入连续图像信号的设备。 4.1.1视频的视觉原理视频的视觉原理视频视频

5、就其本质而言，就是其内容随时间变化的一组就其本质而言，就是其内容随时间变化的一组动态图像（每秒动态图像（每秒2525或或3030帧），所以视频又被称为帧），所以视频又被称为运动图像运动图像或或活动图像活动图像。视频信号具有内容随时间而变化和有与画面动作同视频信号具有内容随时间而变化和有与画面动作同步的声音（伴音）两大步的声音（伴音）两大本质特征本质特征。所谓所谓视觉暂留视觉暂留，是指人体的视觉器官在看到的物象，是指人体的视觉器官在看到的物象消失后，仍可暂时保留视觉的印象。消失后，仍可暂时保留视觉的印象。视觉印象在人的眼中大约可保持视觉印象在人的眼中大约可保持0.1s0.1s。如果两个视。如果两

6、个视觉印象之间的时间间隔不超过觉印象之间的时间间隔不超过0.1s0.1s，那么前一个视，那么前一个视觉印象尚未消失，而后一个视觉印象已经产生，觉印象尚未消失，而后一个视觉印象已经产生，并与前一个视觉印象融合在一起，就形成视觉暂并与前一个视觉印象融合在一起，就形成视觉暂留现象。留现象。 动画和电影利用的正是人眼的这一视觉暂留特性。动画和电影利用的正是人眼的这一视觉暂留特性。 4.1.2模拟视频模拟视频电视系统的发展前景是电视系统的发展前景是数字彩色电视数字彩色电视，数字视频的，数字视频的基础是模拟视频，而彩色电视又是在黑白电视的基础是模拟视频，而彩色电视又是在黑白电视的基础上发展起来的。基础上发

7、展起来的。4.1.2模拟视频模拟视频1. 1.电视的基本原理电视的基本原理2.2.电视制式电视制式4.1.2模拟视频模拟视频1. 1.电视的基本原理电视的基本原理电视的基本工作原理为顺序扫描和传输图像信号，然电视的基本工作原理为顺序扫描和传输图像信号，然后在接收端同步再现。主要有后在接收端同步再现。主要有逐行扫描逐行扫描和和隔行扫描隔行扫描两种扫描方式。两种扫描方式。逐行扫描逐行扫描有图像垂直清晰度高，空间处理效果好，有有图像垂直清晰度高，空间处理效果好，有利于电视转换和制式转换，以及改善视频压缩效率利于电视转换和制式转换，以及改善视频压缩效率等优点。等优点。相对隔行扫描而言，逐行扫描主要有码

8、率高，行扫描相对隔行扫描而言，逐行扫描主要有码率高，行扫描频率高和硬件复杂度增大等缺点。频率高和硬件复杂度增大等缺点。4.1.2模拟视频模拟视频1. 1.电视的基本原理电视的基本原理电视系统大都采用电视系统大都采用隔行扫描隔行扫描，因为隔行扫描能节省因为隔行扫描能节省频带，且硬件实现简单。频带，且硬件实现简单。隔行扫描的行集合为场，一帧由两个场组成。一帧隔行扫描的行集合为场，一帧由两个场组成。一帧电视信号称为一个全电视信号，由奇数场行信号电视信号称为一个全电视信号，由奇数场行信号、偶数场行信号及同步信号顺序构成，见图、偶数场行信号及同步信号顺序构成，见图4-2。 4.1.2模拟视频模拟视频1.

9、 1.电视的基本原理电视的基本原理图4-2 隔行扫描一帧信号的合成过程 4.1.2模拟视频模拟视频2.2.电视制式电视制式电视制式电视制式就是用来实现电视图像信号和伴音信号或其他信号就是用来实现电视图像信号和伴音信号或其他信号传输的方法，电视图像的显示格式，以及这种方法和电视传输的方法，电视图像的显示格式，以及这种方法和电视图像显示格式所采用的技术标准。图像显示格式所采用的技术标准。对于对于模拟电视模拟电视，有黑白电视制式、彩色电视制式及伴音制式，有黑白电视制式、彩色电视制式及伴音制式等；等；对于对于数字电视数字电视，有图像信号、音频信号压缩编码格式（信源，有图像信号、音频信号压缩编码格式（信

10、源编码）、编码）、TSTS流（流（Transport StreamTransport Stream）编码格式（信道编码）编码格式（信道编码）、数字信号调制格式及图像显示格式等制式。）、数字信号调制格式及图像显示格式等制式。 4.1.2模拟视频模拟视频2.2.电视制式电视制式为了实现黑白和彩色信号的兼容，色度编码对副载为了实现黑白和彩色信号的兼容，色度编码对副载波的调制有三种不同方法，形成了三种彩色电视波的调制有三种不同方法，形成了三种彩色电视制式：制式：NTSCNTSC制式制式、PALPAL制式制式和和SECAMSECAM制式。制式。4.1.2模拟视频模拟视频2.2.电视制式电视制式1 1）N

11、TSCNTSC制式制式即正交平衡调幅制式，即正交平衡调幅制式，19531953年由美国全国电视标准委员会（年由美国全国电视标准委员会（National Television System CommitteeNational Television System Committee）制定，分为）制定，分为NTST-MNTST-M、NTSC-NNTSC-N等，主要使用国家包括美国、加拿大等，主要使用国家包括美国、加拿大、日本、韩国、菲律宾等。、日本、韩国、菲律宾等。4.1.2模拟视频模拟视频2.2.电视制式电视制式2 2）PALPAL制式制式即正交平衡调幅逐行倒相制式。即正交平衡调幅逐行倒相制式。1

12、9671967年由西德创立，主要使年由西德创立，主要使用国家包括中国、德国、英国、意大利、荷兰等。分为用国家包括中国、德国、英国、意大利、荷兰等。分为PAL-BPAL-B、PAL-IPAL-I、PAL-MPAL-M、PAL-NPAL-N和和PAL-DPAL-D等，中国的电视等，中国的电视播放制式为播放制式为PAL-DPAL-D。4.1.2模拟视频模拟视频2.2.电视制式电视制式3 3）SECAMSECAM制式制式即顺序传送与存储彩色电视系统。即顺序传送与存储彩色电视系统。19661966年由法国研制成功，年由法国研制成功，分为分为SECAM-D/KSECAM-D/K等。主要使用国家包括俄罗斯、

13、前苏联等。主要使用国家包括俄罗斯、前苏联和东欧国家及部分非洲国家。和东欧国家及部分非洲国家。4.1.3数字视频数字视频1. 1.数字视频的特点数字视频的特点2.2.数字视频的发展史数字视频的发展史3.3.数字视频的常用格式数字视频的常用格式4.1.3数字视频数字视频1. 1.数字视频的特点数字视频的特点数字视频是模拟视频数字化的结果。数字视频是模拟视频数字化的结果。 相对模拟视频，数字视频有如下特点相对模拟视频，数字视频有如下特点 ：适合网络应用适合网络应用再现性好再现性好便于编辑处理便于编辑处理4.1.3数字视频数字视频2.2.数字视频的发展史数字视频的发展史自自2020世纪世纪4040年代

14、计算机诞生以来，从计算机所能处理的信息年代计算机诞生以来，从计算机所能处理的信息类型这个角度来看，计算机大约经历了以下三个发展阶段类型这个角度来看，计算机大约经历了以下三个发展阶段。 1 1）数值计算阶段）数值计算阶段 2 2）数据处理阶段）数据处理阶段 3 3）多媒体阶段）多媒体阶段 4.1.3数字视频数字视频2.2.数字视频的发展史数字视频的发展史初级阶段初级阶段，其主要特点就是在台式计算机上增加简，其主要特点就是在台式计算机上增加简单的视频功能。单的视频功能。主流阶段主流阶段，数字视频在计算机中得到广泛应用，成，数字视频在计算机中得到广泛应用，成为主流。为主流。高级阶段高级阶段，普通个人

15、计算机进入了成熟的多媒体计，普通个人计算机进入了成熟的多媒体计算机时代。算机时代。4.1.3数字视频数字视频3.3.数字视频的常用格式数字视频的常用格式视频格式可以分为适合本地播放的视频格式可以分为适合本地播放的本地影像视频本地影像视频和适合在网和适合在网络中播放的络中播放的网络流媒体影像视频网络流媒体影像视频两大类。两大类。网络流媒体影像视频的广泛传播性使之正被广泛应用于视频网络流媒体影像视频的广泛传播性使之正被广泛应用于视频点播、网络演示、远程教育、网络视频广告等因特网信息点播、网络演示、远程教育、网络视频广告等因特网信息服务领域。服务领域。4.1.3数字视频数字视频3.3.数字视频的常用

16、格式数字视频的常用格式英文全称为英文全称为Audio Video InterleavedAudio Video Interleaved，即音频，即音频/ /视频交视频交错格式。顾名思义，是将语音和影像同步组合在一起的文错格式。顾名思义，是将语音和影像同步组合在一起的文件格式。件格式。格式是格式是RealNetworksRealNetworks公司开发的一种公司开发的一种新型流式视频文件格式。新型流式视频文件格式。格式是一种由格式是一种由RMRM视频格式升级延伸出的新视频格视频格式升级延伸出的新视频格式，它的先进之处在于式，它的先进之处在于RMVBRMVB视频格式打破了原先视频格式打破了原先RM

17、RM格格式那种平均压缩采样的方式。式那种平均压缩采样的方式。4.1.3数字视频数字视频3.3.数字视频的常用格式数字视频的常用格式即即QuickTimeQuickTime影片格式，它是影片格式，它是AppleApple公司开发的一种公司开发的一种音频、视频文件格式，用于存储常用数字媒体类型。音频、视频文件格式，用于存储常用数字媒体类型。是微软公司是微软公司Windows MediaWindows Media的核心。这是一种包含音的核心。这是一种包含音频、视频、图像以及控制命令脚本的数据格式。频、视频、图像以及控制命令脚本的数据格式。的英文全称为的英文全称为Windows Media Video

18、Windows Media Video，也是微软推，也是微软推出的一种采用独立编码方式，并且可以直接在网上实时观出的一种采用独立编码方式，并且可以直接在网上实时观看视频节目的文件压缩格式。看视频节目的文件压缩格式。第四章第四章 视频处理技术视频处理技术n4.2 常用视频压缩标准常用视频压缩标准 4.2.1视频压缩原理视频压缩原理 4.2.2MPEG 4.2.3H.26X视频压缩标准有视频压缩标准有H.26XH.26X和和MPEGMPEG。比较而言，比较而言，H.26XH.26X仅仅是视频编码的标准，而仅仅是视频编码的标准，而MPEGMPEG既包括视频编码标准，也包括音频编码标既包括视频编码标准

19、，也包括音频编码标准和视音同步标准。准和视音同步标准。4.2.1视频压缩原理视频压缩原理视频压缩的目标是在尽可能保证视觉效果的前提下视频压缩的目标是在尽可能保证视觉效果的前提下减少视频数据率。减少视频数据率。 1. 1.基本概念基本概念2.2.压缩策略压缩策略4.2.1视频压缩原理视频压缩原理1. 1.基本概念基本概念（1 1）有损和无损压缩）有损和无损压缩 无损压缩无损压缩也即压缩前和解压缩后的数据完全一致。多数的也即压缩前和解压缩后的数据完全一致。多数的无损压缩都采用无损压缩都采用RLERLE行程编码算法。行程编码算法。有损压缩有损压缩意味着解压缩后的数据与压缩前的数据不一致。意味着解压缩

20、后的数据与压缩前的数据不一致。在压缩的过程中要丢失一些人眼和人耳所不敏感的图像或音在压缩的过程中要丢失一些人眼和人耳所不敏感的图像或音频信息，而且丢失的信息不可恢复。频信息，而且丢失的信息不可恢复。 （2 2）帧内和帧间压缩）帧内和帧间压缩 帧内（帧内（IntraframeIntraframe）压缩）压缩一般采用有损压缩算法，帧内压缩一一般采用有损压缩算法，帧内压缩一般达不到很高的压缩。般达不到很高的压缩。帧间（帧间（InterframeInterframe）压缩）压缩通过比较时间轴上不同帧之间的数据通过比较时间轴上不同帧之间的数据进行压缩。帧间压缩一般是无损的。进行压缩。帧间压缩一般是无损的

21、。 4.2.1视频压缩原理视频压缩原理1. 1.基本概念基本概念（3 3）对称和不对称编码）对称和不对称编码 对称性（对称性（symmetricsymmetric）是压缩编码的一个关键特征。对称意是压缩编码的一个关键特征。对称意味着压缩和解压缩占用相同的计算处理能力和时间，对称算味着压缩和解压缩占用相同的计算处理能力和时间，对称算法适合于实时压缩和传送视频。法适合于实时压缩和传送视频。不对称（不对称（asymmetricasymmetric）编码）编码，不对称或非对称意味着压缩，不对称或非对称意味着压缩时需要花费大量的处理能力和时间，而解压缩时则能较好地时需要花费大量的处理能力和时间，而解压缩

22、时则能较好地实时回放，也即以不同的速度进行压缩和解压缩。实时回放，也即以不同的速度进行压缩和解压缩。 （4 4）位速率）位速率 位速率位速率是指在一个数据流中每秒钟能通过的信息量。是指在一个数据流中每秒钟能通过的信息量。 4.2.1视频压缩原理视频压缩原理2.2.压缩策略压缩策略（1 1）去掉相关性）去掉相关性 视频图像数据有很强的相关性，也就是说有大量的冗余信视频图像数据有很强的相关性，也就是说有大量的冗余信息。其中冗余信息可分为息。其中冗余信息可分为空域冗余信息空域冗余信息和和时域冗余信息时域冗余信息。 使用帧间编码技术可去掉时域冗余信息，包括以下三部分：使用帧间编码技术可去掉时域冗余信息

23、，包括以下三部分： 运动补偿运动补偿 运动表示运动表示 运动估计运动估计使用帧间编码技术和熵编码技术可以去掉空域冗余信息，使用帧间编码技术和熵编码技术可以去掉空域冗余信息，主要的编码方法有：主要的编码方法有： 变换编码变换编码 量化编码量化编码 熵编码熵编码4.2.1视频压缩原理视频压缩原理2.2.压缩策略压缩策略（2 2）心理声学音频压缩）心理声学音频压缩 心理声学心理声学指指“人脑解释声音的方式人脑解释声音的方式”。压缩音频的所有。压缩音频的所有形式都是用功能强大的算法将听不到的音频信息去掉。形式都是用功能强大的算法将听不到的音频信息去掉。 （3 3）心理视觉视频压缩）心理视觉视频压缩 心

24、理视觉视频压缩心理视觉视频压缩与和其对等的音频压缩相似。心理视觉与和其对等的音频压缩相似。心理视觉模型去掉的不是听不到的音频数据，而是去掉眼睛不需要模型去掉的不是听不到的音频数据，而是去掉眼睛不需要的视频数据。的视频数据。 4.2.2MPEGMPEGMPEG的全称应该是的全称应该是Moving Pictures Experts GroupMoving Pictures Experts Group（即动态图像专家组），由（即动态图像专家组），由ISOISO与与IECIEC于于19881988年联年联合成立，致力于运动图像（合成立，致力于运动图像（MPEGMPEG视频）及其伴视频）及其伴音编码（音

25、编码（MPEGMPEG音频）标准化工作。这个专家组音频）标准化工作。这个专家组开发的标准称为开发的标准称为MPEGMPEG标准，到目前为止，标准，到目前为止，MPEGMPEG的主要标准有五个：的主要标准有五个：4.2.2MPEG1 1. .MPEG-1MPEG-1（ 数字电视标准）数字电视标准）2 2. .MPEG-2MPEG-2（数字电视标准）（数字电视标准）3 3. .MPEG-4MPEG-4（多媒体应用标准）（多媒体应用标准）4 4. .MPEG-7MPEG-7（多媒体内容描述接口标准）（多媒体内容描述接口标准）5 5. .MPEG-21MPEG-21（多媒体框架标准）（多媒体框架标准）

26、4.2.2MPEG1 1. .MPEG-1MPEG-1（ 数字电视标准）数字电视标准）MPEG-1MPEG-1标准（标准（ISO/IEC11172ISO/IEC11172）制定于）制定于19921992年，是针对年，是针对1.5Mbps1.5Mbps以下数据传输率的数字存储媒体运动图像及其伴以下数据传输率的数字存储媒体运动图像及其伴音编码设计的国际标准。音编码设计的国际标准。4.2.2MPEG1 1. .MPEG-1MPEG-1（ 数字电视标准）数字电视标准）MPEG-1MPEG-1标准体系共分为以下标准体系共分为以下5 5个部分个部分: :系统（系统（SystemSystem）：）：规定视频

27、数据、声音数据及其他相关数据规定视频数据、声音数据及其他相关数据的同步；的同步；视频（视频（VideoVideo）：）：规定视频数据的编码和解码；规定视频数据的编码和解码；音频（音频（AudioAudio）：）：规定声音数据的编码和解码；规定声音数据的编码和解码；一致性测试（一致性测试（Conformance TestingConformance Testing）：）：详细说明如何测试比详细说明如何测试比特数据流（特数据流（BitstreamsBitstreams）和解码器是否满足）和解码器是否满足MPEG-1MPEG-1前三前三个部分中所规定的要求，编码器制造商和客户均可以使个部分中所规定的

28、要求，编码器制造商和客户均可以使用这些方法来测试编码器产生的码流是否正确；用这些方法来测试编码器产生的码流是否正确； 软件仿真（软件仿真（Software SimulationSoftware Simulation）：）：从技术角度来说，这部从技术角度来说，这部分不能算是标准，只是一种技术报告，描述了分不能算是标准，只是一种技术报告，描述了MPEG-1MPEG-1标准的前三个部分的软件实现，但源代码是不公开的。标准的前三个部分的软件实现，但源代码是不公开的。 4.2.2MPEG2 2. .MPEG-2MPEG-2（数字电视标准）（数字电视标准）MPEG-2MPEG-2标准（标准（ISO/IEC

29、13818ISO/IEC13818）制定于）制定于19941994年，是针对年，是针对3 310Mbps10Mbps的数据传输率制定的运动图像及其伴音编码的国的数据传输率制定的运动图像及其伴音编码的国际标准。际标准。MPEG-2MPEG-2的编码图像被分为三类，分别称为的编码图像被分为三类，分别称为I I帧帧，P P帧帧和和B B帧帧。为更好地表示编码数据，为更好地表示编码数据，MPEG-2MPEG-2用句法规定了一个层次性用句法规定了一个层次性结构。它分为结构。它分为六层六层，自上到下分别是：图像序列层、图像，自上到下分别是：图像序列层、图像组、图像、宏块条、宏块、块。组、图像、宏块条、宏块

30、、块。 4.2.2MPEG2 2. .MPEG-2MPEG-2（数字电视标准）（数字电视标准）MPEG-2MPEG-2标准体系共分为以下标准体系共分为以下9 9个部分：个部分：1 1）系统（）系统（SystemSystem）2 2）视频（）视频（VideoVideo）3 3）音频（）音频（AudioAudio）4 4）一致性测试（）一致性测试（Conformance TestingConformance Testing）5 5）软件仿真（）软件仿真（Software SimulationSoftware Simulation）6 6）数字存储媒体命令和控制扩展协议（）数字存储媒体命令和控制扩展

31、协议（Digital Storage Media Digital Storage Media Command and ControlCommand and Control，DSM-CCDSM-CC）7 7）高级音频编码（）高级音频编码（Advanced Audio CodingAdvanced Audio Coding，AACAAC）8 8）原计划用于采样精度为）原计划用于采样精度为1010位的音频编码，但由于工业界对此兴趣不大位的音频编码，但由于工业界对此兴趣不大，现已停止；，现已停止； 9 9）规定了传送码流的实时接口。）规定了传送码流的实时接口。 4.2.2MPEG3 3. .MPEG-

32、4MPEG-4（多媒体应用标准）（多媒体应用标准）MPEG-4MPEG-4于于19981998年年11 11月公布，是针对一定比特率下的视频、月公布，是针对一定比特率下的视频、音频编码，更加注重多媒体系统的交互性和灵活性。为此，音频编码，更加注重多媒体系统的交互性和灵活性。为此，MPEG-4MPEG-4引入了引入了AVAV对象（对象（Audio-Video ObjectsAudio-Video Objects），使得更），使得更多的交互操作成为可能。多的交互操作成为可能。4.2.2MPEG3 3. .MPEG-4MPEG-4（多媒体应用标准）（多媒体应用标准）MPEG-4MPEG-4对对AVA

33、V对象的操作主要有以下五种：对象的操作主要有以下五种：1 1）采用）采用AVAV对象来表示听觉、视觉或者视听组合内容；对象来表示听觉、视觉或者视听组合内容；2 2）组合已有的）组合已有的AVAV对象来生成复合的对象来生成复合的AVAV对象，并由此生成对象，并由此生成 AVAV场景；场景； 3 3）对）对AVAV对象的数据灵活地多路合成与同步，以便选择合适对象的数据灵活地多路合成与同步，以便选择合适 的网络来传输这些的网络来传输这些AVAV对象数据；对象数据； 4 4）允许接收端的用户在）允许接收端的用户在AVAV场景中对场景中对AVAV对象进行交互操作等；对象进行交互操作等； 5 5）MPEG

34、-4MPEG-4支持支持AVAV对象知识产权与保护。对象知识产权与保护。 4.2.2MPEG3 3. .MPEG-4MPEG-4（多媒体应用标准）（多媒体应用标准）MPEG-4MPEG-4标准则由以下标准则由以下6 6个主要部分构成：个主要部分构成：1 1）系统（）系统（SystemSystem）2 2）视频（）视频（VideoVideo）3 3）音频（）音频（AudioAudio）4 4）一致性测试（）一致性测试（Conformance TestingConformance Testing）5 5）参考软件（）参考软件（Reference SoftwareReference Software

35、）6 6）多媒体传送整体框架（）多媒体传送整体框架（Deliveries Multimedia Integration Deliveries Multimedia Integration FrameworkFramework，DMIFDMIF）4.2.2MPEG4 4. .MPEG-7MPEG-7（多媒体内容描述接口标准）（多媒体内容描述接口标准）MPEG-7MPEG-7的工作于的工作于19961996年启动，名称叫做年启动，名称叫做多媒体内容描述接多媒体内容描述接口口（Multimedia Content Description InterfaceMultimedia Content Des

36、cription Interface，MCDIMCDI），），目的是制定一套描述符标准，用来描述各种类型的多媒体目的是制定一套描述符标准，用来描述各种类型的多媒体信息及它们之间的关系，以便更快更有效地检索信息。信息及它们之间的关系，以便更快更有效地检索信息。4.2.2MPEG4 4. .MPEG-7MPEG-7（多媒体内容描述接口标准）（多媒体内容描述接口标准）MPEG-7MPEG-7的处理链：的处理链：特征抽取特征抽取内容描述内容描述检索工具检索工具MPEG-7的处理范围图4-3 MPEG-7的范围4.2.2MPEG4 4. .MPEG-7MPEG-7（多媒体内容描述接口标准）（多媒体内容描

37、述接口标准）MPEG-7MPEG-7的目标如下：的目标如下： 支持多种音频和视觉的描述。支持多种音频和视觉的描述。 根据信息的抽象层次，提供一种描述多媒体材料的方法以便根据信息的抽象层次，提供一种描述多媒体材料的方法以便表示不同层次上的用户对信息的需求。表示不同层次上的用户对信息的需求。 支持数据管理的灵活性、数据资源的全球化和互操作性。支持数据管理的灵活性、数据资源的全球化和互操作性。 4.2.2MPEG4 4. .MPEG-7MPEG-7（多媒体内容描述接口标准）（多媒体内容描述接口标准）MPEG-7MPEG-7由以下几部分组成：由以下几部分组成：1 1）系统（）系统（SystemSyst

38、em）2 2）描述定义语言（）描述定义语言（Description Definition LanguageDescription Definition Language，DDLDDL）3 3）视频（）视频（VideoVideo）4 4）音频（）音频（AudioAudio）5 5）多媒体描述方案（）多媒体描述方案（Multimedia Description SchemesMultimedia Description Schemes，MMDSMMDS）6 6）参考软件（）参考软件（Reference SoftwareReference Software）7 7）一致性测试（）一致性测试（Conf

39、ormance TestingConformance Testing）4.2.2MPEG5 5. .MPEG-21MPEG-21（多媒体框架标准）（多媒体框架标准）制定制定MPEG-21MPEG-21标准的目的是：标准的目的是：1 1）将不同的协议、标准、技术等有机地融合在一起。）将不同的协议、标准、技术等有机地融合在一起。2 2）制定新的标准。）制定新的标准。3 3）将这些不同的标准集成在一起。）将这些不同的标准集成在一起。4.2.2MPEG5 5. .MPEG-21MPEG-21（多媒体框架标准）（多媒体框架标准）MPEG-21MPEG-21的基本框架要素包括：的基本框架要素包括：数字项目

40、说明数字项目说明多媒体内容表示多媒体内容表示数字项目的识别和描述数字项目的识别和描述内容管理与使用内容管理与使用知识产权管理和保护知识产权管理和保护终端和网络终端和网络事件报告事件报告4.2.3H.26XH.26XH.26X是是ITU-TITU-T研究和制定的一系列视频编码的国际研究和制定的一系列视频编码的国际标准。其中应用最为广泛的是标准。其中应用最为广泛的是H.261H.261、H.262H.262、H.263H.263和和H.264H.264。4.2.3H.26X1 1. .H.261H.2612 2. .H.262H.2623 3. .H.263H.2634 4. .H.264H.26

41、44.2.3H.26X1 1. .H.261H.261H.261H.261标准也称标准也称p p6464，是视频编码的先驱者。，是视频编码的先驱者。H.261H.261标准的出发点是为了实现在综合业务数字网标准的出发点是为了实现在综合业务数字网（Integrated Services Digital NetworkIntegrated Services Digital Network，ISDNISDN）上进行电）上进行电视电话和电视会议，主要针对实时编码和解码而设计的。视电话和电视会议，主要针对实时编码和解码而设计的。4.2.3H.26X1 1. .H.261H.261与与H.261H.261

42、有关的国际标准：有关的国际标准：H.320H.320：窄带可视电话系统和终端设备：窄带可视电话系统和终端设备 H.221H.221：视听电信业务中：视听电信业务中64641920Kb/s1920Kb/s信道的帧结构信道的帧结构 H.230H.230：视听系统的帧同步控制和指示信号：视听系统的帧同步控制和指示信号 H.242H.242：不超过：不超过2Mb/s2Mb/s数字信道的视听终端的通信标准数字信道的视听终端的通信标准 4.2.3H.26X2 2. .H.262H.262ITU-TITU-T于于19901990年成立了年成立了“ATM“ATM视频编码专家组视频编码专家组”，负责制定，负责制

43、定适用于适用于B-ISDNB-ISDN（Broadband Integrated Service Digital Broadband Integrated Service Digital NetworkNetwork，宽带综合业务数字网）信道，宽带综合业务数字网）信道ATMATM编码传输标准编码传输标准。该专家组于。该专家组于19931993年年11 11月与月与ISOISO的的MPEGMPEG专家组联合提出了专家组联合提出了H.262H.262建设草案，这一草案终于发展成为建设草案，这一草案终于发展成为H.262H.262标准，它标准，它也就是也就是MPEG-2MPEG-2的视频部分。的视频

44、部分。H.262H.262标准是用于数字存储介质和数字视频通信中图像信息标准是用于数字存储介质和数字视频通信中图像信息的编码表示和解码规定。的编码表示和解码规定。4.2.3H.26X3 3. .H.263H.263H.263H.263是在是在19951995年提出的更低比特率的视频编码方案。它一年提出的更低比特率的视频编码方案。它一方面以方面以H.261H.261为基础，以混合编码为核心，其基本原理和为基础，以混合编码为核心，其基本原理和H.261H.261十分相似，原始数据和码流组织也相似；另一方面，十分相似，原始数据和码流组织也相似；另一方面，H.263H.263也吸收了也吸收了MPEGM

45、PEG等其它一些国际标准中有效、合理等其它一些国际标准中有效、合理的部分。的部分。 4.2.3H.26X3 3. .H.263H.263与与H.263H.263有关的国际标准：有关的国际标准：H.324H.324：甚低码率多媒体通信终端设备：甚低码率多媒体通信终端设备 H.223H.223：甚低码率多媒体通信复合协议：甚低码率多媒体通信复合协议 H.245H.245：多媒体通信控制协议：多媒体通信控制协议 G.723.1.1G.723.1.1：传输速率为：传输速率为5.3Kb/s5.3Kb/s和和6.3Kb/s6.3Kb/s的语音编码器的语音编码器 4.2.3H.26X4 4. .H.264H

46、.264在在ITU-TITU-T增强型多媒体通信标准增强型多媒体通信标准H.26LH.26L基础上，在基础上，在20032003年年5 5月月份推出了份推出了H.264H.264压缩标准推出的能够为压缩标准推出的能够为ITU-TITU-T与与ISO/IECISO/IEC共共同使用的单一的下一代视频编码标准，并且在技术上同同使用的单一的下一代视频编码标准，并且在技术上同MPEGMPEG标准形成体系。标准形成体系。在实际使用中，它比在实际使用中，它比MPEG-4MPEG-4压缩率更高，更加适合在有限压缩率更高，更加适合在有限带宽的环境下传输视频数据，而且画面质量与带宽的环境下传输视频数据，而且画面

47、质量与MPEG-4MPEG-4基基本相同。本相同。4.2.3H.26X4 4. .H.264H.264其标准可分为三档：其标准可分为三档：1 1）基本档次：其简单版本，应用面广。）基本档次：其简单版本，应用面广。 2 2）主要档次：采用了多项提高图像质量和增加压缩比的技）主要档次：采用了多项提高图像质量和增加压缩比的技术措施，可用于术措施，可用于SDTVSDTV（Standard Definition TelevisionStandard Definition Television，标准清晰度电视）、标准清晰度电视）、HDTVHDTV（High Definition TelevisionHigh Definition Television，高清晰度电视）和高清晰度电视）和DVDDVD（Digital Video DiskDigital Video Disk，数字视频光，数字视频光盘）等。盘）等。 3 3）扩展档次：可用于各种网络的视频流传输。）扩展档次：可用于各种网络的视频流传输。