240 likes | 334 Views
第 7 章 多媒体视频信息处理. 7.1 视频基础知识 7.2 广播电视信号及其标准 7.3 数字电视 7.4 视频的数字化过程 7.5 数字视频处理系统 7.6 视频文件的类型. 7.1 视频基础知识. 7.1.1 视频的定义 视频( video )就其本质而言,实际上就是其内容随时间变化的一组动态图像,所以视频又叫作运动图像或活动图像。 从物理上来讲,视频信号是从动态的三维景物投影到视频摄像机图像平面上的一个二维图像序列,一个视频帧中任何 — 点的彩色位记录了在所观察的景物中一个特定的二维点所发出或反射的光。
E N D
第7章 多媒体视频信息处理 • 7.1 视频基础知识 • 7.2 广播电视信号及其标准 • 7.3 数字电视 • 7.4 视频的数字化过程 • 7.5 数字视频处理系统 • 7.6 视频文件的类型
7.1 视频基础知识 • 7.1.1 视频的定义 • 视频(video)就其本质而言,实际上就是其内容随时间变化的一组动态图像,所以视频又叫作运动图像或活动图像。 • 从物理上来讲,视频信号是从动态的三维景物投影到视频摄像机图像平面上的一个二维图像序列,一个视频帧中任何—点的彩色位记录了在所观察的景物中一个特定的二维点所发出或反射的光。 • 从观察者的角度来讲,视频记录了从一个观测系统(人眼或摄像机)所观测的场景中的物体发射或反射的光的强度,一般地说,该强度在时间和空间上都有变化。 • 从数学角度描述,视频指随时间变化的图像,或称为时变图像。
如图7-1所示,视频由一幅幅连续的图像帧序列构成,沿时间轴若一帧图像保持一个时间段t,利用人眼的视觉暂留作用,可形成连续运动图像(即视频)的感觉。如图7-1所示,视频由一幅幅连续的图像帧序列构成,沿时间轴若一帧图像保持一个时间段t,利用人眼的视觉暂留作用,可形成连续运动图像(即视频)的感觉。 图7-1 视频由连续的图像帧序列构成
7.1.2 视频的分类 • 1. 模拟视频 • 模拟视频的特点: • 以模拟电信号的形式来记录 • 依靠模拟调幅的手段在空间传播 • 使用盒式磁带录像机将视频作为模拟信号存放在磁带上 • 2. 数字视频(Digital Video)
7.1.3 数字化视频的优点 • 1.适合于网络应用 • 2.再现性好 • 3.便于计算机编辑处理 • 7.1.4 视频信号与图像信号的差异 • 视频信号不同于图像信号,最重要的区别是视频信号有一个每秒数帧(从15帧/秒到60帧/秒之间)的帧速率指标,它提供了显示的信号中运动的影像。 • 第二个不同之处是帧的尺寸。 • 图像和视频之间的第三个不同之处在于,图像在压缩时主要考虑了帧内像素之间的相关性,而为视频设计压缩方法时利用了时域掩蔽,同时也利用了音频掩蔽的功能,并考虑了帧间画面的相关性。即在视频序列里更倾向于以一种可预测的模式运动。
7.2 广播电视信号及其标准 • 7.2.1 电视信号的产生、传输和接收的过程 图7-3 模拟彩色电视系统:视频产生、传输和接收的过程
7.2.2 广播电视信号制式 • 1.NTSC制 • 2.PAL制 • 3.SECAM
7.2.3 电视视频信号的扫描方式 奇数场 偶数场 一帧 图7-4 隔行扫描方式中一帧由两个场组成
7.2.4 YUV与RGB彩色模型 • 1.YUV模型 图7-5 PAL彩色电视制式中 采用YUV模型来表示彩色图像
2.显示器产生颜色的原理 • 3.YUV与RGB彩色空间变换 图7-6 CRT显示器采用RGB彩色模型
7.2.5 彩色电视的信号类型 • 1.高频或射频信号 • 2.复合视频信号 图7-7 复合视频线及接口
3.S-Video视频信号 图7-8 S-VIDEO视频线及接口
4.分量视频信号 b)分量视频信号接口 a)色差分量视频线 图7-9 分量视频信号线与接口
7.3 数字电视 • 7.3.1 数字电视的特点及提供的服务 • 数字电视与原有的模拟电视相比,有如下主要优点: • 1.电视画面质量得到大幅度提升 图7-10 数字电视(左图)和 模拟电视(右图)的画面质量比较
2.更多的节目 • 3.更好的视听效果 • 4.交互性 • 5.数字化融合提供新增的服务 • 除数字化的音视频节目外,数字电视系统还可以广播其他任意数据,如与节目内容有关的附带信息、本地气象与交通信息等。各种各样的数据业务将大幅度扩展电视的信息服务能力。在数字化融合的时代,将会出现新的灵活的功能多样化的消费产品平台,它将优质的声音、视像体验与交互式的信息服务集于一身,使得数字电视成为人们从事娱乐、信息和通信活动的平台。 • 7.3.2 数字电视标准
7.4 视频的数字化过程 • 7.4.1 视频信号的采样 • 1.对视频采样的基本要求 • ①要满足采样定理 • ②采样频率必须是行频的整数倍 • ③要满足两种扫描制式 • 2.数字视频的采样格式 • 根据电视信号的特征,亮度信号的带宽是色度信号带宽的两倍。因此其数字化时对信号的色差分量的采样率低于对亮度分量的采样率。如果用Y:U:V来表示YUV三分量的采样比例,则数字视频的采样格式分别有4:1:1、4:2:2和4:4:4三种。
3.采样格式 图7-13 4:2:2采样格式示意
7.4.2 量化 • 7.4.3 视频压缩与编码技术标准 • 视频编码(视频压缩)是把数字视频流序列用更少的数据位进行存放的方法。大多数视频编码方法寻找空间和时间上的冗余来达到压缩的效果。从信息论的角度讲,信息压缩就是从时间域、空间域两方面去除冗余信息,将可推知的确定信息去掉。在时间域中,连续几帧的视频通常有很强的相关性,特别是当时域采样率是非常高的时候尤其如此;在空间域中,通常像素采样点之间是相互关联的(相邻象素之间的值很相近)。事实上,视频编码技术正是基于这个理论,将视频分成帧内编码和帧间编码,前者用于去掉图像的空间冗余信息,后者用于去除图像的时间冗余信息。
7.5 数字视频处理系统 • 7.5.1 数字视频处理系统的组成 图7-14 数字视频处理系统的组成
7.5.2 视频采集卡的工作原理 图7-15 视频卡的工作原理图
7.6 视频文件的类型 图7-16 常用的视频文件格式类型
7.6.1 本地视频格式 • 1.AVI格式 • AVI(Audio Video Interleave)是一种音频视像交插记录的数字视频文件格式。 • 2.DV-AVI格式 • DV的英文全称是Digital Video Format,是由索尼、松下、JVC等多家厂商联合提出的一种家用数字视频格式。目前非常流行的数码摄像机就是使用这种格式记录视频数据的。
3.QuickTime的MOV格式 • 自从国际标准化组织(ISO)选择QuickTime文件格式作为开发MPEG-4规范的统一数字媒体存储格式,MOV文件就以mpg或mp4为其扩展名,并且采用了MPEG4压缩算法。 • 4.MEPG格式 • 将MPEG(Motion Picture Experts Group)算法用于压缩全运动视频图像,就可以生成全屏幕活动视频标准文件。 • 5.DivX格式 • DivX是根据Microsoft mpeg4 v3修改而来的一种数字视频编码技术,是目前使用最广泛的一种MPEG-4的兼容技术。
7.6.2 基于网络传输的流媒体视频格式 • 1.RM(Real Media)格式 • 2. Quick Time格式(MOV) • 3.ASF(Advanced Streaming Forma)格式 • 4.WMV格式 • 5.RMVB格式