《chap4视频处理技术》由会员分享，可在线阅读，更多相关《chap4视频处理技术（85页珍藏版）》请在金锄头文库上搜索。
1、2019/4/23,1,引言,视频是运动的图像，既可提供高速信息的传送，也可显示瞬间的相互关系。 视频由相继拍摄并存储的图像组成。 与音频、动画一样，视频也是动态的。,2019/4/23,2,第四章 视频处理技术,4.1电视技术基础 4.2数字视频 4.3数字视频标准 4.4数字视频处理,2019/4/23,3,4.1电视技术基础,黑白电视直播方式录播方式 卫星广播、有线电视网、星网结合,2019/4/23,4,电视信号,由图像信号(视频信号,06MHZ)和伴音信号(音频信号,20HZ20KHZ)两大部分。 为避免干扰，将图像信号和伴音信号分别采用调幅和调频方式调制在射频载波上，形成射频载波信
2、号。 人的视觉暂留特性使画面看上去是连续的。我国电视每秒25帧，但还是会有闪烁。因此采用两次放送图像。,2019/4/23,5,扫描方式,传送电视图像时，将每幅图分解成很多像素，按照一行一行的方式顺序传送或接收称为扫描。 逐行扫描：沿着水平方向从左到右，从上到下以均匀速度依照顺序一行紧跟一行的扫描显示图像。 隔行扫描：分成两步扫描，先扫奇数行，再扫偶数行。,2019/4/23,6,隔行扫描,优点：降低闪烁，看上去眼睛舒服 主要用于广播电视系统中,2019/4/23,7,逐行扫描,优点：简单可靠，图像清晰，但是要求传输通道具有很宽的频带，主要用于计算机显示器,2019/4/23,8,扫描术语,扫
3、描行数(垂直分辨率)：电视图像中指水平行的数目。扫描行数越多，电视清晰度越高。我国电视为625行。 同步：接受端与发送端按照相同的步调(顺序)扫描像素时，才能重现完整而稳定的图像，称为收发两端同步。包括水平和垂直两个方向的扫描同步。,2019/4/23,9,扫描术语(续),光栅：电子束受到水平和垂直两个方向的综合控制而迅速扫描荧光屏时，即可出现由一行一行的亮线组成的矩形发光图案，称为光栅。 帧频：每秒钟传送的电视图像帧数。 场频：由于电视采用隔行扫描，即将一帧图像分成两次来传递，传一次即叫一场，场频是帧频的两倍。,2019/4/23,10,扫描术语(续),白平衡：用彩色电视机收看黑白电视节目时
4、将色彩饱和度减低为0时，要求不出现彩色，称为白平衡，否则白平衡失调。 一般电视信号的彩色采用一个亮度信号，两个色差信号来表示(YUV是一种选择)。 回忆：YUV颜色模型有什么优点？,2019/4/23,11,彩色的表达,不同的电视制式对两个色差信号的定义不同： NTSC: PAL:,2019/4/23,12,复合视频信号,将色差信号在亮度信号之上进行编码，作为单个信号与亮度信号拥有相同的带宽。 亮度信号与色差信号是穿插在一起的，在信号重放时很难回复出原来的色彩。 复合视频信号不包括伴音，一般与视频输入输出配套的还有音频输入、输出端口，以便同步传输伴音。 复合视频接口也称为AV接口。,2019/
5、4/23,13,复合视频接口,2019/4/23,14,分离电视信号,S-Video信号是一种两分量的视频信号，它把亮度和色度信号分成两路独立的模拟信号，这两路信号称为Y/C信号。 亮度和色度具有较宽的带宽，可以分开传输，减少相互干扰，水平分解率可达到420线。可以更好的重现色彩 S-Video使用4针连接器，通常称为S端子。,2019/4/23,15,S端子,2019/4/23,16,全电视信号,将视频的亮度信号、色度信号、同步信号和伴音信号复合在一起，称为全电视信号。 为了在空中传播，需要将它们调制成高频信号，也叫射频信号(RF)，每个信号占用一个频道。 电视接收机能够将接受到的高频信号还
6、原成视频信号和低频伴音信号，并能够在其荧光屏上重现图像，在扬声器上重现伴音。 射频信号的接口形式就是常见的天线接口或有线电视接口。,2019/4/23,17,电视制式,什么是制式？不同的制式区别在哪里？ 目前世界上现行的彩色电视制式有3种：NTSC、PAL、SECAM。 目前三种现行制式在不同国际或地区使用，各自有各自的特点。,2019/4/23,18,2019/4/23,19,电视信号数字化,ITU-R BT.601标准：规定了彩色电视图像转换成数字图像时使用的采样频率，RGB和YCbCr两个彩色空间之间的转换关系。 电视图像信号数字化首先从复合彩色电视图像中分离出彩色分量，然后数字化。 对
7、于彩色全电视信号，首先将模拟的全电视信号分离成YCbCr/YUV/YIQ/RGB彩色空间中的分量信号，然后用3个A/D转换器分别对它们数字化。,2019/4/23,20,电视信号数字化(续),一般非线性视频编辑卡都有模拟输入接口。只要将模拟信号从该接口输入便可以在视频编辑软件中数字化后存到计算机中。 TV-PC卡：接收电视信号在计算机上播出，也可以将电视节目数字化后录制在计算机中。 ITU-R BT.601用于对隔行扫描电视图像进行数字化，对NTSC和PAL制式彩色电视的采样频率和有效显示分辨率都做了规定。,2019/4/23,21,2019/4/23,22,数字视频,数字视频的内容是被计算机
8、捕捉并数字化了的摄像机或电影的胶片。通过把图形图像放在一起创建动画也可以获得数字视频。 视频采集：将摄像机和录像带上的内容转到电脑上的过程称为采集。视频采集卡接收模拟视频信号，然后将它转化为数字视频数据。,2019/4/23,23,视频数字化,视频采集流程,1394接口(FireWire/iLink)仅仅传送数字化信息，并非视频信号采集,2019/4/23,24,数字视频采样,对彩色电视图像进行采样时，有两种方法： 使用相同频率对亮度信号和色差信号进行采样 采用不同频率对亮度信号和色差信号进行采样 图像子采样：对色差信号使用的采样频率比对亮度信号使用的采样频率低。 主要的子采样方法有三种： 4
9、:1:1/4:2:2/4:4:4,2019/4/23,25,数字视频采样(续),4:1:1 在每4个连续的采样点上，取4个亮度Y的样本值，而色差分别取其第一点的样本值，共6个样本。 4:2:2 在每4个连续的采样点上，取4个亮度Y的样本值，而色差分别取其第一点和第三点的样本值，共8个样本。 4:4:4 在每个采样点上，亮度、色差各取一个样本。信息量大。,2019/4/23,26,2019/4/23,27,数字视频采样(续),视频数字化不仅要在空间上采样，而且要在时间上进行采样，即每隔一定的时间进行一次空间上(帧)的采样。PAL：25帧/秒；NTSC： 29.97帧/秒 在数字视频中，帧速率是可
10、以更改的。 时间码：用来识别和记录视频数据流中的每一帧，每一帧都有一个唯一的时间码地址。,2019/4/23,28,数字视频的文件格式,广义的视频文件包括：动画文件和影像文件。 动画文件指由相互关联的若干帧静止图像所组成的图像序列。 影像文件主要指那些包含了实时的音频、视频信息的多媒体文件，多媒体信息来源于视频输入设备。,2019/4/23,29,AVI视频文件格式,AVI是音频视频交错的英文缩写(audio video interleaved),由Microsoft公司开发的一种符合RIFF文件规范的数字音频与视频文件格式。 AVI并未限定压缩标准，因此用不同的压缩算法得到的avi文件，必须
11、使用相应的解压算法才能播放出来。,2019/4/23,30,AVI视频文件格式(续),AVI有两个版本：AVI1.0和AVI2.0。主要区别在于位数不同。 不同AVI版本所支持的文件大小不同。例如AVI1.0的文件大小被限制在2GB，只能存储9分钟的视频。AVI2.0使用64位来存储信息，这样在理论上的最大长度可达1.81010GB,足够存储150000年的DV视频。,2019/4/23,31,AVI文件结构,符合RIFF文件规范，RIFF文件具有如下文件头结构： RIFF文件使用四字节码FOURCC来表征数据类型。最开始的四个字节是“RIFF”，表示这是一个RIFF文件；紧接着用四个字节表示
12、文件大小，然后用四字节说明文件类型(例如avi、wave等),2019/4/23,32,AVI文件结构举例,以下数据取自一个实际的avi文件的文件头，试对此数据作一简单分析： 52 49 46 46 64 5E 10 00 41 56 49 20 4C 49 53 54 EC 7E 00 00 68 64 72 6C 61 76 69 68 38 00 00 00 说明： 开始的四个字节52 49 46 46为RIFF的ASCII码，接下来的四个字节64 5E 10 00 表示avi文件的大小。,2019/4/23,33,AVI文件的数据组织,RIFF文件的实际数据中，用列表、块的形式来组织数
13、据。列表可以嵌套子列表和块。 列表和块具有相似的结构，均为一个四字节的ID后跟表示该数据大小的值，该值占用四个字节的空间，再接下来是实际的数据。 例如4C 49 53 54为“LIST”，表示列表的开始， EC 7E 00 00 表示列表的大小，但不包括本身的8个字节。,2019/4/23,34,AVI文件的数据组织(续),整个AVI文件的结构为：一个RIFF头、两个列表(一个用于描述媒体流格式，一个用于保存媒体流数据)、一个可选的索引块。 第一个列表的名字为“hdr1”，用于描述AVI文件中各个流的格式信息。hdr1列表嵌套了一系列块和子列表。,2019/4/23,35,Windows Me
14、dia视频,Windows Media视频主要有两种不同的扩展名：asf，wmv。 asf为advanced streaming format的缩写。Asf定义为同步媒体的统一容器文件格式。 作为一种数据格式，asf包括音频、视频、图像以及控制命令脚本等多媒体信息。基于此，以网络数据包的形式传输、实现流式多媒体内容发布。,2019/4/23,36,asf文件格式的特点,体积小，因此适合网络传输，使用微软的WMP软件可以字节播放。 可以灵活的制作asf格式的文件。 asf格式的视频中可以带有命令代码，用户指定在到达视频或者音频的某个时间后触发某个时间或者操作。,2019/4/23,37,asf文
15、件格式的特点(续),可扩展的媒体类型。 部件下载。 可伸缩的媒体类型。 多语言。 目录信息。,2019/4/23,38,asf文件格式的逻辑结构,头对象：必需的，放在每个asf文件的开头部分。作用是在asf文件的开始部分提供一个比特序列，并且包含所有其它头对象信息。 数据对象：必需的，紧跟在头对象之后。数据对象包含所有多媒体数据，以asf数据单元的形式存储。,2019/4/23,39,2019/4/23,40,asf文件格式的逻辑结构(续),索引对象：可选的，一般推荐使用。包含一个嵌入asf文件的多媒体数据的基于时间的索引。每一进入表现的时间间隔是在制作时设置的,并且存储在索引对象中。 通常利
16、用一个时间间隔表来索引一系列的媒体流。,2019/4/23,41,wmv文件格式,包括使用WMA和WMV编码解码器压缩的音频、视频或者这两者的“高级系统格式”文件。 通过使用不同的扩展名，可以在计算机中安装多个播放器，并使得某些播放器与wmv扩展名关联以播放音频和视频源。,2019/4/23,42,RealMedia文件格式,包括RealAudio、RealVideo、RealFlash三类文件。 RealAudio用来传输接近CD音质的音频数据；RealVideo用来传输不间断的视频数据；RealFlash是RealNetworks和MacroMedia公司联合退出的高压缩比的动画格式。 RealMedia文件格式使得RealSystem可以通过网络传送高质量的多媒体内容。,2019/4/23,43,RealMedia文件格式(续),是标准的标志文件格式，它使用四字符编码来标识文件元素。 基本部件为块(chunk),是数据的逻辑单位，例如流的报头、或一个数据包。每可块包括如下内容： 指明块标识符的四字符编码； 块中限定数据大小的32位数值。 数据块部分；另
