第4章多媒体计算机系统组成

上传人:新** 文档编号:584148862 上传时间:2024-08-30 格式:PPT 页数:176 大小:675.52KB
返回 下载 相关 举报
第4章多媒体计算机系统组成_第1页
第1页 / 共176页
第4章多媒体计算机系统组成_第2页
第2页 / 共176页
第4章多媒体计算机系统组成_第3页
第3页 / 共176页
第4章多媒体计算机系统组成_第4页
第4页 / 共176页
第4章多媒体计算机系统组成_第5页
第5页 / 共176页
点击查看更多>>
资源描述

《第4章多媒体计算机系统组成》由会员分享,可在线阅读,更多相关《第4章多媒体计算机系统组成(176页珍藏版)》请在金锄头文库上搜索。

1、第4章 多媒体计算机系统组成 n多媒体存储技术 n多媒体功能卡 n多媒体信息获取与显示设备 n多媒体个人计算机 nCD-I交互式多媒体系统 nDVI多媒体计算机系统 nVCD与DVD播放系统n多媒体工作站 4.1.1 多媒体信息存储的特点n多媒体信息存在和表现的形式n 正文 包括文字和数据n 向量图形 图元组成的图形n 位图图像n 数字化声音和高保真音响n 数字化视频n信息量大4.1多媒体存储技术4.1.2 光盘存储原理n光存储技术n光存储技术的产品化形式是由光盘驱动器和光盘片组成的光盘驱动系统。n驱动器读写头是用半导体激光器和光路系统组成的光头,记录介质采用磁光材料。 n光存储技术原理光存储

2、技术原理 改变一个存储单元的性质,使其性质的变化反映出被存储的数据; 识别这种性质的变化,就可以读出存储数据。n光存储单元的性质,例如反射率、反射光极化方向等均可以改变,它们对应于存储二进制数据0(不变)、1(改变),光电检测器能够通过检测出光强和光极性的变化来识别信息。n高能量激光束可以聚焦成约1微米的光斑,因此光存储技术比其他存储技术有更高的容量。 光盘系统的特点n与硬盘相比,具有可拆卸性; 容量相当; 驱动器较贵,但盘片便宜; 读写速度慢。n与磁带相比,具有容量大、随机存取性强的优点。n 激光头与介质无接触,不受环境影响而退磁,信息保存时间长,可达30年以上。 光盘系统技术指标n容量 光

3、盘盘片的容量n平均存取时间 在光盘上找到需要读写信息的位置所需时间n数据传输率 n接口标准及格式规范等 存储容量n指它所能读写的光盘盘片的容量。n光盘容量又分为格式化容量和用户容量,采用不同的格式和不同驱动器,光盘格式化后容量不同。n一般用户容量比格式化容量要少,因为光盘还需要存放有关控制、校验等信息。 平均存取时间n是在光盘上找到需要读写的信息的位置所需要的时间。n指从计算机向光盘驱动器发出命令,到光盘驱动器可以接受读写命令为止的时间。n一般取光头沿半径移动全程1/3长度所需要的时间为平均寻道时间,盘片旋转一周的一半时间为平均等待时间,两者加上读写光头稳定时间就是平均存取时间。 数据传输率有

4、多种定义方式:n一种是指从光盘驱动器送出的数据率,可以定义为单位时间内光盘的光道上传送的数据比特数,这与光盘转速、存储密度有关。n另一种定义是指控制器与主机间的传输率,它与接口规范、控制器内的缓冲器大小有关。光盘的分类光盘的分类 nCD-ROM只读光盘 nWORM一次写多次读光盘 nRewritable可重写光盘 CD-ROMn最常用的光盘系统,直径约12cm,因为它容量大,约650MB,价格便宜,市场上颇受用户的欢迎。nCD-ROM光盘是由母盘压模制成的,一旦复制成形,永久不变,用户只能读出信息。nCD-ROM采用激光调制方式记录信息,将信息以凹坑和凸区的形式记录在螺旋形光道上。 WORM一

5、次写多次读光盘一次写多次读光盘 nWORM光盘在使用前首先要进行格式化,形成格式化信息区和逻辑目录区,利用激光照射介质,使介质变异,利用激光不同的变化,使其产生一连串排列的“点”,从而完成写的过程。n引入文件分配表的概念,在光盘的根目录下面是用户定义的逻辑目录,逻辑目录对应文件管理区。n在逻辑目录建立同时,用户可以根据需要,对其中重要数据进行加密。n一旦写入就不能再更改。 Rewritable可重写光盘可重写光盘n可重写光盘或称可擦写光盘是最理想的光盘类型,也是最有应用前途的光盘类型。它像硬盘一样可读写,利用浮动磁光头在磁光盘上进行磁场调制,可进行高速重写磁光记录。 只读光盘读原理只读光盘读原

6、理 n只读光盘上的信息是沿着盘面螺旋形状的信息轨道以凹坑和凸区的形式记录的。n它既可以记录模拟信息(如Laser Vision系统),也可以记录数字信号(如CD-DA)。 坑深0.12m0.6m1.6m在螺旋形光道上以凹坑和凸区表示的信息001000100000100 图4.1 只读光盘工作原理在光盘上记录模拟信息在光盘上记录模拟信息n模拟信号先进行频率调制(FM),声音信号加在经过频率调制的视频信号上,所得到的综合信号经过双向限幅,再转换成光盘上长度不等的凹坑和凸区,边缘之间的长度反映了视频信号频率的高低和声音信号的频率和幅度。 在光盘上写在光盘上写/读数字信息读数字信息n光道上凹坑或凸区的

7、长度是0.3微米的整数倍。凹凸交界的正负跳变沿均代表数字“1”,两个边缘之间代表数字“0”,“0”的个数是边缘之间长度决定的。n通过光学探测仪器产生光电检测信号,从而读出“0”、“1”数据。n数字信号记录的优点是抗干扰能力强,由于盘片损坏或变脏而造成的读出错误也容易得到纠正。 EFM编码编码n为了提高读出数据可靠性,减少误读率,存储数据采用EFM(Eight to Fourteen Modulation)编码,即将1字节的8位编码为14位的光轨道位,并在每14位之间插入3位“合并位” 以确保“1”码间至少有2个“0”码,但最多有10个“0”码。可重写光盘的擦写原理可重写光盘的擦写原理n光盘记录

8、方式可分为两大类:n磁光式n相变式 磁光式擦写原理磁光式擦写原理n当前国际上较流行的是磁光式,该盘普遍采用玻璃盘基上再加四层膜结构组成,它是以稀土过渡金属非晶体垂直磁化膜作为记录介质光学膜和保护膜的多层夹心结构。两种磁光写操作方法两种磁光写操作方法n居里点记录(稀土铁合金膜介质)n补偿点记录(稀土钴合金膜介质) 磁光写的过程磁光写的过程n用激光照射光盘垂直膜面磁化方向上的磁化物质,并对其垂直磁化。n利用磁性物质居里点热磁效应,在某一方向饱和式磁化,用激光对需要存储信息“1”的单元区域加热,使其温度超过居里点,失去磁性。在盘的另一面上施加一个外磁场,使被照单元反向磁化,这样该单元磁化方向与其他未

9、照射单元方向相反,从而生产一个信息存储状态“1”,而其他未经照射单元相当于存储信息“0”。n信息擦去过程与写过程刚好相反,即恢复原来的磁化方向。 相变式擦写原理相变式擦写原理n利用记录介质的两个稳态之间的互逆相结构的变化来实现信息的记录和擦除。两种稳态是反射率高的晶态和反射率低的非晶态(玻璃态)。n写过程是把记录介质的信息点从晶态转变为非晶态。n擦过程是写过程的逆过程,即把激光束照射的信息点从非晶态恢复到晶态。1. 光盘发展历史光盘发展历史 n1972年9月5日Philips公司向国际新闻界展示了长时间播放电视节目的光盘系统,在光盘上记录的是模拟电视信号。n1978年,SONY生产的影碟机正式

10、投放市场,光盘的直径为30厘米,一片双面盘的播放时间可达2小时。n1979年,Philips公司发表了激光唱机(compact disk player)。 4.1.3 光盘标准光盘标准光盘的规范和标准光盘的规范和标准 nCD-DAnCD-ROMnCD-V(Video)n可录CDnCD-InCD-ROM XA nPhoto-CD nVideo CD CD-DA n1981年制定红皮书,即CD-DA (Digital Audio)激光数字音频光盘的规范。这个标准是CD的最基本标准。 CD-ROM n1985年制定黄皮书,经修订,1988年正式作为国际标准ISO9660,1991年又推出了ISO 9

11、660。 CD-V(video)n从红皮书发展而来,在影碟机上使用,视频信息可以输出到电视机。 可录可录CDn可录CD(recordable CD)盘的橙皮书标准。可录CD分为两类,即CD-MO和CD-WO。CD-MO称为磁光盘,可重写; CD-WO又称CD-R,这种盘一旦用户写入数据就不能抹掉。 CD-I n1987年制定绿皮书规范用于交互式多媒体CD-I系统中。n1992年推出第二代CD-I,可播放交互式视频图像。 CD-ROM XA(extended architecture) n1988年,Philips、SONY及 Microsoft制定CD-ROM扩展结构,1991年又制定CD-R

12、OM XA规范,对应于ISO9660。 Photo-CDn像片光盘,1991年Philips和KODAK对外发布Photo-CD,1992年制定规范。用于存放数字化的静态照片。 Video CD n1993年制定的白皮书规范,采用MPEG压缩算法压缩动态图像。它能使Video CD节目能够在CD-I、CD-ROM/XA和Video CD播放机上播放。2. CD-ROM的性能指标的性能指标 (1) 容量 约为650MB。(2) 数据传送速率 最初推出为150KB/S,称为单速,后又推出倍速(300KB/S),四速(600 KB/S),48X等光驱。(3) 存储缓冲器 早期为64KB,目前常用的为

13、128 KB或256KB。(4) 存取时间 200400ms(5) 误码率 1/10121/1016,采用复杂的纠错编码技术降低了误码率。 (6) 体积光盘驱动器的大小一般为41mm(H) 146mm(W)206mm(D)(7) 接口 采用SCSI接口、IDE接口和AT总线接口。接口可以集成在音频板、视频板或主机板上,也可以是一块单独的板。(8) MTBF(mean time between failures) 平均无故障时间约为25000小时左右。(9) 兼容性 支持Photo-CD和CD-ROM XA。 3.光盘的规范及格式光盘的规范及格式 nCD-DA规范及格式 nCD-ROM规范及格式

14、 nCD-I光盘的数据格式 n激光视盘 CD-DA规范及格式规范及格式 nCD-DA即激光唱盘,光盘的物理规格为直径12cm,内径1.5cm,厚度0.12cm,重量14克。这种光盘常采用常线速(CLV)伺服方式,逆时针旋转。n其螺旋线光道上等长分段,每段称为一个扇区。每个扇区都存放定量数据块,并以特定的地址标记,其单位为“分”、“秒”、“扇区”,即1分=60秒,1秒=75扇区。n光道总长度为74分,即可存放74分钟高音质非压缩的音频信号。 nCD-DA每个扇区的音频数据分为许多称为帧的单元,每帧共有33个字节。n一帧中每个通道有6个音频数据,有左右2个通道,每个通道的样本值是16位的数据,共2

15、4个字节。一帧中有8个校验字节和1个“控制与显示(C&D)”字节。n错误的检测和校正采用的是CIRC(cross interleave reed-solomon code)码。 图图4.2 CD-DA帧及扇区格式帧及扇区格式 C&D1B音频数据音频数据12B校验校验4B音频数据音频数据12B校验校验4B8位8位8位8位24位位3位位143 143143143帧帧0帧帧1帧帧2帧帧971扇区1帧同步位合并位33字节EFM调制588个通道位nCD-ROM同样是把光轨道分为等长的扇区,使用分、秒、扇区的数据编址方法,采用常线速伺服方式。它与CD-DA的不同主要在每个扇区中数据格式的不同。 nCD-R

16、OM光盘有两种格式: Mode1和Mode2。 Mode1格式格式Mode2格式格式SYNC12BHEADER4BUSER DATA 2048BEDC 4BSPACE 8BECC276BSYNC12BHEADER 4BUSER DATA 2336B图图4.3 CD-ROM的的Mode1和和Mode2格式格式 Mode1和和Mode2格式相同之处格式相同之处 n这两种方式的扇区首部都是12字节的同步码(SYNC),其前后为“00H”而中间10个字节存放“FFH”数据。紧接着的4个字节为地址字段,或称扇区头(HEADER),它采用分、秒、扇区号的制式确定地址标号,地址字段中设置了MODE字节,指明

17、该扇区是哪种格式 Mode1和和Mode2格式不同之处格式不同之处n用户数据量不同。Model1为2048个字节,Mode2为2336个字节。 n存储数据的类型不同。Mode1用于存放对错误极为敏感的数据,如计算机程序等; 而Mode2用于存放对错误不太敏感的数据,如声音、图像、图形等。 nMode2的数据经过CIRC检验后的误码率为1/109,对声音、图像类的数据可以不必做进一步校验; 而要满足计算机数据误码率小于1/1012的要求,则应对Mode1的数据作进一步校验。 Mode1中的容错机制中的容错机制 n用了4个字节作为错误检测码(EDC),采用的循环冗余校验码CRC,只能检测是否有错n

18、用276个字节作为错误校正码(ECC),可以校正扇区中多个字节错误。n通过两级校验,Mode1中数据误码率可以降到1/1012。 CD-ROM XA n它所定义格式包括与CD-I格式相同的FORM1和FORM2格式,解决了普通CD-ROM驱动器不能读CD-I格式光盘的问题。n CD-ROM XA的数据格式(FORM1,FORM2) SYNC 12BHEADER 4BSUBHEADER 8BUSER DATA 2048BEDC 4 BECC 276BSYNC 12BHEADER 4BSUBHEADER 8BUSER DATA 2324BEDC4B图图4.4 CD-ROM XA FORM1和和FO

19、RM2格式格式 nCD-ROM XA在HEADER后面增加了8个字节信息来进一步说明扇区中用户数据,其中存放有数据类型(音频、视频、数据等)格式形式,触发位(记录开始、文件结束、实时性等),数据编码信息(ADPCM、CLUT、DYUV等)。n这样CD-ROM XA驱动器可通过对子头信息的识别,读出数据区中多种媒体的信息,特别地能正确读出CD-I中采用ADPCM压缩的音频数据。 CD-ROM卷和文件结构卷和文件结构n卷和文件结构由逻辑块(5122n字节)和逻辑扇区(20482n字节)、记录、文件、卷、卷集等多级结构定义。n由于CD-ROM驱动器的平均寻道时间较长,为了能高速检索CD-ROM光盘上

20、文件,ISO为CD-ROM光盘的文件目录结构规定了路径表 图图4.5 CD-ROM目录目录结构和路径表结构和路径表 CD-I光盘的数据格式光盘的数据格式 nCD-I光盘的数据格式是从CD-DA和CD-ROM光盘格式演变而来的。n其扇区格式与CD-ROM XA相同,它有三个区:导入区(Lead-in Area),节目区(Program Area)和导出区(Lead-out Area)。nCD盘上的信息均采用EFM记录方式进行记录。由于光盘原始误码率较高,所以都采用能纠突发错误的CIRC码。 nCD-I光盘的导入区 是由若干个空扇区组成的,这样做的目的是使识别节目区变得容易。nCD-I光盘可以有多

21、到99条光道,编号为199。nCD-I光盘的导出区 或者是空扇区(最后一条光道是CD-I光道时)或者是无声的帧(最后一条光道是CD-DA光道) 图图4.6 CD盘结构盘结构图图4.7 只有只有CD-I光道的光道的CD-I盘结构盘结构 导入区166信息扇区盘标记2250信息扇区CD-I数据导出区节目区光道1n含有CD-DA光道的CD-I光盘,第一条光道必须是CD-I光道; 且任一条CD-I光盘上的CD-DA光道必须在CD-I光道之后。n一片CD-I光盘上的CD-DA光道可以有一条或多条CD-DA光道,但最多不超过98条。而一条光道的长度可以是300个扇区(相当于4秒)和325000个扇区(相当于

22、最长的超级HiFi播放72分钟)之间的数。导入区166B信息扇区 盘标记 2250信息扇区 CD-I数据 2250信息扇区 CD-DA 导出区 图图4.8 有有CD-I和和CD-DA光道的光道的CD-I盘结构盘结构 节目区光道1光道n CD-DA(n=99) nCD-I光盘的导出区或者是空扇区(最后一条光道是CD-I光道时)或者是无声的帧(最后一条光道是CD-DA光道) nCD-I盘上的所有数据都以文件形式存放,任何一个文件都可以通过盘上的路径表取出。n每个文件都有文件描述符记录,存放于文件目录中。文件描述符记录包含有文件名、文件号、文件大小、地址、拥有者、属性、交叉存取因子、读取许可权。n文

23、件分为目录文件、实时文件和标准文件。nCD-I的数据以两种专门的数据格式FORM1和FORM2记录。如光盘是用FORM1记录,因为它有EDC和ECC码,CD-I系统利用它们可以获得误码率小于1/1013数据。 激光视盘激光视盘 n激光视盘也是一种只读光盘,家用激光视盘又称为影碟机,是独立的视频播放设备,与音响设备和电视机(监视器)相连就可以播放视盘。n计算机可以通过外设接口与视盘播放机相连,视盘在多媒体应用形式主要是“交互式视盘”,由计算机控制视盘的播放、视频帧的寻址和显示。 n视盘与前述的几种光盘原理结构一样 n视盘的型号 大-12英寸,小-12CMn视盘有两种信息记录格式 常线速(CLV)

24、 常角速(CAV) CLV型视盘型视盘n扇区长度为常数,以紧凑形式存放信息,每盘可以存放60分钟的视频信号。n当驱动器从内圈到外圈读盘时,由于内圈和外圈存放的信息量不同,所以转速也不同。在内圈可达到每分钟1800转,在外圈轨道每分钟约600转。 CAV型视盘型视盘n以类似于磁盘的方式划分扇区,扇区长度从内圈到外圈逐渐增加,每盘仅可存放30分钟视频信号。n优点是驱动器读盘时,从内圈到外圈,转速一致,对NTSC制式,CAV视盘转速为每分钟1800转,对PAL制式,CAV视盘转速为每分钟1500转。n这种信息存放格式有利于单帧访问、搜索、帧序列的随机访问等功能,适合于多媒体平台。 Video CD标

25、准标准nVideo CD标准是目前流行的视频光盘标准,它描述一个使用CD格式和MPEG-1标准的数字电视播放系统。nVideo CD定义了MPEG光道的结构,它由MPEG-Video扇区和MPEG-Audio扇区组成。光道上的Video(电视图像)和Audio(声音)是按MPEG-1的规定进行编码。nMPEG-Video扇区和MPEG-Audio扇区是交错存放在光道上 。图图4.9 Video CD结构结构 VVVVAVVVVVAVVVVVAVV信息包开始码 4BSCR(系统参考时钟)5BMUX速率 3B信息包数据 2312B信息包开始码 4BSCR(系统参考时钟)5BMUX速率 3B信息包数

26、据 2292B0020BVideo CD光道结构MPEG Video扇区的一般结构MPEG Audio扇区的一般结构4.CD-ROM光盘制作过程光盘制作过程 (1) 数据准备 (2) 主盘制作 (3) 复制光盘 图图4.10 CD-ROM光盘制作过程光盘制作过程 4.1.4 DVD光盘光盘nMPEG-2的视频质量是广播级质量,为解决其MPEG-2数据存储问题,研制了DVD并于1995年完成标准化方案。n DVD盘片尺寸与CD相同,容量最高的双层双面盘可达17GB。单面单层DVD盘能够存储4.7GB的数据,存储133分钟的MPEG-2视频,其分辨率与现在电视相同,并配备Dolby AC-3/MP

27、EG-2音频质量的声音和不同语言的字幕。表4.1 DVD系列标准与CD系列标准DVD系列系列CD系列系列Book A:DVD-ROMCD-ROMBook B:DVD-VideoVideo CDBook C:DVD-AudioCD-AudioBook D:DVD-Recordable CD-RBook E:DVD-RAMCD-MO 表4.2 DVD-Video的规格数据传输率数据传输率可变速率,平均速率为4.69Mbps,最大速率10.7Mbps图像压缩标准图像压缩标准MPEG-2标准声音标准声音标准NTSC: DolbyAC-3或 LPCM, 可 选 用MPEG-2 AudioPAL/SECA

28、M: MPEG MUSICAM 5.1或LPCM,可选用Dolby AC-3通道数通道数多达8个声音通道和32个字幕通道n 从外观和尺寸上看,DVD盘和CD-ROM盘没什么差别,直径均为120mm,厚度为1.2mm; 新的DVD播放机能够播放已有的CD激光唱片和VCD。不同点: nDVD光道之间的间距由原来的1.6m缩小到0.74m,而记录信息的最小凹坑凸区长度由原来的0.83m缩小到0.4m,这是DVD盘存储容量提高到4.7GB的主要原因。nDVD信号的调制方式和错误校正方法也做了相应的修正以适合高密度的需要,它采用效率较高的8比特到16比特+(EFM PLUS)调制方式,DVD校验系统采用

29、更可靠的RS-PC(Reed Solomon Product Code)。nDVD播放机也采用波长更短(由780nm减小至635/650nm)的激光源来提高聚焦激光束的精度。4.2 多媒体功能卡多媒体功能卡 n包括视频信号捕捉、压缩、处理、播放的视频卡,音频卡,VGA与TV的转换卡,图形加速卡,光盘接口卡等。n通过这些功能卡将计算机与各种外部设备相连,构成一个制作和播出多媒体系统的工作环境。n具有代表性的多媒体功能卡: 声音卡、视频卡4.2.1 声音卡声音卡 n声音卡或音频卡是处理音频信号的计算机插件,它是普通计算机向MPC升级一种重要部件。目前作为微机必备功能集成在主板上.nMPC所用声音卡

30、由专用DSP芯片管理声音的输入输出和MIDI操作。音频数据是8位或16位的PCM数据或压缩格式ADPCM数据。 n声霸卡(Sound Blaster,SB)及其特点:(1) 立体声或单声道声音采样(ADC)和重放(DAC);(2) 采样速率从4KHz到44KHz程序可调;(3) 功能强大的FM音乐合成芯片(128种音色);(4) MIDI接口和游戏杆端口;(5) CD-ROM驱动器及接口;(6) 可选择多种声源(麦克风、CD唱机、线路输入);(7)内带的混声器芯片可以控制各种数字与模拟音量;(8)音箱输出接口有功放功能。n随SB系列卡还带有丰富的软件,主要是: (1)声音编辑,录制、播放、修改

31、声音; (2)文本到声音转换(TTS); (3)语音识别,利用Voice Assist支持用语音控制计算机执行Windows命令; (4)调频电子琴,将计算机变成一台功能齐全的电子琴; (5)乐曲文件播放,支持MIDI和CMF两种乐曲文件; (6)软件开发工具,供二次开发使用。n音频卡主要由下列部件组成: MIDI输入/输出; MIDI合成芯片; 带有脉冲编码调制电路的数模转换器; 压缩芯片; 语音合成器; 语音识别电路; 音频输出或线输出的输出电路等。图图4.11 音频卡的结构框图音频卡的结构框图 图图4.12 数字化声音的获取与处理流程数字化声音的获取与处理流程 1. C-Cube公司视频

32、卡公司视频卡nCL550用了40多万只晶体管集成了JPEG压缩编码所需的DCT/逆向DCT单元、量化器、可变长编码器等单元。n压缩率可以通过修改量化表和VLC表的内容来改变。当执行JPEG的有损压缩算法时,可按不同的图像质量、存储器容量、带宽等应用环境来设置不同的压缩比。n压缩比可以从8:1到100:1之间任意选择。nCL550专用芯片上还提供有数字视频接口和直接与系统总线相连的接口,视频接口支持8位灰度、RGB、CMYK及YUV数字信号的输入和输出。 4.2.2 视频卡视频卡 图图4.13 CL550框图框图视频接口余弦变换/反余弦变换 量化器压缩/解压缩Huffman 编码 主机 接口 量

33、化表 解码表 块存储FIFO128*13/控制地址数据11163218控制地址/数据压缩时的数据流方向像素总线接口PBI主机总线接口HBICL550编码过程编码过程n图像像素数据经过像素总线接口(PBI)输入到CL550处理器。n数字化数值在输入到缓冲单元块存储后,以独立分量存储。n每个分量的88像素点阵数据首先由DCT单元处理,之后DCT系数矩阵根据用户编程选择的量化表,由量化单元进行量化处理。n在CL550器件内部的量化矩阵存储区中,可同时存储4个64字长的量化系数矩阵,分别适用于不同的彩色分量。n量化后的矩阵被Z形扫描顺序扫描处理,对直流系数(DC)和交流系数AC分别表示,而后再同时对D

34、C和AC两部分共同完成哈夫曼编码查表处理。n哈夫曼编码的结果最终作为JPEG压缩后的数据传送到主机总线接口(HBI),成为最终的处理结果。 CL550解码过程解码过程n图像解码过程与编码过程相反,JPEG标准格式的压缩数据输入到哈夫曼解码单元解码,又返回FIFO区域等待进行下一步处理。n游程编码解码单元从FIFO区域中读出解码后的数据,生成交流系数AC值,并进行Z形扫描生成88点阵格式。而生成的DC值另做处理。n然后进行逆量化和逆DCT,处理的结果输入到输出缓冲区中,而后像素总线接口取出这里的视频像素数据,按照一定的视频同步时序,输出到像素数据总线,供显示设备使用。 n利用其内部的320阶流水

35、线处理结构,将JPEG算法每一操作运算都分解安排到流水线每一阶中。nCL550-30处理器可以工作在29.41MHz的时钟频率,这就使得流水线处理可以在每秒内完成109次运算,这样的处理速度应用于JPEG算法时,每秒可压缩14.7M图像像素点。nCL550-10每秒也可压缩5M图像像素数据,CL550-35每秒可压缩17.5M图像像素数据 C-Cube公司基于CL550推出静态图像压缩板系列产品n可运行基本环境包括80386 (33MHz主频)CPU,ISA或EISA总线结构,VGA显示卡(8位、16位或24位),Windows3.10,4MBRAM,50MB以上硬盘。n另外,这些产品可支持多

36、种图像文件格式。n许多公司围绕CL-550设计各种图像板以满足多媒体系统的应用,如多媒体信息系统,图像处理,扫描仪,数字摄象机,电视电话,彩色传真等 CL450 C-Cube公司推出CL450系列产品及CL680解码器就是其中较好的产品。nCL450包括RISC处理器、Huffman解码器、DRAM控制器、视频显示控制器等单元,三条总线是主机总线、DRAM总线、像素总线。nCL450完全遵从MPEG标准,能实现RGB和YUV格式的相互转换,支持NTSC和PAL制式,能完成SIF分辨率(352240,30Hz或352288,25Hz)的实时解码,并支持视频和音频的同步,可全部或部分显示解码后图像

37、。 图图4.14 CL450解码器框图解码器框图 主机接口主机接口 编码数据编码数据FIFO栈栈HUFFMAN解码单元解码单元 CPUDRAM控制器控制器位流缓冲器位流缓冲器帧缓冲器帧缓冲器主机接口 视频接口数据控制数据地址控制数据控制控制地址视频显示控视频显示控制器制器DRAM接口 nCL450通过执行宏码完成高层次功能。宏码由C-Cube和硬件提供,并且把它作为产品一部分。在CL450完全操作之前,宏码必须由软件装入CL-450中,C-Cube公司提供的源码供用户在其目标系统中修改和编译。n应用程序可以两种方式操作CL450,它们是寄存器操作方式和宏命令操作方式。CL450产品主要面向低成

38、本应用,例如CD-I系统、视频游戏、交互式多媒体系统、交互式电视等。 2. 视频采集卡视频采集卡n视频采集卡将视频信号连续转换为计算机存储的数字视频数据,其典型产品如Creative公司的视霸卡,它是具有良好性能的视频处理卡。n其工作原理如下: 视频信号源、摄像机、录像机或激光视盘的信号首先经A/D变换,通过多制式数字解码器得到YUV数据,然后由视频窗口控制器对其进行剪裁,改变比例后存入帧存储器。帧存储器的内容在窗口控制器的控制下,与VGA同步信号或视频编码器的同步信号同步,再送到D/A变换器变成模拟RGB信号,同时送到数字式视频编码器进行视频编码,最后输出到VGA监视器及电视或录像机。 图图

39、4.15 视频采集卡结构框图视频采集卡结构框图 图图4.16 窗口控制器的逻辑框图窗口控制器的逻辑框图n(1) A/D变换和数字解码; n(2) 窗口控制器;n(3) 帧存储器系统;n(4) 数模变换和距阵变换;n(5) 视频信号和VGA信号的叠加;n(6) 数字式多制式视频信号编码部分。4.3 多媒体信息获取与显示设备多媒体信息获取与显示设备 n多媒体计算机必须配置必要的外部设备来完成多媒体信息获取和显示的功能n常见有鼠标、光笔、扫描仪、摄像机、触摸屏、彩色显示器、打印机等设备。 4.3.1 图像获取设备图像获取设备 n数字化图像获取设备常见的有扫描仪、数字照相机等静态图像获取设备和摄像机等

40、视频图像获取设备。 1. 图像数字化图像数字化n自然景物成象后的图像信息以照片或视频记录介质的形式保存,这些图像须数字化成计算机能处理的数字化信息,才能被多媒体计算机处理。n对于照片和视频图像来说,不管是从图像信息的空间分布和亮度(颜色)分布都是连续的,这些连续的信息量必须离散化,离散化的过程即数字化处理过程,它应该包括空间位置的离散和亮度电平的离散化。 n步骤:采样,量化,模数变换。 空间采样空间采样n一幅图像在二维方向上分成MN个网格,每个网格用一个亮度值来表示该区域亮度,这样一幅图像就离散化为MN个亮度值来表示。这个过程称为图像的采样,其中MN称为采样的分辨率,网格的亮度值即为采样值。

41、图图4.17 图像的采样图像的采样 NM 空间采样的分类空间采样的分类 n一维采样用扫描方式(如传真、扫描仪等)把二维图像转化为一维随时间变化的信号。这样得到的一维行扫描信号经采样实现图像数字化。n二维采样是目前发展的固体摄象器件采用的通用方法,它把光电转换和采样功能结合起来。固体摄象器件由MN个光敏元件构成,每个光敏元件对应一个采样点,MN个光敏元件构成MN个采样点。 量化量化n所谓量化就是把连续的亮度值分为K个区间,每个区间上对应着一个亮度I。落于区间i中的任何亮度值都以亮度值Ii表示,共有K个不同亮度值。n按照量化区间划分方法,量化可分为均匀量化和非均匀量化。 区间区间12K亮度亮度I1

42、 I2 IK表4.3 区间与亮度对应关系 模数变换模数变换n实现量化的过程称为模数变换,这个过程一般采用PCM量化器来实现,PCM量化是均匀量化。n非均匀量化一方面可利用PCM量化的结果,根据信号特性处理为非均匀量化的数据;另一方面也可以利用专门的非均匀量化器来实现。n另外,还要考虑图像数据采样过程中产生的失真和噪声,包括叠加噪声,孔径效应及插入噪声等。 2.图像扫描仪图像扫描仪 n20世纪80年代中期出现的光机电一体化高科技产品 。n基本原理是将反映图像特征的光信号转换成计算机可接受的电信号 。n工作过程 CCD,光电转换。n图像扫描仪是最常用的静态图像输入设备。n它往往配置大量的管理和控制

43、扫描过程软件及文字识别、排版、图文数据库等软件,使扫描仪提供很强图文信息获取能力。n扫描仪还提供设置扫描区域、分辨率、亮度、图像深度等参数,扫描后图像还可进一步处理。 图像扫描仪的种类:n平板式n手持式n滚动式3.电视摄像机电视摄像机n电视摄象机由摄象镜头管、同步信号发生电路、偏转电路、放大电路、电源等部分组成。n来自被摄物体的光通过光学系统在摄象管的靶上形成光学图像,这个光学图像经摄象管转换成电信号,以视频信号方式输出被摄图像。n彩色图像摄取重要的是分离出三基色信号,利用滤色片、分色镜或棱镜等把光分解成三基色 。n最新产品不用电子管作光电转换,用电荷耦合器件CCD等固态摄象器件,这种器件具有

44、体积小、重量轻、省电、寿命长、可靠性高等优点。 4.3.2 显示设备显示设备n多媒体计算机系统中信息显示的设备主要有PC机的显示系统。包括两部分:显示器,显示适配器。 n显示适配器由寄存器、视频存储器和控制电路三部分组成,其中视频存储器包括显示帧缓存RAM和存放BIOS的ROM。显示适配器可以是一块插入PC总线的扩展卡或集成在主板上。n显示器与显示适配器相配。主要有两类,即多同步显示器和平面直角显示器 n从扫描频率角度来分,显示器主要有固定扫描频率与可变扫描频率两种。 4.3.3 触摸屏触摸屏n触摸屏最早出现于20 世纪70年代,90年代随着多媒体应用得到成熟和推广。 n触摸屏包括3个部分:

45、传感器; 控制部件; 驱动程序。n触摸屏的分类(按工作原理): 红外线触摸屏 电阻式触摸屏 电容式触摸屏 表面声波技术 底座式矢量压力测力触摸屏 等。 1.1.触摸屏技术触摸屏技术(1 1)红外线触摸屏)红外线触摸屏n工作原理n红外触摸屏有内置式和外挂式两种 (2 2)电阻式触摸屏)电阻式触摸屏电阻式触摸屏感应器是一块覆盖电阻性栅格的玻璃,再在上面蒙上一层涂有导电涂层并有特殊模压凸缘的聚脂薄膜。凸缘避免其表面的涂层与玻璃的涂层接触。控制器向玻璃4角加有稳定的5伏电压,并读取导电层的电压值。当屏幕被触摸时,压力使聚脂薄膜凹陷而碰到玻璃,导电层接触。控制器向玻璃的两个邻角加电压,并把对面两个角接地

46、,于是电阻栅格使玻璃片上形成从矩形的一边到另一边线性变化的电压阶梯,控制器从两个方向测出触摸点的电压值,从而计算出触摸的精确位置。 (3 3)电容式触摸屏)电容式触摸屏n这种触摸屏由模拟感应器和智能双向控制器组成。n感应器是块透明的玻璃,表面有导电涂层,其上覆盖一层保护性玻璃外层。n它工作时在感应器边缘的电极产生分布的电压场,用手手指指或或其其他他导导电电体体触触摸摸导电涂层时,电容改变,电压场变化,控制器检测这些变化,从而确定触摸的位置。控制器把数字化的位置数据传到主机,以实现人机的交互。n电容式触摸屏的感应器安装在监视器内部,外部与普通监视器一样,可靠性较高。 (4 4)表面声波触摸屏)表

47、面声波触摸屏 n表面声波是应变能仅集中在物体表面传播的弹性波。nSAW触摸屏在一片玻璃的每个角上装有两个发射器和两个接收器,一系列的声波反射器被嵌进玻璃中,沿着两面从顶至底穿过玻璃。发射器朝一个方向发射5MHz的短脉冲。当脉冲离开一角后,就会不断地被每个反射器反射回来一部分声波。n当触摸玻璃的某点就阻碍了脉冲能量通过那点反射到达接收机,于是从接收的脉冲信号中就见到一段缺口。脉冲起点至下跌点间的时间长度就确定了触摸点的坐标。控制器通过互换两对发射器和接收器,就可测出触摸在X及Y方向的坐标。 (5 5)矢量压力测力触摸屏)矢量压力测力触摸屏 n这种触摸屏的原理是在CRT外面盖上一块四角装有应力计的

48、平板玻璃。n当玻璃受到压力时,应力计就会出现电压或电阻等电气特性的变化。压力越重,变化值就越大。每个角记录这些变化。n控制器读取每个角的记录值,并计算触压位置。这种触摸屏分辨率较低 。2.2.触摸屏的支持软件触摸屏的支持软件 nDOS设备驱动程序n仿真程序-MOUSE仿真n软件辅助开发工具 图图4.18 触摸屏的支持软件触摸屏的支持软件 4.4 多媒体个人计算机多媒体个人计算机 n所谓多媒体个人机( MPC)就是具有多媒体处理功能的个人计算机。nMPC配置特点: (1) 一个功能强大,速度快的CPU; (2) 大容量的存储器空间; (3) 高分辨率显示接口与设备; (4) 可处理音响的接口与设

49、备; (5) 可处理图像的接口与设备; (6) 可存放大量数据的配置等。 nMPC配置(扩充) (1) 光盘驱动器(2) 音频卡 (3) 视频卡 (4) 扫描卡 (5) 打印机接口 (6) 交互控制接口 (7) 网络接口 (8) 图形加速卡 其他多媒体计算机其他多媒体计算机 nMacintosh多媒体计算机nAmiga多媒体个人计算机 4.5 CD-I交互式多媒体系统交互式多媒体系统 nCD-I系统是家用交互式多媒体系统,它是Philips公司和Sony公司于1986年4月联合推出的一种电视计算机或称Smart TV系统。n该系统把各种多媒体信息存放在容量为650MB的只读光盘上,用户可通过C

50、D-I系统读取光盘的内容来进行演播,光盘的数据使用CD-I格式存放。nCD-I的正式商品于1991年面市,用户可以交互式地把家用电视机和计算机相连,通过鼠标器、操纵杆、遥控器等装置选择人们感兴趣的视听节目进行播放,是一种较好多媒体系统产品 。1. CD-I基本基本系统结构系统结构 CD-I基本系统主要有5部分构成 : (1) 音频处理子系统 (2) 视频处理子系统 (3) 多任务的操作系统 (4) CD播放机 (5) 微处理器、存储器、键盘、定位装置和CSD字体模块 图图4.19 CD-I基本系统结构基本系统结构音频处理子系统视频处理子系统存取控制器RAM定位装置键盘选件ROMCD-RTOSC

51、SD字体CD-DA控制器CD-I接口MPUDMA控制器NVRAM时钟日历CD播放机RGB视频信号左通道 右通道数据控制信号数据和控制BUS2. CD-I音频子系统音频子系统 nCD-I基本系统有4种标准音质的运行方式和一种非实时的语音音质运行方式。nCD-I除继承CD-DA超级高保真音质运行方式外,还有A、B、C三个音质等级的运行方式。A级相当于Laser Vision音质,B级相当于FM调频广播的音质,C级相当于AM调幅广播的音质。这4种音质的语音为实时的语音。 表4.4 CD-I音频方式 级别级别采样率采样率(KHZ)位数位数/样本样本频率响频率响应应(KHZ)数据率数据率(B/s)通道通

52、道数数数据流数据流百分数百分数播放时播放时间间(小时小时)CD-DA PCM 超级超级HiFi44.116201711001立体立体声声1001CD-I ADPCMA(LV)37.8817851002立体立体声声502425004单通单通道道254B(FM)37.8417425004立体立体声声254213008单通单通道道12.58C(AM)18.948.5213008立体立体声声12.581060016单单通道通道6.2516n非实时语音音质是文本到语音编码转换而成的。nCD-I有两种接口用来辅助编码这种音频信息,它们是上层接口和下层接口。上层接口是处理器默认的字符集,下层接口是对8位PC

53、M数据进行实时解码。这两种接口之间转换由微处理器控制。n声音数据的解码和控制是由CD-I音频处理器来完成的。 n CD-I音频处理器的组成(1) 解码器ADPCM。(2) 音频处理单元。(3) 特技处理器及声音输出。(4) CD-I接口单元。(5) 音频信号存储器。(6) 控制器。 图图4.20 音频处理器子系统音频处理器子系统3. CD-I视频子系统视频子系统 nCD-I视频处理子系统的功能是把CD-I光盘上的数字化视频信号通过存储和控制进行实时解码、颜色切换、重叠控制,经过混合处理而产生RGB信号输出。图4.21 CD-I视频处理子系统系统总线存储体0(RAM)存取控制器存储体1(RAM)

54、实时解码器0实时解码器1颜色切换重叠控制平面重叠像素保存混合器图像影响因素背景外部视频DYUVCLUTRLDYUVCLUTRLRGBRGBRGBRGB平面A平面B模拟视频压缩与解码原理视频压缩与解码原理 (1) 一维的DYUV编码 自然图像图4.22 DYUV图像编码(2) RGB5:5:5编码 高质量图形图图4.23 RGB5:5:5编码编码DU4位DY14位DU4位DY24位T1位Red5位Green高2位 低3位Blue5位(3) CLUT编码 动画 8位CLUT地址0 7位CLUT地址4位CLUT地址4位CLUT地址图图4.24 7位位CLUT地址地址(4) 一维行程编码 动画01位3

55、位CLUT地址 0 3位CLUT1位 地址行程长度(8位)01位3位CLUT地址11位3位CLUT地址图图4.25 RL图像编码图像编码01位7位CLUT地址01位7位CLUT地址行程长度(8位)RL7RL3nCD-I图像是由4个图像平面合成的。平面1是一个1616像素的彩色游标平面,平面2和平面3是全屏幕图像平面,平面4是背景平面。在软件控制下, 这些平面上的图可以按各种要求叠加生成一幅画面显示。观看方向背景平面全屏幕图像平面游标平面1234图图4.26 CD-I CD-I的图像平面的图像平面多媒体多媒体系统系统结构结构 多媒体硬件多媒体驱动程序多媒体系统软件多媒体应用软件多媒体驱动程序接口

56、多媒体开发与创作工具CD-RTOS特点特点 CD-I有自己专用的实时操作系统CD-RTOS,它源于高性能的OS-9实时操作系统,是用68000汇编语言写成的。 n CD-RTOS是多任务实时操作系统。n CD-RTOS的结构是模块化结构。n CD-RTOS有设备独立的I/O接口。n CD-RTOS能够处理多级树形结构的目录。n CD-RTOS是中断驱动的系统。 CD-RTOS的构成的构成 (1) CD-RTOS内核 (2) 系统相关库 (3) 接口和管理程序 (4) 设备驱动程序(5) 系统状态描述符CSD (6) 文件保护模块FPM (7) 初始化和系统启动过程 图图4.27 CD-RTOS

57、的结构框图的结构框图初始化CSDFPM应用相关库系统运行时钟应用相关库应用程序UCMPFMCD FMNRF键盘驱动定位驱动音频驱动视频驱动CD驱动CD-RTOS 内核4.6 DVI多媒体计算机系统多媒体计算机系统 4.6.1 概述概述 nDVI技术最早是由美国David Sanaoff研究中心研究开发的交互式数字视频装置,这项技术研究成功后被GE公司购买,后又被Intel买到手。nIntel和IBM公司联合开发,于1989年在美国计算机博览会推出第1代产品Action Media750n1991年推出第2代产品Action Media,在Comdex一举获得了最佳多媒体产品奖和最佳展示奖。In

58、tel公司已将成功的DVI多媒体系统做到一个母板上,并要把DVI技术集成在一个芯片上。 nDVI多媒体计算机系统特点: (1) 提供一种全数字化的方法。 (2) 先进的视频压缩技术 。 (3) 声音压缩技术。 (4) 合成图形 。4.6.2 DVI系统结构及其工作原理系统结构及其工作原理 1. DVI系统结构系统结构 n第一代DVI系统(DVI)由3块插板组成: DVI视频板,DVI音频板及DVI多功能板。n1991年推出的改进的DVI系统(DVI)将上述3块板集成在一个板上,视频、音频的获取部分也都装在上面,仅占一个IBM PC标准插槽,为用户提供了方便。nIntel将系统外围逻辑电路集成为

59、3个门阵列电路即82750H主机接口门阵列,82750LV VRAM/SCSI/ Capture门阵列,82750LA音频子系统接口门阵列。 n其他设备包括116MBVRAM视频处理器、音频信号处理器、D/A转换器及模拟滤波器和DVI总线。nDVI的核心部件是视频像素处理器82750PA和视频显示处理器82750DA,DVI将这两个芯片升级为82750PB和82750DB,使运算速度提高了一倍。 图图4.28 DVI II型系统结构原理图型系统结构原理图2.2.视频处理子系统视频处理子系统 nDVI型中,82750PA像素处理速度为12.5MIPS,它采用微码编程,可以高速执行像素处理的多种算

60、法。82750DA是显示处理器,它和82750PA并行工作。当视频像素处理器绘制和管理视频RAM中的位映射图时,显示处理器就把这个结果显示在视频屏幕上。 n DVI型中,视频子系统的关键芯片由82750PB和82750DB分别取代82750PA和82750DA。82750PB是具有较宽指令字长(48位)的快速微码处理器,在25 MHz主频下,运行速度达25MIPS。由于指令字长,且不同字段分别可以实现不同的控制和操作,提高了并行操作的功能,因此像素处理器的操作速度达100 MIPS。高速和微操作像素处理器特别适合图像处理和各种运算。 3.3.音频处理子系统音频处理子系统 n在DVI型系统中,音

61、频处理子系统是以TI公司的TMS-320C10数字信号处理器(DSP)做为专用音响处理器。n经过TMS-320C10音响协处理器输出通道的数字化音响输出信号,送到两个14位D/A转换器转换为模拟信号,再经过两个可编程带宽滤波器进行滤波,由左右两个通道输出,可产生较好的立体声音响效果。 nDVI型系统中音频子系统由数字信号处理器AD2105来实现,通过它完成音响信号的压缩和解压缩任务。nDVI系统中采用了ADPCM算法把16位的采样数据编码成4位码。DSP芯片还能控制音量、采样速率的变化,从VRAM中抽取压缩编码数据,将解压缩的音频数据输出送到D/A转换器,通过滤波后输出。 4. DVI总线和接

62、口总线和接口 n在DVI型系统中,各子系统通过PC总线相连,专门有一个DVI多功能板,它由3个功能模块组成:其一是CD-ROM接口控制器; 其二是扩展内存模块; 最后一个是两路操纵杆控制器接口。n在DVI型系统中,把原DVI型中外围逻辑电路合并成三个门阵列电路,分别是82750LH主机接口门阵列、82750LV VRAM/SCSI Capture接口门阵列和82750LA音频子系统接口门阵列。系统中数据通信通道是具有多路开关的32位数据和地址总线,也称为“DVI总线总线”。 CD-ROM控制器控制器n在DVI型系统中,CD-ROM控制器是为Sony CDU-100B型CD-ROM驱动器而设计的

63、,也适用于其他兼容产品。nDVI型系统中,VRAM/SCSI/Capture门阵包括了一个SCSI接口,这个接口可用于支持单个CD-ROM驱动器,作为压缩编码视频和音频数据源。DVI不需要外部扩展卡就能支持CD-ROM驱动器。 以以DVI多媒体硬件系统具有下述特点:多媒体硬件系统具有下述特点:采用了高速专用视频处理器i750B,具有实时处理视频功能;DVI总线保证了高速传输;外围逻辑集成到3个门阵列,Action Media体积缩小;外围接口设计方便了用户。 4.6.3 DVI软件开发环境软件开发环境 n1989年推出的第一代DVI系统软件是基于DOS环境,采用了层次结构模型,具有模块化特点,

64、其核心是AVSS(Audio Video Support System)。n Intel和IBM开发第二代DVI系统中采用基于Windows的DVI系统软件,其核心为音频/视频内核AVK(Audio/Video Kernel),AVK能在不同的操作系统支撑环境下工作,而且为了实时响应,能够最少地依赖主机CPU。 1.音频视频子系统音频视频子系统AVSS n应用层n高层次接口DVI标准n高层次模块低层次接口DVI标准n驱动器接口模块n系统RAM接口模块n硬件图图4.29 DVI I型系统软件层次结构型系统软件层次结构 n最下层是DVI系统硬件。n硬件之上和硬件直接打交道的软件是驱动程序,驱动程序

65、模块包括视频驱动程序、音频驱动程序以及多功能板驱动程序。n驱动程序模块层之上是驱动程序接口模块层。它DVI系统中共有4个驱动程序接口模块:微码接口模块;视频接口模块;多功能接口模块;音响接口模块。 n驱动程序接口模块层之上是应用支持层,它主要包括两个高层次的软件包即一个图形软件包Gr,一个音频视频支持软件AVSS。n最高层是应用层,它可以提供大量的应用程序。对其支持的DVI高层接口提供了多媒体编辑制作工具及创作语言,方便了应用软件的开发。 AVSS概念模型概念模型 效果处理单元 演播单元BrightContColorTintskew监视器Hook例程LR图图4.30 超级超级VCR模型模型AV

66、SS/RTX工作原理工作原理 nAVSS概念模型称之为超级VCR模型。 n演播单元就是AVSS功能的具体体现。n效果处理单元实际上是图形库功能的集合。n钩挂(Hook)例程是把专用图形添加到视频的特殊调用工具。 AVSS数据流数据流 AVSS采用3个并行的操作来播放数字视频,它们都作为RTX的任务:n输入任务,它将一帧压缩视频读进内存;n解码任务,它请求像素处理器对该帧视频进行还原;n显示任务,它将还原后的视频帧在计算机显示器上显示。 这些任务必须每秒执行30次,以保证演播连续流畅。 图图4.31 AVSS的数据流程的数据流程输入任务存储设备压缩数据缓冲区解码任务解码位图矩阵显示任务监视器AV

67、SS的任务调度的任务调度RTX nRTX的首要任务是为AVSS提供CPU资源,使运动视频播放连续畅通。n具体做法是给任务分配特定的优先数,并查明在其执行循环期间应发出的事件等待时间。nRTX优先级的范围是从015,0为最高优先级,15为最低优先级。AVSS输入任务、解码任务、显示任务的运动优先级分别为3、4、5。nRTX调度是周期性地被激活,它基于主计时器中断,调度任务是“ready”表为其优先顺序导向的。 AVSS/RTX性能评价性能评价 n表明了把电视的真实感与计算机的交互性相结合是可行的,对以后许多多媒体系统开发影响很大,系统具有的交互图形效果和音频信号流的动态混频都超越了VCR功能限制

68、。 nAVSS/RTX是基于DOS环境开发的,没有留出扩展接口,可移植性和可扩充性很差,RTX的任务调度依靠主机CPU。因此RTX调度技术需改进。上述问题在第二代DVI系统软件都得到了合理的解决。 2. 基于窗口系统环境的基于窗口系统环境的AVK nAVK的概念模型: 多媒体系统软件的核心是AVK,其概念模型是“数字视频制作演播器”。 n数字式制作演播器主要的组成部分是:模拟设备接口,显示管理器,采样器,效果处理器以及音频/视频混合器等 。图图4.32 多媒体数字式制作演播器多媒体数字式制作演播器模拟量I/O接口主文件接口应用程序 模拟接口 采样器数据流管理区显示管理器 音频/视频混合器 效果

69、处理器视频音频文件程序控制和通告物理通道逻辑通道数字式制作演播室数字式制作演播室 nDVI系统概念模型是“数字视频制作演播器”。这种模型要求多媒体技术模拟现代电视制作演播室,由特定硬件完成各项功能,并使应用开发者具有同实际演播室一样的创作自由度。n一个典型的制作演播器应包括混合器,磁带,监视系统,特技处理器以及为了记录、修改和播放视频和音频信息联在一起的其他设备。 n数字式制作演播器主要组成部分:数字式制作演播器主要组成部分:(1) 模拟接口 (2) 显示系统 (3) 采样器(4) 数据流控制器 (5) 效果处理器 (6) 混合器 图图4.33 AVK系统的结构系统的结构 应用程序接口APIA

70、VL音频/ 视频库AVD音频/视频驱动器DVI硬件微码引擎AVKAVK的数据流的数据流 nAVK对数据流处理有两方面优点:一方面是从解压缩位映射阵列分离显示的位映射允许插入拷贝和改变比例尺的操作,它也允许改变窗口的视频效果。另一方面由于DVI硬件具有更多的功能,多个视频窗口能够同时显示在屏幕上 。n当对于相同的显示位映射数据执行拷贝和变换比例尺操作时,为每个视频数据流定位压缩编码数据缓冲区和解压缩阵列数据。而AVSS结构是使用单个位映射阵列用于解压缩和显示。 图图4.34 AVK数据流程图数据流程图存储设备压缩解码数据缓冲器输入任务解压缩任务显示任务拷贝改变比例显示位映射解压缩位映射阵列监视器

71、AVK的实时任务调度工作过程的实时任务调度工作过程nAVK微码子程序集合执行实时的任务调度,其主要组成部分是调度器(DoMotion),缓冲区/数据流处理任务,命令表处理任务及周期处理任务等。n当视频数据流正在播放时,DoMotion在主命令表处理任务和缓冲区/数据流处理任务之间循环。 n通过主命令表和设置队列执行微码功能来完成微程序控制。 n周期处理任务调用队列集函数,并且用队列集函数从主机传送命令到主命令表或命令表数据流,这样就允许主机传送指令到82750PB像素处理器。AVK协处理器用82750PB,由DoMotion执行实时任务调度。 图图4.35 AVK的实时任务调度的实时任务调度D

72、VI图像格式及压缩算法图像格式及压缩算法 n静态图像处理: 静态图像压缩的算法有JPEG和行程算法。n视频图像压缩: DVI技术采用两种视频图像压缩算法,即PLV和RTV算法。 4.7 VCD与与DVD播放系统播放系统 nVCD播放系统 nDVD播放系统 4.7.1 VCD播放系统播放系统1. VCD播放机的基本结构播放机的基本结构nVCD播放机是基于MPEG-1标准的交互视频播放系统,它有两种形式: (1) 使用PC机构成的播放系统,它是在PC机加上MPEG解压卡或解压软件升级而成; (2) VCD播放机加上电视机构成。nVCD播放机3个核心部件:(1) CD驱动器,或称CD加载器;(2)

73、MPEG解码器;(3) 微控制器。 图图4.36 典型的典型的VCD播放机结构播放机结构 2. VCD播放机的基本功能播放机的基本功能 (1) 支持VCD2.0标准的播放控制功能。(2) 可把NTSC制电视转换成PAL制电视。(3)播放不太清洁或者缺陷不大的VCD盘时不会产生断续图像,C-Cube称之为ClearView技术。(4) 支持单盘和多盘加载器。(5)支持下列CD盘格式: VCD2.0,VCD1.1,CD-DA,卡拉OK-CD1.0,CD-I。(6)支持的播放特性有: 1/2,1/4,1/8和1/16的播放速度;快速向前播放; 按时间搜索。(7)卡拉OK功能。4.7.2 DVD播放系

74、统播放系统 n与VCD播放系统相差不大 。n主要有下列部分组成:(1) DVD盘读出机构;(2) DVD-DSP;(3) 数字声音/视频解码器MPEG-2; (4) 微处理器。 图图4.37 DVD播放系统的结构播放系统的结构 4.8 多媒体工作站多媒体工作站 工作站是市场上一种功能很强的小型计算机系统一般特点是:n采用UNIX操作系统;n具有GUI接口;n很强的图形图像处理功能。 相对于传统的工作站一般处理离散的媒体信息,多媒体工作站设计成为能同时处理离散和连续媒体信息的工作站系统。 4.8.1 多媒体工作站系统结构多媒体工作站系统结构 n 主存和具有自主控制器的二级存储器;n 用于实时数据

75、处理通用处理器;n 处理离散媒体信息标准处理器;n 面向图形、音频和视频媒体的专用处理器(例如包含一个DVI处理器的微码解压算法);n 图形和视频适配器;n 通信适配器(如ATM主接口)。 图图4.38 SGI工作站体系结构工作站体系结构 系统处理器实时处理器N图形处理(选件)I/O处理器实时处理器1存储器磁盘I/O网络I/O时钟中断分离的处理器限时处理Sync BUSMP Link BUSSync BUS 1.总线总线 n在多媒体工作站内,除了一条数据总线外数据将在能够提供时间保证的第二条总线上传送。 n总线可划分为系统总线和外围总线。系统总线诸如ISA,EISA,Microchannel,

76、Q-bus和VME-bus,仅支持有限的连续数据传输。外围总线诸如SCSI,是面向连续媒体的数据传输开发的。 2.多媒体设备多媒体设备 n主要的外围设备是必要的输入输出设备。这些设备大多数是电子消费品,具有低廉的价格。麦克风,耳机及喇叭,摄象机即为典型的实例。n计算机的视频接口必须兼容大多数通用的视频技术/标准。除了CRT监视器,越来越多的终端使用彩色LCD技术。 3.主存主存 n音频和视频数据在一个数字系统的不同部件间复制。复制操作使用系统软件具备的面向连续媒体的存储管理功能。这种存储管理需要有效的主存,除了ROM,PROM,EPROM和部分静态存储元件,廉价的动态存储模块尤其需要。 n工作

77、站中数据复制由总线控制方法或CPU执行,但使用前一个方法并不总是可能的。大多数情况下,复制操作由CPU执行。4. 二级存储器二级存储器 n二级存储器及其控制器的主要要求分别是高存储容量和低访问时间。n一方面为了得到高存储容量,为CD-DA定义了CLV技术,CLV保证了在一个较长的平均访问时间内整个光盘数据密度为常数。n另一方面,为了保证实时性须降低平均访问时间,应采用CAV技术。由于时间要求更重要,具有CAV系统比具有CLV系统更适用于多媒体系统。n对二级存储器进一步的需求廉价高容量,并且能将离散的和连续的媒体存储在一起。 5.处理器处理器 n在一个多媒体工作站中,必要的工作分布在不同的处理器

78、,但这并不意味着所有多媒体工作站必须是多处理机系统。这些处理器面向不同的任务设计。n将来的多媒体系统由多个通用处理机组成,每个处理机将DSP性能与CPU性能结合在一起。根据应用的要求,这些单元面向离散或连续媒体的专用的处理进行配置。因此,这会有可能提供一种多媒体工作站,它根据应用的要求定做处理器。6.操作系统操作系统 n在多媒体工作站可能在面向离散数据计算和连续数据处理区分。这些处理可能运行在独立的处理器上。n提供了一个合适的操作系统,也许仅有一个处理器也能根据面向离散数据和连续数据处理之间的要求进行共享。 4.8.2 典型的多媒体工作站典型的多媒体工作站 O2工作站工作站n工作站系统硬件n操作系统与应用软件本章小结本章小结 n首先介绍了多媒体光盘存储技术,叙述光盘的读写原理、类型、规格、格式及制作方法。n多媒体功能卡是构成多媒体系统的关键部件,本章以典型的产品为例讨论视频卡、音频卡和专用多媒体功能芯片的原理和功能。n输入输出设备是系统的重要配置,本章也简要介绍了扫描仪、显示器、触摸屏等设备的工作原理。n多媒体计算机系统一般分为3种类型:MPC,专用多媒体系统和多媒体工作站,本章后面几节介绍了它们的代表性系统或产品。

展开阅读全文
相关资源
正为您匹配相似的精品文档
相关搜索

最新文档


当前位置:首页 > 资格认证/考试 > 自考

电脑版 |金锄头文库版权所有
经营许可证:蜀ICP备13022795号 | 川公网安备 51140202000112号