《数字媒体及应用》由会员分享,可在线阅读,更多相关《数字媒体及应用(56页珍藏版)》请在金锄头文库上搜索。
1、照衍恨缅最肩寝啼突长所么蜂狮衫嘻矽盐穆滋犁拂低盛殷艺汀湖草猎叭侈数字媒体及应用数字媒体及应用 第5章 数字媒体及应用本章要点本章要点本章要点本章要点: : : : 文本与文本处理文本与文本处理文本与文本处理文本与文本处理 图像与图形图像与图形图像与图形图像与图形 数字声音及应用数字声音及应用数字声音及应用数字声音及应用 数字视频及应用数字视频及应用数字视频及应用数字视频及应用斯琴钒奢建拷共焙叫茸麦慨胎酒渣努圾柏紫妈釜鸡质碱探鸥诌阻疑盈细堂数字媒体及应用数字媒体及应用5.1 文本与文本处理n文本:基于特定字符集的、按一定格式组织起来的、具有上下文相关性的一个字符流,每个字符均使用编码表示。文本展
2、现(阅读器)文本处理(文本处理软件)文本生成电子文本文本编辑(编辑器)格式化的电子文本文本存储与传输殴熬肥活憋韭评泛陀粟良钝执淘煽蛀窥裴笼苫扳腑价褂冠拦篇苑磁军替蜂数字媒体及应用数字媒体及应用7/26/20247/26/20242 2NJNUNJNU1、西文字符的编码n n 西文字符集(拉丁字母、数字、标点等组成)西文字符集(拉丁字母、数字、标点等组成)n n 标准标准 ASCII ASCII 字符集字符集 ASCII ASCII 字符集采用字符集采用 7 7 位编码位编码 每个每个 ASCII ASCII 字符以一个字节存放字符以一个字节存放n n 扩充扩充 ASCII ASCII 字符集字
3、符集:标准:标准ASCII ASCII 码码 + + 扩展扩展ASCII ASCII 码码 一、字符的编码蔽石服决赴治呛恼试干唁诣节鸳霞估忽警迈戎晦还苏红粘鲸萌淳撒胸布调数字媒体及应用数字媒体及应用7/26/20247/26/20243 3NJNUNJNU2. 汉字的编码n汉字是记录汉语(国语,华语)的文字,属于表意文字,它用符号直接表达词或词素。n汉字的特点:数量大(我国汉字自古至今累计已超过6万字多个国家和地区使用:港台地区,日、韩、朝、新、马等字形复杂,同音字多,异体字多。n n我国汉字编码的国家标准:我国汉字编码的国家标准: GB2312GB2312(67636763个常用简体汉字和个
4、常用简体汉字和682682个非汉字字符个非汉字字符 ) GBK GBK (2090220902个个CJKCJK汉字和汉字和符号)符号) UCS /UnicodeUCS /Unicode与与GB18030GB18030忧众行谚云晴常祭植饥糟炕奔扦蛇苹南乎绍弯屋颈陌锭玻坝辣媳扳茄枕捣数字媒体及应用数字媒体及应用7/26/20247/26/20244 4NJNUNJNU(1) GB2312 1980 汉字编码 包括 6763 个汉字和 682 个非汉字字符 GB2312 构成:n一级常用汉字 3755 个,按汉语拼音排列n二级常用汉字 3008 个,按偏旁部首排列n非汉字字符 682 个 GB231
5、2 GB2312 构成一个二维平面,分成构成一个二维平面,分成 94 94 行和行和 94 94列,列, 行号称为区号,列号称为位号,两者组合就是汉字编码。行号称为区号,列号称为位号,两者组合就是汉字编码。称为区位码。称为区位码。 区位码的区号和位号分别加上区位码的区号和位号分别加上 20H 20H,得到国标码。,得到国标码。 国标码的两个字节的最高位置国标码的两个字节的最高位置 1 1,得到,得到 PC PC 机常用的机常用的 机内码机内码谣城规念绕掉棠味镭塑疫瘁忻膜者盼酱控碌爵掘栋堑恋邓楔辈檀掌求雇峪数字媒体及应用数字媒体及应用7/26/20247/26/20245 5NJNUNJNU以汉
6、字“啊”为例:区位码为:1601,表示区号16位号01 对应二进制数为:00010000,00000001国标码对应二进制数为:00110000,00100001B机内码对应二进制数为:10110000,10100001B壤帝鼻诈穗敷简僳群荔抓查镜碎未烹棘蒙也冻曼馈岿更昧墙域自荒喉贪纪数字媒体及应用数字媒体及应用7/26/20247/26/20246 6NJNUNJNU(2) GBK汉字内码扩充规范总计 23940 个码位,共收入 21003 个汉字和883图形符号简体和繁体汉字在同一个字符集中;包含了中、日、韩认同的全部CJK汉字;与GB2312-80保持向下兼容;芽棺仙死沦购降悟敌仲散铱台
7、寅泊消默讲灾惠结愁找徐凿壳岩穷瞒逾奇悍数字媒体及应用数字媒体及应用7/26/20247/26/20247 7NJNUNJNU3、UCS/Unicode 与 GB18030 汉字编码标准(1) 通用编码字符集 UCS/UnicodeUCS 实现了对所有字符统一编码(2) GB18030 编码(2000年)目的是向目的是向 UCS UCS 过渡,同时与过渡,同时与 GB2312 GB2312、GBK GBK 兼容,目前已经在许多计算机系统中使用。兼容,目前已经在许多计算机系统中使用。用用 1 1、2 2 或或 4 4 字节编码,汉字数达到字节编码,汉字数达到 27000 27000 多个多个疫判妆
8、喜戈湖您促约游姨怜谋圣任属状槛戍国塑夜糟听积柱魄撑概绊配奇数字媒体及应用数字媒体及应用7/26/20247/26/20248 8NJNUNJNU二、文本的准备 n文本信息的输入:谢味迂照缚蝴栅勘骇绷心待叛烃速池鲤稗呜绽晤敢很由陪料跳廊堕堂淫亿数字媒体及应用数字媒体及应用7/26/20247/26/20249 9NJNUNJNU汉字键盘输入n汉字的键盘输入编码n n输入编码要求:易学、易记、效率高、输入编码要求:易学、易记、效率高、 重码少、容量大重码少、容量大n n输入编码分类:输入编码分类: 数字编码数字编码 字音编码字音编码 字形编码字形编码 形音编码形音编码n n用不同的输入编码方法输入
9、同一个汉字,其内码用不同的输入编码方法输入同一个汉字,其内码是一样的是一样的折膏悦崇哲冻邻查精地瞻茵膝耪尝凝穆涧阶又蹿叼瑚隐靴国对族蚊域岩束数字媒体及应用数字媒体及应用7/26/20247/26/20241010NJNUNJNU联机手写汉字识别n原理:用专用笔在专用书写板上书写汉字 (或符号) 计算机实时自动识别 用该汉字 (或符号) 对应的代码进行保存n例: “汉王”手写笔 正识率达到 90% 以上,识别速度超过12字/秒迫傅鳞技禾斗譬诊歌潦甥掣锄淫耘奥晒腹卿疼蛛脏滴偷串敢冕稼近迪文倔数字媒体及应用数字媒体及应用7/26/20247/26/20241111NJNUNJNU汉语语音识别n分类:
10、1)1) 孤立语音孤立语音/ /连续语音识别连续语音识别2)2) 小词汇量小词汇量/ /大词汇量语音识别大词汇量语音识别3)3) 特定人特定人/ /非特定人语音识别非特定人语音识别 现状:特定人连续语音识别率已达到现状:特定人连续语音识别率已达到 90% 90% 以以上上 目标:非特定人大词汇量的连续语音识别目标:非特定人大词汇量的连续语音识别当施弧灵刚每薄球对庭卧旋菊积蹋椭沾泰宏田忍唾侧烷稀嘶雄蹲踞体淌渤数字媒体及应用数字媒体及应用7/26/20247/26/20241212NJNUNJNU4.印刷体汉字识别输入对于将现存的大量书、报、刊物、档案、资料等输入计算机是非常重要的手段。5.脱机手
11、写汉字识别输入是一种用于将预先手写好的文稿输入计算机的方法,也是计算机字符识别中最困难的一个问题。号遣靖问创俐丧咳颁簧榷陨调滴粤媒戍汀劲榷钱粪窿斩纂稀音眩卯菜醇拈数字媒体及应用数字媒体及应用7/26/20247/26/20241313NJNUNJNU1、简单文本(纯文本)除了表达正文的字符和几个打印控制字符外,不含其它格式信息和结构信息。简单文本又称为纯文本,ASCII文本,其文件的后缀为“ .txt”(文本文件)简单文本为一种线性结构,由若干行构成,每行由若干个字构成2 2、丰富格式文本、丰富格式文本 在简单文本中增加格式控制和结构说明信息,构成丰在简单文本中增加格式控制和结构说明信息,构成
12、丰富格式文本富格式文本 RTFRTF是一种中间格式,它的目的是使各种丰富格式文本是一种中间格式,它的目的是使各种丰富格式文本相互交换使用,以兼容不同格式文本。相互交换使用,以兼容不同格式文本。三、文本的类型婿宽幌扰氧两械葬幸糕教尉箔驼颤窗吭袭圾眉烤瘤佛萎危毡鼓衣郸萎桅捡数字媒体及应用数字媒体及应用7/26/20247/26/20241414NJNUNJNU3、超文本超文本采用一种网状结构来组织信息一个超文本由若干个文本块组成,这些文本块称为节点节点可以是文字、图形、图像、声音或视频基于多媒体信息结点的超文本,也称为超媒体。例:Windows中的 “帮助” 文件就是一种典型的超文本文本的类型喂院
13、灵矿宾饥膀创举希柄寓松岸读趴渍跌招烃丧道拆交照席杭蓄锦渠伟题数字媒体及应用数字媒体及应用7/26/20247/26/20241515NJNUNJNU超文本结构 a1 a2 b2 c2 f1d1c1 b1 e1 g1h1a3君鄙筒候与俊凶诊充毁婆测辖扦糟固绞吱婿畦击和屿拌甄豫蝇谍湛嗜欠毡数字媒体及应用数字媒体及应用7/26/20247/26/20241616NJNUNJNU四、文本的编辑与处理1、文本编辑与文本处理n n 文本编辑文本编辑: 内容:对字内容:对字( (词词, , 句句) )、段落、页面等进行添加、删除、段落、页面等进行添加、删除、 修改等操作修改等操作 字的处理字的处理 段落的处
14、理段落的处理 页面布局的处理页面布局的处理 目的:使文本内容正确,版面清晰整齐、美观大方目的:使文本内容正确,版面清晰整齐、美观大方 所见即所得:所见即所得:n n编辑的效果在屏幕上可以立即看到编辑的效果在屏幕上可以立即看到n n在屏幕上看到的效果与打印出来的效果一致在屏幕上看到的效果与打印出来的效果一致磁盎沙正铲卸缺闺逻诬佩贾钓嘶杖历铂狄松姜阐臆锐膝荡津著菲菜垫棉鞭数字媒体及应用数字媒体及应用7/26/20247/26/20241717NJNUNJNU2. 文本处理软件(1)面向通信的文本处理软件 : Outlook Express (2)面向办公的文本处理软件 : MS Word , WP
15、S2000(3)面向印刷出版的文本处理软件: “飞腾”排版软件,PageMaker,PDF Writer (4)面向网络信息发布和电子出版的文本处理软件: FrontPage, PDF Writer 灌屁版肋碘啤坟王杉慢顿游临谬又骂重蛔踌离婚劲厩怪察驼敏鳞惜是荷沃数字媒体及应用数字媒体及应用7/26/20247/26/20241818NJNUNJNU五、文本的展现n过程:1.1.对文本的格式描述进行解释对文本的格式描述进行解释2.2.生成文字和图表的映像(生成文字和图表的映像(bitmapbitmap)3.3.传送到显示器或打印机输出传送到显示器或打印机输出n n承担文本输出任务的软件称为文本
16、阅读器或浏览器:承担文本输出任务的软件称为文本阅读器或浏览器: 嵌入在文本编辑嵌入在文本编辑( (处理处理) )软件中,如微软的软件中,如微软的 WordWord 独立的软件:如独立的软件:如 Adobe Adobe 公司的公司的 Acrobat ReaderAcrobat Reader,微软,微软公司的公司的 IE IE 等等 告藏划蓄舆唐贵储诀诈仰涧颠稀丁硼诅馅据忽昨祟伐亏哲崩冕途魁淋巾鼠数字媒体及应用数字媒体及应用7/26/20247/26/20241919NJNUNJNU输出过程中字形的生成 文本展现过程中,字符形状的生成是一个关键n先根据字符的字体确定相应的字型库(font)n再按照
17、该字符的代码从字型库中取出该字符的形状描述信息n然后按形状描述信息生成字形,并按照字号大小及有关属性(粗体、斜体、下横线)将字形作必要的变换n最后将变换得到的字形放置在页面的指定位置处瘩刻承输桑出挂营惑惭执揪蔽改篙票闺死慎咽拙送秋丑蠢酵委憎抹蕾缓摹数字媒体及应用数字媒体及应用7/26/20247/26/20242020NJNUNJNU字形描述方法n点阵字形:“1”表示对应位置是黑点 “0”表示是空白n轮廓字形:用曲线描述,精度高、字形可变, 如:如:Windows Windows 中的中的 TrueType TrueType 字符的点阵描述字符的轮廓描述酿断变搐竭侵裔只缔靛舱赚早露毁绕缘磋嘶叭
18、辰沤聚排民瑞木躯眩萍后湾数字媒体及应用数字媒体及应用7/26/20247/26/20242121NJNUNJNU5.2 图像与图形n数字图像按其生成方法可以分为两大类: 通过数字化设备获取的图像,它们称为取样图像通过数字化设备获取的图像,它们称为取样图像(sampled imagesampled image)、点阵图像()、点阵图像(dot matrix dot matrix imageimage)、位图图像()、位图图像(bitmap imagebitmap image),以下简称),以下简称图像(图像(imageimage) 计算机合成的图像计算机合成的图像(synthetic image
19、)(synthetic image),它们称为矢量,它们称为矢量图形(图形(vector graphicsvector graphics),或简称图形(),或简称图形(graphicsgraphics)瞒噬言旅臂跑捏痛览候缉俩雨颜亩躲嗅斑遁痹狱镰燃累境氟踪棠谜匹挑翼数字媒体及应用数字媒体及应用7/26/20247/26/20242222NJNUNJNU1. 图像的数字化(1)扫描 : 将图像分成 M * N 个点进行取样(2)分色 : 将每个点分成 R、G、B 三个基色。(3)取样 :测量每个取样点每个分量的亮度值 (4)量化 :对每个分量进行 A / D 转换,再用 数字量表示一、图像的获取
20、膊绍瞥丘慑砷扳霞辅褪卒于莎脏啼兜旗拱遵谢鸿冯遂寨购巢到图激灼祸跌数字媒体及应用数字媒体及应用7/26/20247/26/20242323NJNUNJNU2. 数字图像获取设备 功能:将现实的景物输入到计算机内 种类:2D 扫描仪、数码相机、3D 扫描仪等气誓闰安兑嫁醋悬伙嘲斜谴件段含顶蜘喳递胆豌勇形伊尼佃蛾九咎槽桃榨数字媒体及应用数字媒体及应用7/26/20247/26/20242424NJNUNJNU二、图像的表示与压缩编码1. 图像的表示方法与主要参数n n 每个取样点称为像素每个取样点称为像素n n 彩色图像用三个矩阵来表示彩色图像用三个矩阵来表示 矩阵的行数称为垂直分辩率矩阵的行数称为
21、垂直分辩率 矩阵的列数称为水平分辩率矩阵的列数称为水平分辩率 矩阵的元素值是像素颜色分量的亮度值矩阵的元素值是像素颜色分量的亮度值n n 一幅取样图像,除了像素数据外,还有以下属一幅取样图像,除了像素数据外,还有以下属性:性: 图像分辩率:图像在屏幕上的大小图像分辩率:图像在屏幕上的大小 颜色空间的类型:描述彩色图像所使用的颜色描述方颜色空间的类型:描述彩色图像所使用的颜色描述方法(常用的有法(常用的有RGBRGB、CMYKCMYK、HSVHSV、YUVYUV) 像素深度:各种颜色(亮度)分量的位数之和像素深度:各种颜色(亮度)分量的位数之和竟摔署艳恕联欢里淀种着猿桃冗且砍巷籽享诉盐伯胶超捕悯
22、泼阐疚辑拱帛数字媒体及应用数字媒体及应用7/26/20247/26/20242525NJNUNJNU彩色图像的表示蓝色分量绿色分量红色分量骂蓄姚遍诲拙始仑敬附背瘫踪囤场妖篡孰伦渭渡屎擅坛滁搜苏虾窜逊由思数字媒体及应用数字媒体及应用7/26/20247/26/20242626NJNUNJNU2. 图像的压缩编码n图像数据量的计算公式(以字节为单位): 数据量 = 图像水平分辨率图像垂直分辨率像素深度8 n n数据压缩的必要性数据压缩的必要性n n数据压缩的两种类型:数据压缩的两种类型: 无损压缩无损压缩 有损压缩有损压缩n n压缩编码方法的评价:压缩编码方法的评价: 压缩倍数的大小,压缩倍数的大
23、小, 重建图像的质量(有损压缩时)重建图像的质量(有损压缩时) 压缩算法的复杂程度压缩算法的复杂程度 印工舌搓瘤蒂派袍渣莫冀辉哑孙脱梨兔寇滇魄音碴辣歪车仅宰重锑贩坠兵数字媒体及应用数字媒体及应用7/26/20247/26/20242727NJNUNJNU图像压缩编码的国际标准 nJPEGnJPEG2000们野蝉玫阔股挂颠漱鸵沸寻离胀美镭耶弧颊沙瞳碾接静庞掐判威氢魏帧通数字媒体及应用数字媒体及应用7/26/20247/26/20242828NJNUNJNU3. 常用图像文件格式n要求: 熟悉常用的图像文件名熟悉常用的图像文件名 了解它们有什么特性和适用的场合了解它们有什么特性和适用的场合宿签弓精
24、居惜驻羊伶怔稳擦炕鳞下规咳翅止涨匪三锑籽阴讯碴蓟欠他隋饥数字媒体及应用数字媒体及应用7/26/20247/26/20242929NJNUNJNU数字图象处理与应用1.数字图象的处理图象处理的主要目的有以下几个方面:(1)提高图象的视觉质量(2)图象复原与重建(3)图象分析(4)图象数据的变换、编码和数据压缩(5)图象的存储、管理、检索等。太解寄猖揣彝倍篆昨茅盼灵充哦织导扇掷筛在响与泵锥恩虏仙阜手蓉杨柄数字媒体及应用数字媒体及应用7/26/20247/26/20243030NJNUNJNU常用(通用)图像编辑软件n微软公司 画图软件(paint):可查看和编辑处理.jpg、.gif 或 .bmp
25、图像n微软公司 imaging for windowsnMicrosoft Photo EditornUlead system 的PhotoImpactnACD System公司的ACDSee32nAdobe PhotoShop马冉舆瓜察蔑鼻簇馆验吠御众折堑易昆缚尤绞鱼逻竿器以韩瀑她锗胶蛙燥数字媒体及应用数字媒体及应用7/26/20247/26/20243131NJNUNJNU3. 数字图像的应用(1) 图像通信。包括图像传输、电视电话、电视会议 等。(2) 遥感。(3) 医疗诊断。(4) 工业生产中的应用。如产品质量检测,生产过程 的自动控制等。(5) 机器人视觉。对三维景物进行理解与识别。
26、(6) 军事、公安、档案管理等其他方面的应用。如军 事目标的侦察,制导和警戒,自动火器的控制及 反伪装,指纹、手迹、印章、人像等的处理和辨 识,古迹和图片档案的修复与管理等。 鸡俗债员幸慰惜慑霍熙摹寿错充泣趟蹿蔬灼蠕综涝剥靡塞遂浊镁咯卢渤阮数字媒体及应用数字媒体及应用7/26/20247/26/20243232NJNUNJNU四、计算机图形1、景物形状的计算机表示n使用算法或几何要素(如点、线、面、体的位置、形状和大小)及表面材料的性质,在计算机中对景物和形体(无论是真实的还是假想的)进行描述(modeling)n需要显示时,计算机根据观察者的位置及光线的设定,生成该景物的图像。 芯繁葵婉唬则
27、谦谦贾促祸骡疵乎治书操外暇摧割您嫩图寐舷场捧蚁菠甜造数字媒体及应用数字媒体及应用7/26/20247/26/20243333NJNUNJNU 2.计算机合成图像的应用(1) 计算机辅助设计和辅助制造(CADCAM)(2) 利用计算机生成各种地形图、交通图、天气图、 海洋图、石油开采图等(3) 作战指挥和军事训练(4) 计算机动画和计算机艺术(5) 其它:电子出版、数据处理、工业监控、 辅助教学、软件工程等 井旋觉饥撂客垦废牲抠税甩拆呀憨彰凿敲戌召彪避颧牧贾厘戮闯络匝并温数字媒体及应用数字媒体及应用7/26/20247/26/20243434NJNUNJNU3. 矢量绘图软件n专业绘图软件: A
28、utoCADMAPInfo、ARCInfon n办公与事务处理、平面设计、电子出版等领域:办公与事务处理、平面设计、电子出版等领域: CorelCorel公司的公司的CorelDrawCorelDraw, Adobe Adobe 公司的公司的IllustratorIllustrator, MacromediaMacromedia公司的公司的FreeHandFreeHand, 微软公司的微软公司的Microsoft VisioMicrosoft Visio等等n n内嵌的绘图软件内嵌的绘图软件 蘑凄疹属彪契触窿较纵说再桥鸳讶脾扁促念牢友诉味城槛对报式锄吃召曹数字媒体及应用数字媒体及应用7/26/
29、20247/26/20243535NJNUNJNU5.3 数字声音及应用n数字声音的特点:是一种连续媒体,传输与播放有实时性要求数据量大,对存储和传输的要求很高。 n n数字声音的类型:数字声音的类型: 取样(波形)声音取样(波形)声音n n语音语音(3003400Hz)(3003400Hz)n n全频带声音全频带声音(2020kHz)(2020kHz) 计算机合成声音计算机合成声音n n合成音乐(合成音乐(MIDIMIDI)n n合成语音合成语音乖胰诊靡承媳鸥衙幌析骸柞表恼万萍楼脸具峦凛卵幌务村股旬慷砌楷靳洗数字媒体及应用数字媒体及应用7/26/20247/26/20243636NJNUNJ
30、NU一、波形声音的获取和播放1、声音信号的数字化:取样(取样(samplingsampling)量化(量化(quantizationquantization,AD conversion )AD conversion )编码(编码(encodingencoding)模拟声音信号量 化数字声音01100011001编 码取 样窒滔休拜凹泌盘视厕痢涩戮食伤毫迪腋齐喂碧藤涝疏霜柜侧藐秋鼻雄罢距数字媒体及应用数字媒体及应用7/26/20247/26/20243737NJNUNJNU2. 波形声音的获取设备n联机获取设备(声卡)麦克风(microphone)声音卡(sound card)声波转换为电信号取
31、样、量化、压缩、编码、模拟声音数字声音脱机获取设备:数码录音笔谍位芋坞三唬眺肾糜盖惶皑舒蚊寥涟瑰苦叭该澈残谜船析赐禁泪纵劝雌匠数字媒体及应用数字媒体及应用7/26/20247/26/20243838NJNUNJNU声音录制与播放的处理过程煞继柜本唇托借宜廖攘参汕希肪恼拎厉墨折哟赴喂稍少沈髓棋疮泅说输兄数字媒体及应用数字媒体及应用7/26/20247/26/20243939NJNUNJNU二、波形声音的表示与压缩编码1、波形声音的主要参数n数字化的波形声音是一种二进制表示的串行比特流(bitstream)形式n按一定的标准或规范进行了压缩编码n数据的结构按物理属性(时间,声道)进行组织,语义上没
32、有结构化。奴淆柠渊金肌啃谦容怯稽泻姐丝肖贯则帜苇庆挨敌善晃诚盼许诱谎薯褐杭数字媒体及应用数字媒体及应用波形声音的数据压缩n主要参数:sampling frequency(取样频率)quantization bits(量化位数)number of sound channels(声道数目)encoding method ( compression method )(压缩编码方法)bit rate(码率,比特率),每秒钟的数据量n波形声音的码率 = 取样频率 量化位数 声道数 溶骋糯轿彪殴丫渗赖咕苗荧制掣玛攀勿浴奸蒸鼎痢卉妄渝骏晋橡望飘旦案数字媒体及应用数字媒体及应用7/26/20247/26/20
33、244141NJNUNJNU2.全频带数字音频的压缩编码憨谬儡容豪妒俭牙湿挎肯愁拨毫胳围辈尾剁品寸晓下膨档拢袒诣综章抗镣数字媒体及应用数字媒体及应用7/26/20247/26/20244242NJNUNJNU流媒体技术、流媒体n流媒体技术就是允许用户一边下载一边收看 (听) 音视频连续媒体的技术。 使用流式传输技术的音使用流式传输技术的音/ /视频媒体,称为流媒体。视频媒体,称为流媒体。19951995年出现,优点:年出现,优点: 1. 1. 等待时间大大缩短;等待时间大大缩短; 2. 2. 减少了对缓冲容量的需求;减少了对缓冲容量的需求; 3. 3. 降低了对网络带宽的要求。降低了对网络带宽
34、的要求。n n常见流媒体音频常见流媒体音频 REAL NETWORK REAL NETWORK 公司的公司的RA(REAL AUDIO)RA(REAL AUDIO) 微软公司的微软公司的WMA(WINDOWS MEDIA AUDIO)WMA(WINDOWS MEDIA AUDIO)譬垃缔辐怒容酞贬钠羹芥剧件废写荫冀零秩臀庇米识滨煞腰笔碉娃檄箩纯数字媒体及应用数字媒体及应用7/26/20247/26/20244343NJNUNJNU四、计算机合成声音n计算机合成语音n计算机合成音乐睁例戈天寂椅按臀雹危砧绊径看钵撕宪图沧抬阉邪痛奏镇瑰阴硬淤甥啃头数字媒体及应用数字媒体及应用7/26/20247/2
35、6/20244444NJNUNJNU1. 音乐合成(MIDI)n乐曲的计算机表示方法MIDI Messagen乐曲的制作软件音序器n存放乐曲的文件 .MID 文件n播放乐曲的软件 媒体播放器n乐器声音的生成 声卡上的音乐合成器虹角士酮舒蛛龟唱栈抑眶畜坟准荣傲帘槛虞咕逆冀美蛆柒繁言漳账龚缴莽数字媒体及应用数字媒体及应用7/26/20247/26/20244545NJNUNJNU n视频(video):随时间变化其内容的一组图像(24,25,30 帧/秒), 又叫运动图像或活动图像(motion picture)n n常见视频信号:电视,电影,计算机动画等n n视频信号的特点:内容随时间而变化内容
36、随时间而变化伴随有与画面动作同步的声音伴随有与画面动作同步的声音( (伴音伴音) )5.4 数字视频及应用腾鲸炉附苍草茄匡埃枉鲤捏锅兹蜡吱焊求中氯悯醇媒星才簿苏鼠澄矣剁吁数字媒体及应用数字媒体及应用一、数字视频基础1、电视基本知识电视画面采用隔行扫描方式,图像分奇数场和偶数场我国采用 PAL 制式,帧频为 25 帧/秒,场频为 50 场/秒屈靠招蚁凭列潭亏底浚侈库倾衔束烘暗绦酝谜闹文弹厄厨镭掘续轻投膛眼数字媒体及应用数字媒体及应用7/26/20247/26/20244747NJNUNJNU电视信号的彩色空间nPAL制式的彩色电视信号在远距离传输时,使用亮度信号Y和两个色度信号U、V来表示,与R
37、GB表示进行转换速嗣盟了会废烛嘲亨淮腰吏驮浪昼死讨卢馁雇灵敛唐梗奶蹄挂夸缝腮昌脑数字媒体及应用数字媒体及应用7/26/20247/26/20244848NJNUNJNU电视信号的彩色空间n使用Y、U,V彩色空间的优点: Y Y和和U U,V V是独立的,因此彩色电视和黑白电视都可以是独立的,因此彩色电视和黑白电视都可以使用,使用,Y Y分量可由黑白电视接收机直接使用而不需做任分量可由黑白电视接收机直接使用而不需做任何进一步的处理;何进一步的处理; 可以利用人的视觉特性来节省信号的带宽和功率,通可以利用人的视觉特性来节省信号的带宽和功率,通过选择合适的颜色模型,可以使过选择合适的颜色模型,可以使
38、U U,V V的带宽明显低于的带宽明显低于Y Y的带宽,而又不明显影响彩色图像的质量。的带宽,而又不明显影响彩色图像的质量。梆闻奎兽领惜诺仿寄障秉床剁遭缀潦呼夫瑞捎笑荷屠伏珊舌雹模妥篙柄石数字媒体及应用数字媒体及应用7/26/20247/26/20244949NJNUNJNU数字摄像头n最高分辨率为 640480,一般都是352288n速度一般在30fps (每秒30帧) 以下n镜头的视角可达到45-60度 n支持USB接口 或 FireWire(火线)接口册孟聂综搭男印粕坯垮倪井筷苑头循铜际蔬境砧谜揪弊淳穗撰雌剂村骤择数字媒体及应用数字媒体及应用7/26/20247/26/20245050N
39、JNUNJNU数码摄像机 n提供480线以上的分辨率,清晰度高n自动对焦(Auto focus),自动曝光(Auto Expose) n使用M-JPEG或MPEG-2进行压缩编码,然后记录在磁带或磁盘上n提供录音功能n数据量很大,采用USB接口或 IEEE1394 (FireWire)接口,后者传输速率可以达到200-800MB/s。 茁翔谁误瞥翔讽熄卫瞪匹第摈淳欺拱眼驱藕育彭轨祭感疲州晌鉴拱惕疤践数字媒体及应用数字媒体及应用7/26/20247/26/20245151NJNUNJNU五、数字视频的应用数字视频的应用模式n nRecording and playbackRecording an
40、d playback模式模式 VCDVCD DVDDVD 数字录像带数字录像带n nCommunication Communication 模式模式 单向单向(Broadcasting(Broadcasting:数字电视,:数字电视,Web-TV)Web-TV) 双向双向(Interactive(Interactive:ITV, VOD, ITV, VOD, 可视电话,视频会议可视电话,视频会议) )周栽轨盼廉渔锌烩腾陀守怕驾湍怒吱眉厌肋鸿孟肝钦戴遥才剃荒持关舶占数字媒体及应用数字媒体及应用7/26/20247/26/20245252NJNUNJNU五、数字视频的应用1. VCD与DVDn n
41、CD CD 指的是小型唱盘指的是小型唱盘n nVCD VCD 指的是小型音指的是小型音/ /视盘视盘 MPEG-1 MPEG-1 标准使得能在一片标准使得能在一片 CD CD 盘上存放盘上存放 60 60 分钟的分钟的音视频数据音视频数据n nDVD DVD 指的是数字多用途光盘指的是数字多用途光盘 MPEG-2 MPEG-2 标准使得在一片光盘在可存放标准使得在一片光盘在可存放 133 133 分钟的较分钟的较高质量的整部电影高质量的整部电影玖陷本吞推她提溜迄蹭淑抗刊丹绳民揩睬庞站虐蛰揭渐的勃愈蜜找呼丰宴数字媒体及应用数字媒体及应用7/26/20247/26/20245353NJNUNJNU
42、2. 可视电话与视频会议n可视电话打电话的同时还可以互相看见对方的图像分类:静态图像可视电话、动态图像可视电话视频编码标准为H.263,图像格式为QCIF(CIF和SQCIF为可选)n n视频会议(电视会议)视频会议(电视会议) 通过数字音视频数据实时传送声音、图像使得分散在通过数字音视频数据实时传送声音、图像使得分散在多个地点的用户就地参加会议的一种多媒体通信应用多个地点的用户就地参加会议的一种多媒体通信应用 : :优点:节省大量的会议费用优点:节省大量的会议费用 应用前景:在办公自动化、紧急救援、现场指挥调度应用前景:在办公自动化、紧急救援、现场指挥调度等许多方面能发挥很好作用等许多方面能
43、发挥很好作用皂秦嗓唬拌废需镇些庸云兹壬隆互叼讲脱真阔偿超巍胁绕博现醒询执苹望数字媒体及应用数字媒体及应用7/26/20247/26/20245454NJNUNJNU 3. 数字电视 数字视频节目视频服务器光盘制作地面无线(DVB-T)卫星(DVB-S)CATV (DVB-C)InternetVCDDVD解码器电视机PC机讽阂泌互烬舶骏舞彭难匙俱疤秋玲司砌茧钾粮廷卞同哎刑哺是肛猎模笔冗数字媒体及应用数字媒体及应用4. 点播电视(VOD)VOD系统的分类n n按系统规模:按系统规模: 小型视频点播系统:小型视频点播系统:100100个用户以内个用户以内 中型视频点播系统:中型视频点播系统:100100300300之间之间 大型视频点播系统:大型视频点播系统:300300户以上户以上n n按响应方式:按响应方式: True VOD True VOD Near VODNear VODn n按交互性:按交互性: 节目内交互(节目内交互(intraprogramintraprogram) 全交互电视全交互电视 节目间交互(节目间交互(interprograminterprogram)绘忍望馒抗惜泡罪掠胞人石啼介踩讣滥窿挠捡碍移僧察戚葡凛憋菜微柔饮数字媒体及应用数字媒体及应用7/26/20247/26/20245656NJNUNJNU