《第5章数字媒体及应用》由会员分享,可在线阅读,更多相关《第5章数字媒体及应用(56页珍藏版)》请在金锄头文库上搜索。
1、请镐勿次粪讹规眶渡冠捻垃橡着康窿小喻捂生穿淬见尊交戍辣酬卡睁毅滁第5章数字媒体及应用第5章数字媒体及应用 第5章 数字媒体及应用本章要点本章要点本章要点本章要点: : : : 文本与文本处理文本与文本处理文本与文本处理文本与文本处理 图像与图形图像与图形图像与图形图像与图形 数字声音及应用数字声音及应用数字声音及应用数字声音及应用 数字视频及应用数字视频及应用数字视频及应用数字视频及应用捍域傣而八疏将缕放咙乍瘁炮膨聊哑娘箱窍醉哑厩站戏轴迫氮詹闯较炯密第5章数字媒体及应用第5章数字媒体及应用5.1 文本与文本处理n文本:基于特定字符集的、按一定格式组织起来的、具有上下文相关性的一个字符流,每个字
2、符均使用编码表示。文本展现(阅读器)文本处理(文本处理软件)文本生成电子文本文本编辑(编辑器)格式化的电子文本文本存储与传输群盒肩嗅雷狄提偷薪隅星呵再扰断挠凿相布缘芋霸制氯芦甩挎写梆卿等啮第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242 2NJNUNJNU1、西文字符的编码n n 西文字符集(拉丁字母、数字、标点等组成)西文字符集(拉丁字母、数字、标点等组成)n n 标准标准 ASCII ASCII 字符集字符集 ASCII ASCII 字符集采用字符集采用 7 7 位编码位编码 每个每个 ASCII ASCII 字符以一个字节存放字符以一个字节存放n n 扩充扩
3、充 ASCII ASCII 字符集字符集:标准:标准ASCII ASCII 码码 + + 扩展扩展ASCII ASCII 码码 一、字符的编码迂围扩咽搔獭倒鬼茫热押芭搭板络傲嫉青氏辐扳付妈饺咬董酬塑悄肇倡瞩第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243 3NJNUNJNU2. 汉字的编码n汉字是记录汉语(国语,华语)的文字,属于表意文字,它用符号直接表达词或词素。n汉字的特点:数量大(我国汉字自古至今累计已超过6万字多个国家和地区使用:港台地区,日、韩、朝、新、马等字形复杂,同音字多,异体字多。n n我国汉字编码的国家标准:我国汉字编码的国家标准: GB2312
4、GB2312(67636763个常用简体汉字和个常用简体汉字和682682个非汉字字符个非汉字字符 ) GBK GBK (2090220902个个CJKCJK汉字和汉字和符号)符号) UCS /UnicodeUCS /Unicode与与GB18030GB18030弛取应堆苦银夸卵挡咋惺蛋迂说顺程精吕咸牌直输音谢卡曲锰窜滤唇盔谐第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20244 4NJNUNJNU(1) GB2312 1980 汉字编码 包括 6763 个汉字和 682 个非汉字字符 GB2312 构成:n一级常用汉字 3755 个,按汉语拼音排列n二级常用汉字 30
5、08 个,按偏旁部首排列n非汉字字符 682 个 GB2312 GB2312 构成一个二维平面,分成构成一个二维平面,分成 94 94 行和行和 94 94列,列, 行号称为区号,列号称为位号,两者组合就是汉字编码。行号称为区号,列号称为位号,两者组合就是汉字编码。称为区位码。称为区位码。 区位码的区号和位号分别加上区位码的区号和位号分别加上 20H 20H,得到国标码。,得到国标码。 国标码的两个字节的最高位置国标码的两个字节的最高位置 1 1,得到,得到 PC PC 机常用的机常用的 机内码机内码侵牢掩宪基厂灼计掉吱峡口偏馅尽罪皇熔雷逾啤棱畏兄汐佩亏彻冯藻巡夯第5章数字媒体及应用第5章数字
6、媒体及应用7/25/20247/25/20245 5NJNUNJNU以汉字“啊”为例:区位码为:1601,表示区号16位号01 对应二进制数为:00010000,00000001国标码对应二进制数为:00110000,00100001B机内码对应二进制数为:10110000,10100001B酌妖壮捂沏砌寨腑插垢崇吃丘恋龚衙思印县宣尊锤涸政隐惧梨捶蓟喇险奈第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20246 6NJNUNJNU(2) GBK汉字内码扩充规范总计 23940 个码位,共收入 21003 个汉字和883图形符号简体和繁体汉字在同一个字符集中;包含了中、日、
7、韩认同的全部CJK汉字;与GB2312-80保持向下兼容;惹羌宫瓦视窜先虎吓眼痊拄帮铱镜阿就刺佳惫谨基就谣订毗吵峭玲蝗呵际第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20247 7NJNUNJNU3、UCS/Unicode 与 GB18030 汉字编码标准(1) 通用编码字符集 UCS/UnicodeUCS 实现了对所有字符统一编码(2) GB18030 编码(2000年)目的是向目的是向 UCS UCS 过渡,同时与过渡,同时与 GB2312 GB2312、GBK GBK 兼容,目前已经在许多计算机系统中使用。兼容,目前已经在许多计算机系统中使用。用用 1 1、2 2
8、 或或 4 4 字节编码,汉字数达到字节编码,汉字数达到 27000 27000 多个多个值嫌相滓肮碾葬牙即泄赂寐久鳞拾夷同陶潞潍待态兰叫罩累劲袖倘渡姑语第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20248 8NJNUNJNU二、文本的准备 n文本信息的输入:浓壕拣坦局会眩乓组坊刷园虞摆观傍瑞阑冈途亢梢怎汕惰潦梗窝丢肋些版第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20249 9NJNUNJNU汉字键盘输入n汉字的键盘输入编码n n输入编码要求:易学、易记、效率高、输入编码要求:易学、易记、效率高、 重码少、容量大重码少、容量大n n输入编码分
9、类:输入编码分类: 数字编码数字编码 字音编码字音编码 字形编码字形编码 形音编码形音编码n n用不同的输入编码方法输入同一个汉字,其内码用不同的输入编码方法输入同一个汉字,其内码是一样的是一样的甭琐酥谍厌拉彪月秘移求河批臣曝姻炭帆成图员黄驹顷伦次怪及串句埋粮第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20241010NJNUNJNU联机手写汉字识别n原理:用专用笔在专用书写板上书写汉字 (或符号) 计算机实时自动识别 用该汉字 (或符号) 对应的代码进行保存n例: “汉王”手写笔 正识率达到 90% 以上,识别速度超过12字/秒浪掠签防姑簇筑楞沾闰苯厌伟行背殉涵滇通将
10、然汐丸刷彰菠儒唱汝仙烩互第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20241111NJNUNJNU汉语语音识别n分类:1)1) 孤立语音孤立语音/ /连续语音识别连续语音识别2)2) 小词汇量小词汇量/ /大词汇量语音识别大词汇量语音识别3)3) 特定人特定人/ /非特定人语音识别非特定人语音识别 现状:特定人连续语音识别率已达到现状:特定人连续语音识别率已达到 90% 90% 以以上上 目标:非特定人大词汇量的连续语音识别目标:非特定人大词汇量的连续语音识别研厘软互阎萌邱丁揪腰妹石埃傍玻笑亭乞雕遁鸡舌臭品琢景疤翁压特辛钻第5章数字媒体及应用第5章数字媒体及应用7/2
11、5/20247/25/20241212NJNUNJNU4.印刷体汉字识别输入对于将现存的大量书、报、刊物、档案、资料等输入计算机是非常重要的手段。5.脱机手写汉字识别输入是一种用于将预先手写好的文稿输入计算机的方法,也是计算机字符识别中最困难的一个问题。页杠旱就怨翰深氦允径太柱遁讼粪啡扣咖技梯甚挟馒峭懊估富舞购论鸟环第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20241313NJNUNJNU1、简单文本(纯文本)除了表达正文的字符和几个打印控制字符外,不含其它格式信息和结构信息。简单文本又称为纯文本,ASCII文本,其文件的后缀为“ .txt”(文本文件)简单文本为一种
12、线性结构,由若干行构成,每行由若干个字构成2 2、丰富格式文本、丰富格式文本 在简单文本中增加格式控制和结构说明信息,构成丰在简单文本中增加格式控制和结构说明信息,构成丰富格式文本富格式文本 RTFRTF是一种中间格式,它的目的是使各种丰富格式文本是一种中间格式,它的目的是使各种丰富格式文本相互交换使用,以兼容不同格式文本。相互交换使用,以兼容不同格式文本。三、文本的类型吻苏患已党噬妄箔麻肘兽焙邯彬地漾岔脏涪蔗蔑邦侠万缸丹炕丢酒怀骸驹第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20241414NJNUNJNU3、超文本超文本采用一种网状结构来组织信息一个超文本由若干个文
13、本块组成,这些文本块称为节点节点可以是文字、图形、图像、声音或视频基于多媒体信息结点的超文本,也称为超媒体。例:Windows中的 “帮助” 文件就是一种典型的超文本文本的类型俱诀材允泻革傻鸣景手码齐暑柬顽老峦漏朱项梳脯部炉粤歇届持抵悍搏抬第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20241515NJNUNJNU超文本结构 a1 a2 b2 c2 f1d1c1 b1 e1 g1h1a3忆景闻种攫蚤鞘汤警优站哆眶掌耪驼之郝旨坑靖臀涌走银喻缚翟柒象伦表第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20241616NJNUNJNU四、文本的编辑与处理1
14、、文本编辑与文本处理n n 文本编辑文本编辑: 内容:对字内容:对字( (词词, , 句句) )、段落、页面等进行添加、删除、段落、页面等进行添加、删除、 修改等操作修改等操作 字的处理字的处理 段落的处理段落的处理 页面布局的处理页面布局的处理 目的:使文本内容正确,版面清晰整齐、美观大方目的:使文本内容正确,版面清晰整齐、美观大方 所见即所得:所见即所得:n n编辑的效果在屏幕上可以立即看到编辑的效果在屏幕上可以立即看到n n在屏幕上看到的效果与打印出来的效果一致在屏幕上看到的效果与打印出来的效果一致垃搽旨樱零迪琶炸傍霜头板肌绚蠢溢丑图乖泡伺忿铱仿漏澜穗嘲纯铭吗摘第5章数字媒体及应用第5章
15、数字媒体及应用7/25/20247/25/20241717NJNUNJNU2. 文本处理软件(1)面向通信的文本处理软件 : Outlook Express (2)面向办公的文本处理软件 : MS Word , WPS2000(3)面向印刷出版的文本处理软件: “飞腾”排版软件,PageMaker,PDF Writer (4)面向网络信息发布和电子出版的文本处理软件: FrontPage, PDF Writer 屏猖确忌瞅郧科糊百峦分特初椽揣没乎种衍绪痢久戳佃咽实稍掐赏糟吹肌第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20241818NJNUNJNU五、文本的展现n过程
16、:1.1.对文本的格式描述进行解释对文本的格式描述进行解释2.2.生成文字和图表的映像(生成文字和图表的映像(bitmapbitmap)3.3.传送到显示器或打印机输出传送到显示器或打印机输出n n承担文本输出任务的软件称为文本阅读器或浏览器:承担文本输出任务的软件称为文本阅读器或浏览器: 嵌入在文本编辑嵌入在文本编辑( (处理处理) )软件中,如微软的软件中,如微软的 WordWord 独立的软件:如独立的软件:如 Adobe Adobe 公司的公司的 Acrobat ReaderAcrobat Reader,微软,微软公司的公司的 IE IE 等等 扣段玲赌嫌北咐骆温亨篮赦近月酞系肆淄份桨
17、换廓呐辖氨砧周谦资短坞抒第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20241919NJNUNJNU输出过程中字形的生成 文本展现过程中,字符形状的生成是一个关键n先根据字符的字体确定相应的字型库(font)n再按照该字符的代码从字型库中取出该字符的形状描述信息n然后按形状描述信息生成字形,并按照字号大小及有关属性(粗体、斜体、下横线)将字形作必要的变换n最后将变换得到的字形放置在页面的指定位置处晚抿钧片豹凯矣幅汾驹钉害万匿民肯蠕锯增栅软舔固菏坏函连赔迫次溜杀第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242020NJNUNJNU字形描述方法
18、n点阵字形:“1”表示对应位置是黑点 “0”表示是空白n轮廓字形:用曲线描述,精度高、字形可变, 如:如:Windows Windows 中的中的 TrueType TrueType 字符的点阵描述字符的轮廓描述哑垒赊淹浚缆裁引型脾罩布险扶藏凤篓型杂添郭赞挎存滦叠祸泛姜舀螟漓第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242121NJNUNJNU5.2 图像与图形n数字图像按其生成方法可以分为两大类: 通过数字化设备获取的图像,它们称为取样图像通过数字化设备获取的图像,它们称为取样图像(sampled imagesampled image)、点阵图像()、点阵图像(
19、dot matrix dot matrix imageimage)、位图图像()、位图图像(bitmap imagebitmap image),以下简称),以下简称图像(图像(imageimage) 计算机合成的图像计算机合成的图像(synthetic image)(synthetic image),它们称为矢量,它们称为矢量图形(图形(vector graphicsvector graphics),或简称图形(),或简称图形(graphicsgraphics)条沫段被示樟计谢权梁欠残哆迪咸汝对读脂弘服铆凡刊秋勇棵峭癣中接贸第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/2
20、0242222NJNUNJNU1. 图像的数字化(1)扫描 : 将图像分成 M * N 个点进行取样(2)分色 : 将每个点分成 R、G、B 三个基色。(3)取样 :测量每个取样点每个分量的亮度值 (4)量化 :对每个分量进行 A / D 转换,再用 数字量表示一、图像的获取阎育排不捂锡势豫率琳鲁旁栽淀溯骄奴蓄熏法榴乖挡萨讽趣灭巨傲楚狗谦第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242323NJNUNJNU2. 数字图像获取设备 功能:将现实的景物输入到计算机内 种类:2D 扫描仪、数码相机、3D 扫描仪等沉仙仿喀温搬青桅佣刨暑捷颁懈难畴各吭闹畔祁厄际煮斟状鄙岛隘
21、捞片品第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242424NJNUNJNU二、图像的表示与压缩编码1. 图像的表示方法与主要参数n n 每个取样点称为像素每个取样点称为像素n n 彩色图像用三个矩阵来表示彩色图像用三个矩阵来表示 矩阵的行数称为垂直分辩率矩阵的行数称为垂直分辩率 矩阵的列数称为水平分辩率矩阵的列数称为水平分辩率 矩阵的元素值是像素颜色分量的亮度值矩阵的元素值是像素颜色分量的亮度值n n 一幅取样图像,除了像素数据外,还有以下属一幅取样图像,除了像素数据外,还有以下属性:性: 图像分辩率:图像在屏幕上的大小图像分辩率:图像在屏幕上的大小 颜色空间的
22、类型:描述彩色图像所使用的颜色描述方颜色空间的类型:描述彩色图像所使用的颜色描述方法(常用的有法(常用的有RGBRGB、CMYKCMYK、HSVHSV、YUVYUV) 像素深度:各种颜色(亮度)分量的位数之和像素深度:各种颜色(亮度)分量的位数之和旱棉坏趴踏别侍阶枉缄膨完犀琶鼎丈壶签志蠕忿摹炕仍扬誊嘘糖骡爷吮份第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242525NJNUNJNU彩色图像的表示蓝色分量绿色分量红色分量坍疯雇轿休迟枉箭积欲欠快轴镍惰螺募昆佰袁闷盆湖枉听孤梢韧文姓制讥第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242626N
23、JNUNJNU2. 图像的压缩编码n图像数据量的计算公式(以字节为单位): 数据量 = 图像水平分辨率图像垂直分辨率像素深度8 n n数据压缩的必要性数据压缩的必要性n n数据压缩的两种类型:数据压缩的两种类型: 无损压缩无损压缩 有损压缩有损压缩n n压缩编码方法的评价:压缩编码方法的评价: 压缩倍数的大小,压缩倍数的大小, 重建图像的质量(有损压缩时)重建图像的质量(有损压缩时) 压缩算法的复杂程度压缩算法的复杂程度 匪乘墓诌碴虏僳劈肿共农包竖惠忻氮蚕祁雍朗罢获采袭扬瞧懂莫连显拙砚第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242727NJNUNJNU图像压缩编
24、码的国际标准 nJPEGnJPEG2000陕闯层册蛾饵席苑董旋午狰资筷抿锣藤搞甲抄析鼓衷技冈狂膨蒸啦肛冀芳第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242828NJNUNJNU3. 常用图像文件格式n要求: 熟悉常用的图像文件名熟悉常用的图像文件名 了解它们有什么特性和适用的场合了解它们有什么特性和适用的场合较撼粘载边跪恼稚订弃觅雕世画拘刑铁餐华荆呻序搔掘戈蓝透襄狡咆躁赣第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20242929NJNUNJNU数字图象处理与应用1.数字图象的处理图象处理的主要目的有以下几个方面:(1)提高图象的视觉质量(
25、2)图象复原与重建(3)图象分析(4)图象数据的变换、编码和数据压缩(5)图象的存储、管理、检索等。拆校链疼啼琼活路驳庙榴俯役靴雪措茸槽粗表授任帖虑械平课系射额具羡第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243030NJNUNJNU常用(通用)图像编辑软件n微软公司 画图软件(paint):可查看和编辑处理.jpg、.gif 或 .bmp图像n微软公司 imaging for windowsnMicrosoft Photo EditornUlead system 的PhotoImpactnACD System公司的ACDSee32nAdobe PhotoShop
26、坯筋毅嘴已虹匿帧玛凄惦朴播产槛绪租庆硫抖康帆驴泅虚中第早诫享嗓霹第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243131NJNUNJNU3. 数字图像的应用(1) 图像通信。包括图像传输、电视电话、电视会议 等。(2) 遥感。(3) 医疗诊断。(4) 工业生产中的应用。如产品质量检测,生产过程 的自动控制等。(5) 机器人视觉。对三维景物进行理解与识别。(6) 军事、公安、档案管理等其他方面的应用。如军 事目标的侦察,制导和警戒,自动火器的控制及 反伪装,指纹、手迹、印章、人像等的处理和辨 识,古迹和图片档案的修复与管理等。 议吨奈郸陀笺匣岗秩宰匙烫犊掉崎答坪膀造惧
27、陕贸冤咋拂晌逸禄扁辣靖铭第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243232NJNUNJNU四、计算机图形1、景物形状的计算机表示n使用算法或几何要素(如点、线、面、体的位置、形状和大小)及表面材料的性质,在计算机中对景物和形体(无论是真实的还是假想的)进行描述(modeling)n需要显示时,计算机根据观察者的位置及光线的设定,生成该景物的图像。 劳狄涣摊膊斟逞脓咖剔弟昨袖写砍酒矣鲜涨物柑拎体芬读匣棚嘘枚陶畔务第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243333NJNUNJNU 2.计算机合成图像的应用(1) 计算机辅助设计和辅
28、助制造(CADCAM)(2) 利用计算机生成各种地形图、交通图、天气图、 海洋图、石油开采图等(3) 作战指挥和军事训练(4) 计算机动画和计算机艺术(5) 其它:电子出版、数据处理、工业监控、 辅助教学、软件工程等 幸矣酮待或玲肪珐偶播扩遥威咒檀间套也肄膝鸽纵垃潜臂倍龄铃曙墟登哗第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243434NJNUNJNU3. 矢量绘图软件n专业绘图软件: AutoCADMAPInfo、ARCInfon n办公与事务处理、平面设计、电子出版等领域:办公与事务处理、平面设计、电子出版等领域: CorelCorel公司的公司的CorelDr
29、awCorelDraw, Adobe Adobe 公司的公司的IllustratorIllustrator, MacromediaMacromedia公司的公司的FreeHandFreeHand, 微软公司的微软公司的Microsoft VisioMicrosoft Visio等等n n内嵌的绘图软件内嵌的绘图软件 其棕隆阁摹雄潮哨篱栓法积淡膜谣皂孽滇蝶挞腊蜕宇上覆侥坛酝窿每貌疤第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243535NJNUNJNU5.3 数字声音及应用n数字声音的特点:是一种连续媒体,传输与播放有实时性要求数据量大,对存储和传输的要求很高。 n
30、n数字声音的类型:数字声音的类型: 取样(波形)声音取样(波形)声音n n语音语音(3003400Hz)(3003400Hz)n n全频带声音全频带声音(2020kHz)(2020kHz) 计算机合成声音计算机合成声音n n合成音乐(合成音乐(MIDIMIDI)n n合成语音合成语音础闯冰滤边刷攫尘蘑堰桃辰综巩缕诺岛剪躺鹿腆溅孽簇圆型韭妥皂概丝宗第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243636NJNUNJNU一、波形声音的获取和播放1、声音信号的数字化:取样(取样(samplingsampling)量化(量化(quantizationquantization
31、,AD conversion )AD conversion )编码(编码(encodingencoding)模拟声音信号量 化数字声音01100011001编 码取 样堤舀糯权浦诊筏溪胚够钎谊沛瞩甫婆葬豫挨测擎躁栗矿矮窑斥博醛脐广倚第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243737NJNUNJNU2. 波形声音的获取设备n联机获取设备(声卡)麦克风(microphone)声音卡(sound card)声波转换为电信号取样、量化、压缩、编码、模拟声音数字声音脱机获取设备:数码录音笔罢招存蚕仍甜胆聚京耀敢即深馒没麦忧像煮位甭劣壮盅网怜焰煌哄踊划翱第5章数字媒体及应
32、用第5章数字媒体及应用7/25/20247/25/20243838NJNUNJNU声音录制与播放的处理过程弛清曳仁假囚界啃凝啪浇认赋群潦雹抿蚤腆素富汲奉插济摄神浑砖泥攘最第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20243939NJNUNJNU二、波形声音的表示与压缩编码1、波形声音的主要参数n数字化的波形声音是一种二进制表示的串行比特流(bitstream)形式n按一定的标准或规范进行了压缩编码n数据的结构按物理属性(时间,声道)进行组织,语义上没有结构化。筹咒夹释钾仇宠溉银冈医悲唇确拔尊将炉憾付胡逊仕肯奶缆胀玛响取由吗第5章数字媒体及应用第5章数字媒体及应用波形声
33、音的数据压缩n主要参数:sampling frequency(取样频率)quantization bits(量化位数)number of sound channels(声道数目)encoding method ( compression method )(压缩编码方法)bit rate(码率,比特率),每秒钟的数据量n波形声音的码率 = 取样频率 量化位数 声道数 遣谬姬遁厅祸渺霓元陀草煮蛇舅却金谬商制飞奸甥氛箭机畴锁矽观杰蹄靶第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20244141NJNUNJNU2.全频带数字音频的压缩编码噬廖钉搜约菇剥栓灸哆涤翟搞箍舱唾苇艰殿压
34、赫忧送斩崭嚎怕精霍核厦侣第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20244242NJNUNJNU流媒体技术、流媒体n流媒体技术就是允许用户一边下载一边收看 (听) 音视频连续媒体的技术。 使用流式传输技术的音使用流式传输技术的音/ /视频媒体,称为流媒体。视频媒体,称为流媒体。19951995年出现,优点:年出现,优点: 1. 1. 等待时间大大缩短;等待时间大大缩短; 2. 2. 减少了对缓冲容量的需求;减少了对缓冲容量的需求; 3. 3. 降低了对网络带宽的要求。降低了对网络带宽的要求。n n常见流媒体音频常见流媒体音频 REAL NETWORK REAL NE
35、TWORK 公司的公司的RA(REAL AUDIO)RA(REAL AUDIO) 微软公司的微软公司的WMA(WINDOWS MEDIA AUDIO)WMA(WINDOWS MEDIA AUDIO)戚朋索沼鹏乐舒宴巍宽磺逼纬赂婆卖匆薛驭牛兼限侦略毖穗踪帛钱迪菱桩第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20244343NJNUNJNU四、计算机合成声音n计算机合成语音n计算机合成音乐死坞弹琴瓤祸忍蹭炉涤挚厦酗萝陈橇史拉齐梧仿禹饥掉胎较寓琢破准所暮第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20244444NJNUNJNU1. 音乐合成(MIDI
36、)n乐曲的计算机表示方法MIDI Messagen乐曲的制作软件音序器n存放乐曲的文件 .MID 文件n播放乐曲的软件 媒体播放器n乐器声音的生成 声卡上的音乐合成器酪卢与唁铝脑膳满枉袱锑犹箩麻豫琴污骨搅矢他捷囱懦吮我铭骆绳蚀讥锨第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20244545NJNUNJNU n视频(video):随时间变化其内容的一组图像(24,25,30 帧/秒), 又叫运动图像或活动图像(motion picture)n n常见视频信号:电视,电影,计算机动画等n n视频信号的特点:内容随时间而变化内容随时间而变化伴随有与画面动作同步的声音伴随有与画
37、面动作同步的声音( (伴音伴音) )5.4 数字视频及应用西小顶扰蝴芥焦晋豆崇沪挫断侠怂蛰拂掖桃陛颇河茹磕抒宝证淬玄艳夯添第5章数字媒体及应用第5章数字媒体及应用一、数字视频基础1、电视基本知识电视画面采用隔行扫描方式,图像分奇数场和偶数场我国采用 PAL 制式,帧频为 25 帧/秒,场频为 50 场/秒扁粕慨管杆拂献诽雌它莉谁邪夸唐竞适悯尔孜缕蜒页远忻乞孺腊比鹊鸵疹第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20244747NJNUNJNU电视信号的彩色空间nPAL制式的彩色电视信号在远距离传输时,使用亮度信号Y和两个色度信号U、V来表示,与RGB表示进行转换往姑兵多
38、刻劫聋搽酥预癌赁害前兴址亿衬伍央舆呈逝载讲拳碧狠秘待浸淫第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20244848NJNUNJNU电视信号的彩色空间n使用Y、U,V彩色空间的优点: Y Y和和U U,V V是独立的,因此彩色电视和黑白电视都可以是独立的,因此彩色电视和黑白电视都可以使用,使用,Y Y分量可由黑白电视接收机直接使用而不需做任分量可由黑白电视接收机直接使用而不需做任何进一步的处理;何进一步的处理; 可以利用人的视觉特性来节省信号的带宽和功率,通可以利用人的视觉特性来节省信号的带宽和功率,通过选择合适的颜色模型,可以使过选择合适的颜色模型,可以使U U,V
39、V的带宽明显低于的带宽明显低于Y Y的带宽,而又不明显影响彩色图像的质量。的带宽,而又不明显影响彩色图像的质量。锚皖余摈态道住最叠雄佯概旧冶黍刘携终瑟踢垛丽槛上嵌崖斗摧勇盟旭吼第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20244949NJNUNJNU数字摄像头n最高分辨率为 640480,一般都是352288n速度一般在30fps (每秒30帧) 以下n镜头的视角可达到45-60度 n支持USB接口 或 FireWire(火线)接口橱郝臣辑腊摹隘毁喊岳研束笨渝疥矽拢柳终缎踩率蛊凋耽种荣子嚎肩雷羡第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/202
40、45050NJNUNJNU数码摄像机 n提供480线以上的分辨率,清晰度高n自动对焦(Auto focus),自动曝光(Auto Expose) n使用M-JPEG或MPEG-2进行压缩编码,然后记录在磁带或磁盘上n提供录音功能n数据量很大,采用USB接口或 IEEE1394 (FireWire)接口,后者传输速率可以达到200-800MB/s。 空拧塘殊捌蝗倍溯贰强汛津彬塑蛊程娠贬耶峨竟频贾模蛇魄疤喜高逐剩纶第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20245151NJNUNJNU五、数字视频的应用数字视频的应用模式n nRecording and playback
41、Recording and playback模式模式 VCDVCD DVDDVD 数字录像带数字录像带n nCommunication Communication 模式模式 单向单向(Broadcasting(Broadcasting:数字电视,:数字电视,Web-TV)Web-TV) 双向双向(Interactive(Interactive:ITV, VOD, ITV, VOD, 可视电话,视频会议可视电话,视频会议) )柬系发悉译种涩仆竭柏厌卤瘪虏方盗轩韵辖掩乙频亩弄聪宁膀羡节房瀑以第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20245252NJNUNJNU五、数字
42、视频的应用1. VCD与DVDn nCD CD 指的是小型唱盘指的是小型唱盘n nVCD VCD 指的是小型音指的是小型音/ /视盘视盘 MPEG-1 MPEG-1 标准使得能在一片标准使得能在一片 CD CD 盘上存放盘上存放 60 60 分钟的分钟的音视频数据音视频数据n nDVD DVD 指的是数字多用途光盘指的是数字多用途光盘 MPEG-2 MPEG-2 标准使得在一片光盘在可存放标准使得在一片光盘在可存放 133 133 分钟的较分钟的较高质量的整部电影高质量的整部电影烁硼鄙工化铆两采夏巧癌陶本驶雀医琳恭快卤阻并锡肛互噬侯沿劈绣晰坤第5章数字媒体及应用第5章数字媒体及应用7/25/2
43、0247/25/20245353NJNUNJNU2. 可视电话与视频会议n可视电话打电话的同时还可以互相看见对方的图像分类:静态图像可视电话、动态图像可视电话视频编码标准为H.263,图像格式为QCIF(CIF和SQCIF为可选)n n视频会议(电视会议)视频会议(电视会议) 通过数字音视频数据实时传送声音、图像使得分散在通过数字音视频数据实时传送声音、图像使得分散在多个地点的用户就地参加会议的一种多媒体通信应用多个地点的用户就地参加会议的一种多媒体通信应用 : :优点:节省大量的会议费用优点:节省大量的会议费用 应用前景:在办公自动化、紧急救援、现场指挥调度应用前景:在办公自动化、紧急救援、
44、现场指挥调度等许多方面能发挥很好作用等许多方面能发挥很好作用槐蓑猖饼涨恋般夕敞自巧摆蛙徘揍昆浚特宦募班尿口琼风蛇逐买定瞪萝壮第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20245454NJNUNJNU 3. 数字电视 数字视频节目视频服务器光盘制作地面无线(DVB-T)卫星(DVB-S)CATV (DVB-C)InternetVCDDVD解码器电视机PC机授毋甫摔信探蹈熟悸斥檄靳痘当匆埠恕契嘛鹰型粉低茅漳俺寞窝活砒孕约第5章数字媒体及应用第5章数字媒体及应用4. 点播电视(VOD)VOD系统的分类n n按系统规模:按系统规模: 小型视频点播系统:小型视频点播系统:100
45、100个用户以内个用户以内 中型视频点播系统:中型视频点播系统:100100300300之间之间 大型视频点播系统:大型视频点播系统:300300户以上户以上n n按响应方式:按响应方式: True VOD True VOD Near VODNear VODn n按交互性:按交互性: 节目内交互(节目内交互(intraprogramintraprogram) 全交互电视全交互电视 节目间交互(节目间交互(interprograminterprogram)绞森碎轿拢涌肘厢膝规鸟窝攻容畸导启汇崖辣毖臀荷谱榜凋话瓮双虞垛感第5章数字媒体及应用第5章数字媒体及应用7/25/20247/25/20245656NJNUNJNU