《数字媒体技术概述文档资料》由会员分享,可在线阅读,更多相关《数字媒体技术概述文档资料(252页珍藏版)》请在金锄头文库上搜索。
1、数字媒体技术数字媒体技术课程课程(DigitalMediaTechnology)第一讲数字媒体技术概述(Introduction to Digital Media)1苏州大学数字媒体技术基础课程提纲o1.1 数字媒体的基本概念及其特点o1.2 数字媒体技术的发展o1.3 数字媒体的重要性o1.4 数字媒体技术的原理o1.5 数字媒体标准简介o1.6 数字媒体的传播模式o1.7 数字媒体处理系统o1.8 数字媒体技术的应用2024/7/29苏州大学数字媒体技术基础课程1.1 数字媒体的基本概念 苏州大学数字媒体技术基础课程o什么是媒体?n信息n形式n媒体o什么是数字媒体?n模拟媒体n数字媒体20
2、24/7/29苏州大学数字媒体技术基础课程中国信息技术发展o我国信息领域还基本上处于模仿跟踪、在别人的核心技术和平台上锦上添花的阶段。n信息领域有数十项重大的技术发明,如集成电路、RISC体系结构、Internet、Web浏览器、UNIX和Linux操作系统、图形界面、鼠标等,没有一项是中国人发明的。n我国在信息领域的顶级国际学术会议上发表的重要论文还很少,申请的专利很少能形成技术跨越,多数是一些小的改进。n以我国技术为主制定的国际技术标准还寥寥可数。2024/7/29苏州大学数字媒体技术基础课程我国在信息技术领域的成果n1956年的四项紧急措施(计算机、电子学、半导体、自动化);n原四机部7
3、31会议决定研制生产系列机(100系列、200系列);n启动“748工程”发展汉字激光照排技术和产业;nCRT彩电产业大会战取得成功;n采用多元集资方式引进人才创建中芯国际等芯片加工企业;n持续支持高性能计算机研制与推广;n国家中长期科技规划设立“核高基”和“无线通信”等重大专项等。n华为公司是我国信息领域发展高技术产业的成功案例。o改革开放30年来,信息技术的普及,尤其是移动通信与互联网技术的普及是信息化最大的成绩。摘自李国杰院士2009年11月的科学时报的采访2024/7/29苏州大学数字媒体技术基础课程当前信息技术面临的问题o当前信息技术面临三座高墙n挖掘并行性和可扩展的困难挖掘并行性和
4、可扩展的困难p要可扩展到亿级并行度,惠及数十亿用户;n信息处理的高功耗信息处理的高功耗p要努力做出低功耗的信息系统n复杂信息系统安全可靠性低等复杂信息系统安全可靠性低等p要致力于研制高可信的信息系统n到到2020年左右,摩尔定律将不再有效,集成电路正在逐步进入年左右,摩尔定律将不再有效,集成电路正在逐步进入“后摩后摩尔时代尔时代”,必须更多地从,必须更多地从“BeyondCMOS”中寻找新的出路。中寻找新的出路。n计算机正逐步进入计算机正逐步进入“后后PC时代时代”,终端设备将从,终端设备将从“高大全高大全”向向“低小低小专专”(“专专”指个性化)转变,降低功耗是首要目标。指个性化)转变,降低
5、功耗是首要目标。n超级计算机的超级计算机的“千倍定律千倍定律”将失效,只在现有的技术基础上作改进,将失效,只在现有的技术基础上作改进,2030年肯定做不出年肯定做不出Zettaflops级(级(1021flops)水平的计算机。进入)水平的计算机。进入“后后IP”时代是不可避免的发展过程,可能需要时代是不可避免的发展过程,可能需要20年时间才能真正突破年时间才能真正突破TCP/IP协议的局限。协议的局限。2024/7/29苏州大学数字媒体技术基础课程中国信息技术面临的问题o目前我国的计算机应用水平与国外相比至少相差10年以上,高性能计算机的应用差距更大。o既熟悉计算机技术又熟悉行业需求的学者太
6、少,影响了信息技术的深入应用。o信息科学与其他学科的交叉研究未得到足够的重视。o对基础软件和关键行业应用软件缺乏高瞻远瞩和集中力量办大事的战略部署,软件产业近几年发展较快,但仍不尽如人意。2024/7/29苏州大学数字媒体技术基础课程o截至目前,IT产业所长期依赖的CMOS半导体电路技术已经遇到严重挑战。摩尔定律如同灯塔照亮了半导体产业半个世纪的发展航程,到2020年左右这个灯塔将暗淡下来。不论是集成电路技术、互联网络技术,还是高性能计算机体系结构和存储技术,2020年前后都会在延续当前技术时遇到难以逾越的障碍。o2020年至2030年期间,芯片、计算机、互联网、存储器等都会发生革命性的变化,
7、而换代技术的突破大概就在今后10到15年。o我国信息技术未来的出路是下决心在选择的重点方向上走跨越发展的道路,打造自主可控的基础技术平台。2024/7/29苏州大学数字媒体技术基础课程未来信息技术的发展前景o20世纪后半叶是以信息技术发明和技术创新为标志的时代o预计21世纪上半叶将兴起一场以高性能计算和仿真、网络科学、智能科学、计算思维为特征的信息科学革命,信息科学的突破可能会使21世纪下半叶出现一场新的信息技术革命2024/7/29苏州大学数字媒体技术基础课程信息技术的尴尬信息技术的尴尬o传统的计算工具n结绳记事 沙漏计时 算盘n简单,可触摸,易学习n触觉和肌肉运动知觉o现在的数字技术n功能
8、强大,学习门槛高n人们必须不断学习适应其发展n原因:生活经验毫无用处,界面本身就是新生事物苏州大学数字媒体技术基础课程信息空间和物理空间信息空间和物理空间( ( Bits&Atoms)POPOPOnEYPO:PhysicalobjectEY:EntitynEYnEYMouse信息空间信息空间(Bits)物理空间物理空间(Atoms)苏州大学数字媒体技术基础课程信息空间和物理空间(Bits & Atoms )o我们生活在两个世界里:现实的物理世界和虚拟的信息世界 o两种身份之间却缺少一种无缝的、自然的转换和交互方式 o人们和信息空间的交互被局限于传统的图形用户界面(GUI)中o实际上,正是GUI
9、把我们生活的物理世界和我们要访问的信息世界隔离开来。苏州大学数字媒体技术基础课程信息空间和物理空间的融合信息空间:信息空间:存在于计算机和网络中的存在于计算机和网络中的数字化的信息、服务、数字化的信息、服务、计算和通信计算和通信物理空间:物理空间:真实存在的物理世界真实存在的物理世界普适计算普适计算融融合合2、自发的交互、自发的交互1、绑定、绑定苏州大学数字媒体技术基础课程有人说:人类的文明史是从有文字开始的有人说:人类的文明史是从有文字开始的 但也有人讲:自从有了文字后文明就不再发展了但也有人讲:自从有了文字后文明就不再发展了 纸业革命纸业革命苏州大学数字媒体技术基础课程中华文化、汉字与文字
10、载体中华文化、汉字与文字载体n汉字,汉文化的载体、中华文明之母汉字,汉文化的载体、中华文明之母n世界上最古老的三种文字之一世界上最古老的三种文字之一n古巴比伦楔形文字(古巴比伦楔形文字(5500年生存年生存3200年)年)n埃及圣书字(埃及圣书字(5000年生存年生存3000年)年)n中国古汉字(甲骨文)(中国古汉字(甲骨文)(3300年生存至今)年生存至今)苏州大学数字媒体技术基础课程造纸术发明人蔡伦造纸术发明人蔡伦火药火药印刷术:毕昇印刷术:毕昇指南针指南针中国四大发明中国四大发明汉字中国人的第五大发明汉字中国人的第五大发明苏州大学数字媒体技术基础课程纸张的历史作用n纸张纸张中国的四大发明
11、之一中国的四大发明之一1800年以前,蔡伦发明纸张年以前,蔡伦发明纸张纸张谱写人类文明纸张谱写人类文明纸张用于书写、印刷、阅读纸张用于书写、印刷、阅读纸张是人类社会的交流工具纸张是人类社会的交流工具n政治、经济:政治、经济:社会组织、运行、记载社会组织、运行、记载n文化:文化:印刷、出版、社会的符号知识库印刷、出版、社会的符号知识库n个人生活和工作:个人生活和工作:个人生活和工作:个人生活和工作:写作、工作、交流、阅读写作、工作、交流、阅读写作、工作、交流、阅读写作、工作、交流、阅读n n基于纸张基于纸张( (符号符号) )的社会的社会n纸张在出版业历史上扮演纸张在出版业历史上扮演关键角色的原
12、因关键角色的原因n价格便宜价格便宜n足够结实足够结实苏州大学数字媒体技术基础课程载体与汉字的变迁载体与汉字的变迁 纸张发明纸张发明东汉末年公元东汉末年公元150150纸张使用纸张使用盛唐公元盛唐公元500500年年活字印刷活字印刷宋代公元宋代公元11001100年年古登堡机械印刷古登堡机械印刷1818世纪世纪激光照排激光照排公元公元19801980年年苏州大学数字媒体技术基础课程竹简竹简硅存储硅存储纸张纸张丝帛丝帛光磁光磁活字印刷活字印刷龟甲龟甲孔子孔子(公元前公元前551/479年)年)老子(春秋后期)老子(春秋后期)全息数字化全息数字化机械印刷机械印刷光电印刷光电印刷汉语拼音运动汉语拼音运
13、动汉字简化运动汉字简化运动汉字信息化汉字信息化汉字中介化汉字中介化文化大众化文化大众化稳定、融合、创新是汉文化生存的法宝稳定、融合、创新是汉文化生存的法宝五四新文化运动五四新文化运动载体与汉字的变迁载体与汉字的变迁 苏州大学数字媒体技术基础课程载体与汉字的变迁载体与汉字的变迁 真正的思想是抽象的,真正的思想是抽象的,抽象的东西只有用文字最容易表达抽象的东西只有用文字最容易表达文字是人类最需要保护的东西文字是人类最需要保护的东西保护汉字就是保护中华文明保护汉字就是保护中华文明法国总统希拉克:警告全世界警惕法国总统希拉克:警告全世界警惕InternetInternet时代的文字殖民时代的文字殖民苏
14、州大学数字媒体技术基础课程发明与社会进步发明与社会进步纸的发明纸的发明活字印刷术的发明活字印刷术的发明指南针的发明指南针的发明蒸汽机的发明蒸汽机的发明电的发明电的发明相机的发明相机的发明计算机计算机火火 药药塑塑 料料核核 能能克克 隆隆技术的极化技术的极化, , 引发失控引发失控学科的极化学科的极化, , 文理不交融文理不交融绿色科技绿色科技苏州大学数字媒体技术基础课程发明与社会进步发明与社会进步绿色科技绿色科技有助于人类与生态环境和谐发展的科技有助于人类与生态环境和谐发展的科技 对环境的索取与破坏最小对环境的索取与破坏最小 对人类生存与繁衍无害对人类生存与繁衍无害 自身有较好与强壮的自制力
15、与生命力自身有较好与强壮的自制力与生命力 产生与消亡不会对生态与社会产生威慑产生与消亡不会对生态与社会产生威慑苏州大学数字媒体技术基础课程n计算机的社会角色:计算机的社会角色: 计算计算 信息交流信息交流 智能服务智能服务信息交流信息交流(人类发展和人的成长人类发展和人的成长/计算机发展计算机发展)情感情感语言语言文字文字bits(简单化、精确化简单化、精确化)情感情感语言语言文字文字bits(声波nHigher pitches are caused by higher frequencies of vibrating molecules that reach your eardrum. nL
16、ower pitches are likewise caused by lower frequencies.o影像-电磁波n光:在空间坐标上具有不同亮度的电磁波n颜色:波长(红色为最长的可见波)o波:由波长和频率刻画wavelengthn2024/7/29苏州大学数字媒体技术基础课程波长/频谱Long radio waves MicrowavesX-raysGamma raysTV, FMInfraredUltraviolet700 nm600 nm500 nm400 nm4.5x1014 Hz5x1014 Hz6x1014 Hz7x1014 Hzn2024/7/29苏州大学数字媒体技术基础课
17、程数字化过程o三步骤n采样(Sampling)n量化(Quantizing)n压缩(Compression)与编码(Coding)SamplerQuantizer&Coderanalog signalsampled signaldigitized signal2024/7/29苏州大学数字媒体技术基础课程Step 1: 采样与失真o通过某种频率的采样脉冲将模拟信息的值取出,变连续的模拟信息为离散信号。o采样定理:采样频率原始信号频率的2倍时, 采样信号才可以保真地恢复为原始信号。n2024/7/29苏州大学数字媒体技术基础课程Step 2:量化与失真o将采样样本的幅度按照量化级别决定其取值的过
18、程。目的是将采样样本的幅度值离散化。o量化之前需要规定量化级,比如8级,16级,256级等。o量化是一个对一的映射。例如:画图软件的颜色级别例如:画图软件的颜色级别n2024/7/29苏州大学数字媒体技术基础课程为什么感知很重要?o失真评价的基础ohttp:/www.libertarian.on.ca/images/Florida%20Recount.jpg2024/7/29苏州大学数字媒体技术基础课程Step 3:编码与压缩o编码n用相应位数的二进制代码表示量化后的采样样本的量级。n如果有N个量化级为,那么对应的二进制位数就为log2N。当N16,二进制需要4位。n经过编码之后,每个样本都表
19、示为相应的二进制代码。o脉冲编码调制(PCM,Pulse Code Modulation),完成模拟信号的数字化2024/7/29苏州大学数字媒体技术基础课程为什么需要数据压缩?o压缩编码的理论基本原理n从信息论的角度来看,压缩就是去掉信息中的冗余,即保留不确定的信息,去除确定的信息(可推知的),也就是用一种更接近信息本质的描述来代替原有冗余的描述。o信息冗余的例子n你的朋友,Helen,将于明天晚上6点零5分在上海的虹桥机场接你。 (23*2+10=56个半角字符)n你的朋友将于明天晚上 6点零5分在虹桥机场接你。 (20*2+3=43个半角字符)nHelen将于明晚6点在虹桥接你。 (10
20、*2+7=27个半角字符)n结论:只要接收端不会产生误解,就可以减少承载信息的数据量。2024/7/29苏州大学数字媒体技术基础课程多媒体领域中的冗余分类o统计冗余n空间冗余规则物体的物理相关性n时间冗余视频与动画画面间以及音频帧间的相关性o信息熵冗余n编码冗余数据与携带的信息o结构冗余n纹理冗余规则纹理、相互重叠的结构表面o视/听觉冗余n视觉、听觉敏感度和非线性感觉o知识冗余n凭借经验识别1011000111001011000111001011000111001011000111000101101010100101101010101011110010111100010111111010010
21、1111110102 22424色色色色2 28 8色色色色n2024/7/29苏州大学数字媒体技术基础课程数据压缩o数据压缩可分成两种类型n无损压缩n有损压缩 o无损压缩n指使用压缩后的数据进行重构(或者叫做还原,解压缩),重构后的数据与原来的数据完全相同n用于要求重构的信号与原始信号完全一致的场合。一个很常见的例子是磁盘文件的压缩。o有损压缩n指使用压缩后的数据进行重构,重构后的数据与原来的数据有所不同,但不影响人对原始资料表达的信息造成误解。n适用于重构信号不一定非要和原始信号完全相同的场合。2024/7/29苏州大学数字媒体技术基础课程压缩策略o无损压缩(Lossless Compre
22、ssion)n哈夫曼编码(Huffman Coding)n自适应哈夫曼编码nLempel-Ziv-Welch (LZW)p用于GIFnJPEG-LSo有损压缩(Lossy Compression)nJPEGnH.261, MPEG-1, MPEG-2o无损+有损(Lossless and Lossy Together)nJPEG 20002024/7/29苏州大学数字媒体技术基础课程数据压缩的性能指标o衡量压缩算法的三个主要性能指标(1)压缩比;(2)压缩质量(失真);(3)压缩与解压缩的速度。o不能兼得时,要综合考虑。o压缩质量评价n主观评价 :平均意见得分(MOS)、五分制(优良中差劣)n
23、客观评价:均方误差、加权均方误差、信噪比、峰值信噪比(图像)、分段信噪比(音频)、似然比、谱失真测度n2024/7/29苏州大学数字媒体技术基础课程编码方式举例:哈夫曼编码(Huffman Coding)oHuffman编码属于信息熵编码的方法之一,是根据信源符号出现概率的分布特性而进行的压缩编码。o也称为最佳编码,平均码长最短。o编码过程:n1. 初始化:将信源符号按频率递减顺序排列,输入L;n2. 重复如下操作直至L中只有1个结点: (a)从L中取得两个具有最低频率的结点,为它们创建一个父结点; (b)将它们的频率和赋给父结点,并将其插入L;(c) 将树的左右孩子赋符号“0”和“1”,并从
24、L中删除。 2024/7/29苏州大学数字媒体技术基础课程哈夫曼编码(Huffman Coding)示例o输入: “ALOHA HAWAII”o频率: 4A, 2H, 2I, 1L, 1O, 1 space, 1Wo96 bits (8 bits * 12 characters) to 32 bits:AIHLspaceWO010000011111A=0, I=100, H=101, L=1100, space=1101, etc.例子:Java applet example at http:/www.cs.sfu.ca/CC/365/li/squeeze/index.html2024/7/2
25、9苏州大学数字媒体技术基础课程媒体表示o颜色模型n颜色科学nRGB颜色模型:最基本的表示模型nYUV颜色模型:用于PAL电视信号传输,中国采用nYCbCr色彩模型:数字视频常用的颜色模型。o图形和图像的表示o视频的表示o数字音频表示2024/7/29苏州大学数字媒体技术基础课程人眼视觉特性与颜色模型人眼视觉特性与颜色模型o人眼的视觉特性人眼的视觉特性n可见光谱:人眼能看到的光谱范围从可见光谱:人眼能看到的光谱范围从380纳米到纳米到780纳米。纳米。n不同波长对应不同色彩感觉,不同强度和强度分布的光刺激人眼。不同波长对应不同色彩感觉,不同强度和强度分布的光刺激人眼。n人眼的临界闪烁频率为人眼的
26、临界闪烁频率为46HZ。因此要求每秒钟摄取的画面数约为。因此要求每秒钟摄取的画面数约为25帧帧左右。左右。o颜色科学颜色科学n色彩是人类视觉对可见光的感知结果,在可见光谱内不同波长的光会色彩是人类视觉对可见光的感知结果,在可见光谱内不同波长的光会引起不同颜色感觉。引起不同颜色感觉。n三基色原理三基色原理:将红、绿、蓝三种颜色按照不同的比例进行组合,就可:将红、绿、蓝三种颜色按照不同的比例进行组合,就可以引起人眼对自然界的全部颜色感觉。以引起人眼对自然界的全部颜色感觉。颜色颜色红色红色橙色橙色黄色黄色绿色绿色青色青色蓝色蓝色紫色紫色波长波长700620580546480436380n2024/7
27、/29苏州大学数字媒体技术基础课程人眼视觉特性与颜色模型o颜色模型颜色模型nRGB色彩模型色彩模型:彩色最基本模型,适合于计算机系统:彩色最基本模型,适合于计算机系统;nCMY(CMYK)色彩模型色彩模型:用于印刷:用于印刷;nYUV(亮度、色差亮度、色差)色彩模型色彩模型:用于:用于PAL电视信号传输;电视信号传输;nYIQ色彩模型色彩模型:用于:用于NTSC彩色电视广播;彩色电视广播;nYCbCr色彩模型色彩模型:数字视频常用的颜色模型。:数字视频常用的颜色模型。n2024/7/29苏州大学数字媒体技术基础课程RGB颜色模型oRGB颜色模型是彩色最基本的表示模型。oRGB分别代表三种基本颜
28、色红(red)、绿(green)、蓝(blue)三色,每种颜色的亮度大小用数字0-255表示。o通过对R、G、B三个颜色通道的变化以及它们相互之间的叠加可得到各式各样的颜色,共有1670万种颜色。 R=G=B=0 黑色 R=G=B=255 白色 0R=G=B255 灰色2024/7/29苏州大学数字媒体技术基础课程其他颜色模型oYUV颜色模型颜色模型nY表示亮度信号,可构成灰色图像,表示亮度信号,可构成灰色图像,U、V表示色度信号,表示色度信号,是构成色彩的两分量。是构成色彩的两分量。nYUV空间相当于对空间相当于对RGB空间做了一个解相关的线性变化。空间做了一个解相关的线性变化。nYUV的最
29、初作为模拟电视系统信号编码的最初作为模拟电视系统信号编码p其亮度信号和色差信号分离,容易使彩色电视系统与只对亮度敏其亮度信号和色差信号分离,容易使彩色电视系统与只对亮度敏感的黑白电视机亮度信号兼容。感的黑白电视机亮度信号兼容。pPAL制式电视系统就采用该空间进行传输,电视机接收后再转换制式电视系统就采用该空间进行传输,电视机接收后再转换成成RGB空间。空间。2024/7/29苏州大学数字媒体技术基础课程其他颜色模型oYCbCr色彩模型色彩模型nYCbCr颜色空间是由颜色空间是由YUV颜色空间派生的一种颜色空间,颜色空间派生的一种颜色空间,主要用于数字电视系统中。主要用于数字电视系统中。nY代表
30、亮度,代表亮度,Cb和和Cr代表色差。代表色差。nYCbCr颜色模型考虑的是压缩时可以充分取出冗余量。颜色模型考虑的是压缩时可以充分取出冗余量。n从从RGB到到YCbCr的转换中,输入、输出都是的转换中,输入、输出都是8位二进制位二进制格式。格式。2024/7/29苏州大学数字媒体技术基础课程图形和图像的表示o图像的基本属性n分辨率:组成图像的像素数目n颜色深度(位数):存储每个像素所用位数p如:640480256色(即8位) 300kn真彩色和伪彩色:显示图像时,真彩色由R、G、B直觉决定显示设备的基色强度,而伪彩色则通过颜色查找表来决定。o主要的图像文件格式nJPEG (Joint Pic
31、ture Expert Group):有损压缩;多用于照片;nGIF (Graphics Interchange Format):无损压缩,最多256色,可透明,可动画;多用于小图标;nTIFF (Tag Image File Format):未压缩或简单压缩;多用于扫描及传真;nBMP (Bitmap):Windows中的位图,一般未压缩;nEPS (Encapsulated PostScript ):矢量绘图软件和排版软件所使用的格式。2024/7/29苏州大学数字媒体技术基础课程图形和图像的表示和存储方法o矢量图矢量图(Vector):多用于图形:多用于图形n用一组命令来描述图形,这些命
32、令给出构成图形的各种属性和参数,如圆可用一组命令来描述图形,这些命令给出构成图形的各种属性和参数,如圆可以是圆心坐标、半径以及粗细和色彩组成的。以是圆心坐标、半径以及粗细和色彩组成的。n优点:图形文件占用空间较少。优点:图形文件占用空间较少。n缺点:图形复杂时,耗时相对较长。缺点:图形复杂时,耗时相对较长。o位图位图(Bitmap):多用于图像:多用于图像n在空间和色彩上已经离散化的图片,通过描述画面中每一像素的颜色或亮度在空间和色彩上已经离散化的图片,通过描述画面中每一像素的颜色或亮度来表示该图像,非常适合表现包含大量细节的图片来表示该图像,非常适合表现包含大量细节的图片(如明暗、浓淡、层次
33、和色如明暗、浓淡、层次和色彩变化等彩变化等)。n优点:色彩和色调变化丰富,景物逼真。优点:色彩和色调变化丰富,景物逼真。n缺点:缩放等处理后易失真,数据量大。缺点:缩放等处理后易失真,数据量大。2024/7/29苏州大学数字媒体技术基础课程图形和图像的表示和存储方法2024/7/29苏州大学数字媒体技术基础课程视频的概念o视频:动态图像,是一组图像按时间顺序的连续展示。视频:动态图像,是一组图像按时间顺序的连续展示。n利用人眼视觉暂留的原理,通过播放一系列的图片,使人眼产利用人眼视觉暂留的原理,通过播放一系列的图片,使人眼产生运动的感觉。生运动的感觉。o视频的三要素:视频的三要素:n空间分辨率
34、(即屏幕上的点数)空间分辨率(即屏幕上的点数)n颜色分辨率(即每个点的颜色位数)颜色分辨率(即每个点的颜色位数)n时间分辨率(即每秒的帧数)时间分辨率(即每秒的帧数)o按信号组成和存储方式的不同:按信号组成和存储方式的不同:n模拟视频模拟视频:是由连续的模拟信号组成的图像序列,像电影、电:是由连续的模拟信号组成的图像序列,像电影、电视和录像的画面;视和录像的画面;n数字视频数字视频:是一系列连续的数字图像序列。:是一系列连续的数字图像序列。2024/7/29苏州大学数字媒体技术基础课程视频的概念视频的概念o基本概念基本概念n帧帧:一段视频中的每一幅图像称为一帧。根据视觉暂留原理,:一段视频中的
35、每一幅图像称为一帧。根据视觉暂留原理,要使人的视觉产生连续的动态感觉,每秒钟图像的播放帧数要要使人的视觉产生连续的动态感觉,每秒钟图像的播放帧数要在在2430帧频(每秒播放的帧数)。帧频(每秒播放的帧数)。n扫描扫描:传送电视图像时,将每幅图像分解成很多像素,按照一:传送电视图像时,将每幅图像分解成很多像素,按照一个一个像素、一行一行的方式顺序传送或接收。扫描行数(扫个一个像素、一行一行的方式顺序传送或接收。扫描行数(扫描分辨率)越多,电视清晰度越高。分描分辨率)越多,电视清晰度越高。分隔行扫描隔行扫描(常用)和(常用)和逐逐行扫描行扫描。2024/7/29苏州大学数字媒体技术基础课程模拟视频
36、(电视)模拟视频(电视)o采用隔行扫描技术:先扫奇数行,后扫描偶数行采用隔行扫描技术:先扫奇数行,后扫描偶数行o模拟视频制式模拟视频制式nNTSC(美国、日本)美国、日本)30帧帧/秒,秒,525行行/帧帧nPAL(西欧、中国)西欧、中国)25帧帧/秒,秒,625行行/帧帧nSECAM(俄、法)(俄、法)n注:电影是注:电影是24帧帧/秒秒TV制式制式NTSCPALSECAM帧频帧频(Hz)302525行行/帧帧525625625亮度带宽亮度带宽(MHz)4.26.06.0彩色幅载波彩色幅载波(MHz)3.584.434.25声音载波声音载波(MHz)4.56.56.5pal:25帧帧/秒秒n
37、tsc:30帧帧/秒秒不同模拟电视制式的主要技术参数不同模拟电视制式的主要技术参数n2024/7/29苏州大学数字媒体技术基础课程数字视频数字视频o数字视频的优点数字视频的优点n便于存储和传输,适合于网络应用便于存储和传输,适合于网络应用n抗干扰能力强,再现性好抗干扰能力强,再现性好n便于计算机编辑处理便于计算机编辑处理n增加交互性增加交互性o常见的数字视频文件格式常见的数字视频文件格式nMPG:采用采用MPEG组织制定的视频压缩编码算法生成的视频文件。平均压缩比为组织制定的视频压缩编码算法生成的视频文件。平均压缩比为50 1,最,最高可达高可达200 1。VCD、SVCD、DVD均采用均采用
38、MPEG视频标准。视频标准。nAVI:微软公司推出的一种音频视像交插记录的数字视频文件格式。:微软公司推出的一种音频视像交插记录的数字视频文件格式。nMOV:Apple公司在其生产的公司在其生产的Macintosh机(后移植于机(后移植于PC/Windows环境)推出的视频格式,环境)推出的视频格式,可以采用不压缩或压缩的方式。可以采用不压缩或压缩的方式。nRM:RealNetworks公司所制定的音频视频压缩文件格式,根据网络数据传输速率的不同公司所制定的音频视频压缩文件格式,根据网络数据传输速率的不同制定了不同的压缩比率,能用于流媒体播放。制定了不同的压缩比率,能用于流媒体播放。nWMV:
39、Microsoft公司出品的视频格式文件,具有本地或网络回放、可伸缩的媒体类型、公司出品的视频格式文件,具有本地或网络回放、可伸缩的媒体类型、流的优先级化等特点。流的优先级化等特点。nASM:AVS的视频文件格式。的视频文件格式。2024/7/29苏州大学数字媒体技术基础课程数字视频数字视频o数字视频的应用数字视频的应用n广播电视广播电视,包括地面、卫星电视广播、有线电视,包括地面、卫星电视广播、有线电视(CATV)、数、数字视频广播字视频广播(DVB)、交互式电视、交互式电视(ITV)、高清晰度电视、高清晰度电视(HDTV)。n通信,包括可视电话通信,包括可视电话(Videophone)、视
40、频会议、视频会议(Videoconferencing)、视频点播、视频点播(VOD)等。等。n个人娱乐:录象节目、个人娱乐:录象节目、VCD、DVD、电视购物、家庭摄像、电视购物、家庭摄像、视频游戏等。视频游戏等。2024/7/29苏州大学数字媒体技术基础课程数字电视数字电视o数字电视(数字电视(DTV)的定义:)的定义:n指从电视节目采集、录制、播出到发射、接收全部采用数字编指从电视节目采集、录制、播出到发射、接收全部采用数字编码与数字传输技术的新一代电视技术。码与数字传输技术的新一代电视技术。n它可以划分为它可以划分为3大部分:信源部分(发送端)、信道部分(传大部分:信源部分(发送端)、信
41、道部分(传输输/存储过程)和信宿部分(接收端)。存储过程)和信宿部分(接收端)。o数字电视分类:根据图像比特率的大小数字电视分类:根据图像比特率的大小n标准清晰度数字电标准清晰度数字电视(视(SDTV)n高清晰度数字电视(高清晰度数字电视(HDTV)2024/7/29苏州大学数字媒体技术基础课程数字电视数字电视o数字电视的优点数字电视的优点:n高清晰度的电视画面:可以可与高清晰度的电视画面:可以可与DVD相媲美(最低:相媲美(最低:1280720,最,最高:高:19201080)。)。n优质的音响效果:伴音可以达到优质的音响效果:伴音可以达到CD质量。质量。n丰富的节目内容,有线网的带宽利用率
42、更高。丰富的节目内容,有线网的带宽利用率更高。n抗干扰功能力强,画面更稳定。抗干扰功能力强,画面更稳定。n扩展功能多:机顶盒除了一些基本功能外,还有许多扩展功能如上网、扩展功能多:机顶盒除了一些基本功能外,还有许多扩展功能如上网、点播、股票查询、在线交易、远程教育等。点播、股票查询、在线交易、远程教育等。oHDTV:由它所能提供的画面质量定义的。:由它所能提供的画面质量定义的。n分辨率分辨率:HDTV画面水平和垂直的像素目都差不多是常规系统的画面水平和垂直的像素目都差不多是常规系统的2倍。倍。垂直方向的高清晰度是由垂直方向的高清晰度是由1000多行的扫描线获得的。需要大约为传统多行的扫描线获得
43、的。需要大约为传统58倍的视频带宽。倍的视频带宽。n宽高比宽高比:HDTV画面的指定宽高比为画面的指定宽高比为16:9=1.777。2024/7/29苏州大学数字媒体技术基础课程数字音频的概念数字音频的概念o声音的基本概念声音的基本概念n声音是通过一定介质传播的一种连续波。声音是通过一定介质传播的一种连续波。n主要参数包括:振幅(音量的大小)、周期(重复出现的时间主要参数包括:振幅(音量的大小)、周期(重复出现的时间间隔)、频率(指信号每秒钟变化的次数)。间隔)、频率(指信号每秒钟变化的次数)。n声音按频率分类声音按频率分类次声波次声波可听声波可听声波超声波超声波20Hz20kHzf(Hz)2
44、024/7/29苏州大学数字媒体技术基础课程数字音频的概念数字音频的概念o数字音频的三要素数字音频的三要素n采样频率采样频率:根据奈奎斯特理论,采样频率不低于声音信号最高频率的两倍。:根据奈奎斯特理论,采样频率不低于声音信号最高频率的两倍。这样就能把数字表达的声音还原成原来的声音,称为无损数字化。这样就能把数字表达的声音还原成原来的声音,称为无损数字化。n采样精度采样精度:用样本值的二进制位数来表示。位数越多精度越高,数据也越大。:用样本值的二进制位数来表示。位数越多精度越高,数据也越大。量化等级量化等级n声道数声道数:使用声音通道的个数。立体声比单声道的表现力丰富,但数据量翻:使用声音通道的
45、个数。立体声比单声道的表现力丰富,但数据量翻倍。倍。n数据量采样频率数据量采样频率量化位数量化位数声道数声道数/8(字节字节/秒秒),如,如CD音质:音质:44.1kHzX16位位X2=176KB/s。o数字音频的常见文件格式数字音频的常见文件格式nWAV:是:是Microsoft/IBM共同开发的共同开发的PC波形文件。因未经压缩,文件数据量波形文件。因未经压缩,文件数据量很大。特点是声音层次丰富,还原音质好。很大。特点是声音层次丰富,还原音质好。nMP3:按:按MPEG标准的音频压缩技术制作的音频文件。特点是高压缩比标准的音频压缩技术制作的音频文件。特点是高压缩比(11:1),优美音质。,
46、优美音质。nMIDI(乐器数字接口乐器数字接口):是由一组声音或乐器符号的集合,特点是数据量很小,:是由一组声音或乐器符号的集合,特点是数据量很小,缺乏重现自然音。缺乏重现自然音。2024/7/29苏州大学数字媒体技术基础课程其他数字媒体其他数字媒体o动画动画n利用人的视觉残留特性使连续的静利用人的视觉残留特性使连续的静态播放的静态画面相互衔接而形成态播放的静态画面相互衔接而形成的动态效果。的动态效果。n动画性质动画性质p帧动画:帧动画:构成动画的基本单位是帧,构成动画的基本单位是帧,一部动画由许多帧组成。借鉴传统动画一部动画由许多帧组成。借鉴传统动画的概念,每帧的内容不同,当连续播放的概念,
47、每帧的内容不同,当连续播放时,形成动画视觉效果。时,形成动画视觉效果。p矢量动画:矢量动画:是经过计算机计算而生成是经过计算机计算而生成的动画,画面只有一帧;通常采用编程的动画,画面只有一帧;通常采用编程方式制作,及某些工具软件。方式制作,及某些工具软件。n动画制作动画制作p如如Flash(二维动画)(二维动画)n扩展名为扩展名为.swfn闪客闪客p如如3DMAX,Maya(三维动画)(三维动画)2024/7/29苏州大学数字媒体技术基础课程其他数字媒体其他数字媒体o数字游戏数字游戏n采用数字技术实现的电子游戏,包括视频游戏、网络游戏采用数字技术实现的电子游戏,包括视频游戏、网络游戏和移动游戏
48、等。和移动游戏等。o虚拟现实虚拟现实n利用计算机生成的虚拟环境,具有沉浸感、交互性和构想利用计算机生成的虚拟环境,具有沉浸感、交互性和构想性性(I3)特性。特性。2024/7/29苏州大学数字媒体技术基础课程媒体分发和传输媒体分发和传输o为什么需要研究媒体传输(而不是仅仅采用传统的文件传输方法)?为什么需要研究媒体传输(而不是仅仅采用传统的文件传输方法)?n与其他数据一样,多媒体数据存储在文件系统中。与其他数据一样,多媒体数据存储在文件系统中。n但多媒体数据的访问有特别的时限要求。例如,视频必须以每秒但多媒体数据的访问有特别的时限要求。例如,视频必须以每秒24-30帧的帧率来显帧的帧率来显示,
49、而视频的传输和分发必须确保此帧率。即示,而视频的传输和分发必须确保此帧率。即视频传输有视频传输有QoS(服务质量)要求。(服务质量)要求。o媒体流化媒体流化/流媒体流媒体nStreamingisdeliveringamultimediafilefromaservertoaclientsuchthatitcanbeprocessedasasteadyandcontinuousstream-typicallythedeliveroccursoveranetworkconnection.n流媒体流媒体(可流化媒体可流化媒体):Video、Audio、PowerPoint、Flash/Shockwav
50、e、VR、3DSERVERCLIENTstream2024/7/29苏州大学数字媒体技术基础课程媒体分发和传输o流化方式分类流化方式分类n持续下载持续下载(Progressivedownload):当多媒体文件分发并存储到客户:当多媒体文件分发并存储到客户端后才支持媒体重放;端后才支持媒体重放;n实时流化实时流化(Real-timestreaming):多媒体文件由流媒体服务器向客户:多媒体文件由流媒体服务器向客户端连续、实时传送,客户不必等到整个文件全部下载完毕。端连续、实时传送,客户不必等到整个文件全部下载完毕。o媒体分发方式媒体分发方式n单播单播(unicast):源:源(服务器服务器)
51、和目的地和目的地(客户端客户端)之间进行一对一的传输。之间进行一对一的传输。如果目的地量太大,源和网络的负载能力有限,会超负荷造成播放如果目的地量太大,源和网络的负载能力有限,会超负荷造成播放质量下降。质量下降。n多播流多播流(Multicast):源和目的地之间进行多对一的传输,网络中的同:源和目的地之间进行多对一的传输,网络中的同一多播组中的目的地共享同一信息流,可以有效的节省网络带宽。一多播组中的目的地共享同一信息流,可以有效的节省网络带宽。n广播广播(Broadcast):流媒体从一个源:流媒体从一个源(服务器端的应用服务器端的应用)发送出去后,同发送出去后,同一网段上的所有目的地一网
52、段上的所有目的地(客户端应用客户端应用)均可以接收到,广播可以看作组均可以接收到,广播可以看作组播的一个特例。播的一个特例。2024/7/29苏州大学数字媒体技术基础课程媒体分发和传输媒体分发和传输o流媒体传输协议流媒体传输协议n实时传输协议实时传输协议(RealTimeTransportationProtocol,RTP)n实时流协议实时流协议(RealTimeStreamingProtocol,RTSP)n实施传输控制协议实施传输控制协议(RealTimeTransportationControlProtocol,RTCP)n资源预约协议资源预约协议(ResourceReservation
53、Protocol,RSVP)o详细内容将在详细内容将在“第第9讲:网络流媒体技术讲:网络流媒体技术”进一步讲述。进一步讲述。RTSP协议2024/7/29苏州大学数字媒体技术基础课程媒体分析与检索o媒体检索方面存在的挑战媒体检索方面存在的挑战n不能直接进行基于文本的查询和检索;不能直接进行基于文本的查询和检索;n怎样分析或描述媒体怎样分析或描述媒体(图像图像/视频视频/音频音频)内容和语义;内容和语义;n如何索引图像如何索引图像/视频视频/音频;音频;n快速检索处理和准确的检索结果;快速检索处理和准确的检索结果;o基于内容的媒体分析与检索基于内容的媒体分析与检索(CBR)n特征提取:提取反映图
54、像特征提取:提取反映图像/视频视频/音频内容的颜色、纹理音频内容的颜色、纹理等视觉特征和音频特征;等视觉特征和音频特征;n语义提取:提取反映图像语义提取:提取反映图像/视频视频/音频语义的描述信息;音频语义的描述信息;n索引组织与描述:对提取的特征和描述信息进行高效索索引组织与描述:对提取的特征和描述信息进行高效索引;引;n检索模型:支持不同类型的媒体查询与检索模式。检索模型:支持不同类型的媒体查询与检索模式。VideosegmentsStillregionsAudiosegmentsMovingregions2024/7/29苏州大学数字媒体技术基础课程媒体分析与检索o媒体检索系统框架媒体检
55、索系统框架StorageBrowseAVDescriptionFeatureextractionManual/automaticTransmissionEncoding(fortransmission)Decoding(fortransmission)FilterPushSearch/queryPullConf.pointsHumanormachine2024/7/29苏州大学数字媒体技术基础课程基于内容的图像检索基于内容的图像检索(CBIR)oCBIR:基于图像颜色、纹理、形状等特征的相似性进行检索:基于图像颜色、纹理、形状等特征的相似性进行检索o示例:颜色相似的图像示例:颜色相似的图像20
56、24/7/29苏州大学数字媒体技术基础课程基于草图(Scratch)的图像检索n2024/7/29苏州大学数字媒体技术基础课程视频检索o不同的检索用线索2024/7/29苏州大学数字媒体技术基础课程关键帧提取和CBVR镜头检测关键帧提取步骤:1.视频分割为镜头;2.为每个镜头计算关键帧或代表性的帧;3.基于样例的检索n2024/7/29苏州大学数字媒体技术基础课程面向检索的视频标题文字提取n2024/7/29苏州大学数字媒体技术基础课程基于语音识别的视频检索Raw AudioText ExtractionRaw VideoSILENCEMUSICelectriccarsaretheyareth
57、ejuryeverytoyownerhopestoplease2024/7/29苏州大学数字媒体技术基础课程音频检索:哼唱找歌Happy BirthdayNotestartsNoteendsNotestartsNoteends音符(note)有两个重要属性:音调 (Pitch)持续时间 (Duration)音符可以用符号描述Do Re Mi Fa So La Si DoNote nameNote pitchStaff2024/7/29苏州大学数字媒体技术基础课程音频检索o哼唱找歌系统结构o有关媒体检索方面的详细内容将在“第8讲:多媒体分析与检索技术”进一步讲述。Wave to SymbolsA
58、pproximateString MatchMusicDatabaseIndexingFeature ExtractionVarious Music Formats toSymbolsMusic DatabaseHumming“La, ”Wave filesMP3 filesMIDI filesRetrievalResultRecorder2024/7/29苏州大学数字媒体技术基础课程数字版权管理(DRM)o数字媒体:技术对媒体的挑战数字媒体:技术对媒体的挑战n使用户能够更加方便而且完美地体验内容使用户能够更加方便而且完美地体验内容n成本的降低成本的降低p载体价值:可以逼近零成本载体价值:可以
59、逼近零成本p复制成本:几乎为零复制成本:几乎为零p分发成本:边际成本逼近零分发成本:边际成本逼近零n版权控制的挑战:版权控制的挑战:DRMoDRM原理原理n使用技术手段,对数字产品在分发、传输和使用等各个环节进行控制,使用技术手段,对数字产品在分发、传输和使用等各个环节进行控制,使得数字产品只能被使得数字产品只能被授权使用的人,按照授权的方式,在授权使用授权使用的人,按照授权的方式,在授权使用的期限内使用。的期限内使用。o目前应用领域目前应用领域n电子书领域(标准电子书领域(标准OEBPS)n移动通讯领域(一般遵循移动通讯领域(一般遵循OMA的的DRM规范)规范)n多媒体领域(标准多媒体领域(
60、标准:MPEGIPMP/DMP/AVSDRM)2024/7/29苏州大学数字媒体技术基础课程DRM的主要技术手段o加密加密n对多媒体的内容进行加密以防止非授对多媒体的内容进行加密以防止非授权访问权访问o水印水印n在媒体内容中嵌入无法移除的在媒体内容中嵌入无法移除的“标记标记”,以进行内容鉴别和追踪,以进行内容鉴别和追踪o指纹指纹n从媒体内容中提取的唯一标识,以进从媒体内容中提取的唯一标识,以进行内容鉴别和追踪行内容鉴别和追踪n对同一媒体文件的不同变化具有唯一对同一媒体文件的不同变化具有唯一性,对不同媒体文件的具有强区分性。性,对不同媒体文件的具有强区分性。o详细内容将在详细内容将在“第第10讲
61、:数字版权讲:数字版权管理技术管理技术”进一步讲述。进一步讲述。PlaintextEncryptionAlgorithmEncryption KeyCyphertextDecryptionAlgorithmDecryption KeyPlaintext101011101110111110Time1010111011101111102024/7/29苏州大学数字媒体技术基础课程State of Art 工业oCE:nCAS(ConditionalAccessSystem)forDTVbroadcastingnCSS(ContentScrambleSystem)forDVDnSDMI(Secure
62、DigitalMusicInitiative)forMP3playernDTCP(DigitalTransmissionContentProtection)nCPRM(ContentProtectionforRemovableMedia)nSVP(SecureVideoProcessor)nHDCP(HighBandwidthDigitalContentProtection)nAACS(AdvancedAccessContentSystem)forNG-DVDoITDRMsolution:nIntertrust,ContentGuardetcnAppleDRMforiPodandiTunes(
63、andRealHelix)nMicrosoftMediaDRMnSunMicrosystemsDReaM:opensourceandroyalty-freeoCE:cooperateundertheflagofinteroperabilitynCoralConsortium:theendof2004nMarlinJointDevelopmentAssociation:startof20052024/7/29苏州大学数字媒体技术基础课程State of Art 标准oMPEGIPMPnMPEG-2CASinterfacetoIPMP(Part11)nMPEG-4IPMP(Part13)nMPEG
64、-21IPMPoOMA(OpenMobileAlliance)n2002,formobileservicenOMADRM1.0,June2004nOMADRM2.0,Sep.2005nCMLA(ContentManagementLicensingAdministrator)oDMP(DigitalMediaProject)nDMM,Sep.,2003,LeonardoChiariglionenTarget:InteroperableDRMPlatformnPhaseIspecifications(forPortableAudioandVideoDevices,PAVs)nPhaseIIspec
65、ifications(forStationaryAudioandVideoDevices,SAVs)nPhaseIITRUs(TraditionalRightsUsage)oAVSDRM:nCoreProfilenIPTVProfile,BroadcastingProfile,AdaptiveProfile(OMA,DMP,IPMPetc.)2024/7/29苏州大学数字媒体技术基础课程互操作的数字媒体版权服务平台电子商务电子商务结算结算内容内容门户门户P2P博客博客受控内容传播受控内容传播内容注册内容注册中心中心C1U1设备设备注册中心注册中心CnMU2Un许可代理许可代理代理授权代理授权销
66、售销售(1)请求许可请求许可(0)受控内容传播受控内容传播(0)受控内容传播受控内容传播(2)验证设备验证设备(2)验证内容验证内容(3)支付请求支付请求(4)发放许可发放许可2024/7/29苏州大学数字媒体技术基础课程1.5 数字媒体标准简介 苏州大学数字媒体技术基础课程为什么需要媒体标准?o数字媒体标准是相关技术与产业之基础!数字媒体标准是相关技术与产业之基础!n技术基础技术基础:采用不同标准的数字媒体,其压缩、编码、传输、内:采用不同标准的数字媒体,其压缩、编码、传输、内容分析与检索等技术有所不同容分析与检索等技术有所不同n产业基础产业基础:五环相扣:五环相扣技术、专利、标准、产业、应
67、用技术、专利、标准、产业、应用o例子:全球电视竞争的转折点在例子:全球电视竞争的转折点在MPEG-2(1996)n2024/7/29苏州大学数字媒体技术基础课程数字媒体领域的主要技术标准oJPEGoMPEG系列:系列:MPEG-2/4/7/21oH.26x系列:系列:H.261/3/4oAVS2024/7/29苏州大学数字媒体技术基础课程JPEGoJPEGnJPEG(JointPhotographicExpertsGroup)标准标准(ISO10918)是是ISO和和ITU的联合提出的通用静态图像压缩国际标准。的联合提出的通用静态图像压缩国际标准。oJPEG的重要特性的重要特性n设定压缩参数设
68、定压缩参数n在解码速度和图像在解码速度和图像质量间均衡质量间均衡n无损压缩无损压缩原始图像重构图像逆向离散余弦变换正向离散余弦变换量化逆量化编码解码压缩图像量化表编码表Quality level: 90 File size: 10,582 bytes Quality level: 50 File size: 5,154 bytes Quality level: 1 File size: 923 bytes 2024/7/29苏州大学数字媒体技术基础课程JPEG 2000压缩标准oJPEG2000(ISO15444)是是JPEG的更新换代标准,针对的更新换代标准,针对Internet应用和无线通
69、应用和无线通信等领域。信等领域。n关键技术关键技术:以离散小波变换:以离散小波变换DWT为主的多解析压缩方式为主的多解析压缩方式n核心算法核心算法:EBCOTn高压缩比高压缩比:比:比JPEG压缩性能提高压缩性能提高30%oJPEG与与JPEG2000的性能比较的性能比较标准标准JPEGJPEG 2000标题标题连续色调静态图像的数字压缩编码连续色调静态图像的数字压缩编码新一代静态图像编码标准新一代静态图像编码标准日期日期1986.3-1992.101996.2-2000.12压缩比压缩比2-30:12-50:1主要技术主要技术离散余弦变换离散余弦变换DCTZigzag扫描扫描哈夫曼编码哈夫曼
70、编码算术编码算术编码离散小波变换离散小波变换DWTEBCOT核心算法核心算法ROI编码编码空间可扩展编码空间可扩展编码应用场合应用场合Internet数字照相数字照相图像视频编辑图像视频编辑Internet数字照相数字照相打印、扫描、移动通信打印、扫描、移动通信n2024/7/29苏州大学数字媒体技术基础课程MPEG系列标准oMPEG系列标准由国际标准化组系列标准由国际标准化组织和国际电工委员会第一联合技织和国际电工委员会第一联合技术组术组(ISO/IECJTC1)制定的。制定的。oMPEG视频标准视频标准nMPEG-1:数字电视标准,:数字电视标准,1992年正式年正式发布。发布。nMPEG
71、-2:数字电视标准,:数字电视标准,1994年成为年成为国际标准草案。国际标准草案。nMPEG-3:已于:已于1992年年7月合并到高清月合并到高清晰度电视晰度电视(High-DefinitionTV,HDTV)工作组。工作组。nMPEG-4:多媒体应用标准:多媒体应用标准(1999年发年发布布)。nMPEG-7:多媒体内容描述接口标准:多媒体内容描述接口标准(2001年发布年发布)。nMPEG-21:有关多媒体框架的标准:有关多媒体框架的标准(正正在研究在研究)。nMPEG-A:多媒体应用格式标准:多媒体应用格式标准(正在正在研究研究)。2024/7/29苏州大学数字媒体技术基础课程MPEG
72、-1oMPEG-1标准编号标准编号ISO/IEC11172,标准名称为,标准名称为“用于码率约为用于码率约为1.5Mbps时用于数字存储媒体的动像及伴音的编码时用于数字存储媒体的动像及伴音的编码”。oMPEG-1的基本目标的基本目标n在音像质量上,达到在音像质量上,达到VHS/VCD的放像质量的放像质量n在存储上,可存储在光盘、数字录音带、硬盘等在存储上,可存储在光盘、数字录音带、硬盘等n在传输码流上,为在传输码流上,为1-1.5Mbps,以,以1.2Mbps为宜为宜n在网络方面,应适应在网络方面,应适应LAN、ISDN等多种网络等多种网络n满足对称和不对称应用满足对称和不对称应用oMPEG-
73、1的基本内容的基本内容n几种伴音压缩数据和图像数据的复用;几种伴音压缩数据和图像数据的复用;n图像的压缩;图像的压缩;n伴音的压缩。伴音的压缩。oMPEG-1的特点的特点n使用使用MPEG-1的压缩算法的压缩算法,可将一部可将一部120分钟长的电影压缩到分钟长的电影压缩到1.2GB左右。因左右。因此此,它被广泛地应用于它被广泛地应用于VCD制作。制作。2024/7/29苏州大学数字媒体技术基础课程MPEG-2oMPEG-2是是MPEG-1的扩展。标准编号的扩展。标准编号ISO/IEC13818,标准名称为,标准名称为“运运动图像及其伴音信息的通用编码动图像及其伴音信息的通用编码”。主要内容为:
74、。主要内容为:n码率为码率为4-9Mbps,最大,最大15Mbps;n涵盖涵盖MPEG-1全部内容全部内容;n规定数字存储媒体命令和控制扩展协议,用于管理数据流规定数字存储媒体命令和控制扩展协议,用于管理数据流(DSM-CC);n先进的声音编码方案先进的声音编码方案;n规定系统解码器实时接口扩展标准,用来适应网络传输规定系统解码器实时接口扩展标准,用来适应网络传输;nDSM-CC一致性扩展测试一致性扩展测试;n先进声音编码标准修正。先进声音编码标准修正。oMPEG-2的特点的特点n利用网络提供的利用网络提供的3100Mbps的数据传输率,支持具有更高分辨率图象的压缩和更高的的数据传输率,支持具
75、有更高分辨率图象的压缩和更高的图象质量;图象质量;n可支持交迭图象序列(每帧图像由两个场组成),支持可伸缩性编码,多种运动估计可支持交迭图象序列(每帧图像由两个场组成),支持可伸缩性编码,多种运动估计方式,提供一个较广的范围改变压缩比;方式,提供一个较广的范围改变压缩比;n可以适应不同画面质量、存储容量和带宽的要求,为此定义了不同的功能档次(可以适应不同画面质量、存储容量和带宽的要求,为此定义了不同的功能档次(profile,框架),每个档次又分为不同的等级(,框架),每个档次又分为不同的等级(level)。)。o和和MPEG-1主要区别主要区别n隔行扫描制式;隔行扫描制式;DCT变换可在帧内
76、,也可在场内。用户可自行选择,亦可自适应选择。变换可在帧内,也可在场内。用户可自行选择,亦可自适应选择。2024/7/29苏州大学数字媒体技术基础课程MPEG-4oMPEG-4标准编号标准编号ISO/IEC14496,标准名称为标准名称为“甚低速率视听编甚低速率视听编码码”n1998年年11月公布第一版,月公布第一版,1999年年12月公布了第二版,共分为月公布了第二版,共分为6个部分。个部分。o目标是低速率下(目标是低速率下(64kbps)的视频、音频编码,)的视频、音频编码,更加注重多媒体更加注重多媒体系统的交互性和灵活性。系统的交互性和灵活性。o引入了视听对象引入了视听对象(Audio-
77、VisualObjects,AVO)nAVO可以是孤立的人,也可是这个人的语音或一段背景音乐等。可以是孤立的人,也可是这个人的语音或一段背景音乐等。nAVO具有高效编码、高效存储、高效传播以及可互操作的特性。具有高效编码、高效存储、高效传播以及可互操作的特性。nMPEG-4对对AVO的操作主要有:采用的操作主要有:采用AVO来表示听觉、视觉或者视听组合内来表示听觉、视觉或者视听组合内容;生成复合的容;生成复合的AVO;对;对AVO的数据灵活地多路合成与同步;对的数据灵活地多路合成与同步;对AVO进行交进行交互操作等。互操作等。oMPEG-4的特点的特点n与与MPEG-1和和2相比,相比,MPE
78、G-4更适于交互视听服务以及远程监控。更适于交互视听服务以及远程监控。n设计目标使它具有更广的适应性和可扩展性。设计目标使它具有更广的适应性和可扩展性。nMPEG-4能以很低的速率基本实现能以很低的速率基本实现DVD的质量;由于属于一种高比率有损压的质量;由于属于一种高比率有损压缩算法,其图像质量始终无法和缩算法,其图像质量始终无法和DVD的的MPEG-2相比。相比。2024/7/29苏州大学数字媒体技术基础课程举例:MPEG-4视听场景的说明o由由4个复合媒体对个复合媒体对象(人,背景,象(人,背景,家具,音视演示)家具,音视演示)组成。组成。o系统定义了一个系统定义了一个场景坐标系场景坐标
79、系,然后然后可以指定组成该可以指定组成该场景的媒体对象场景的媒体对象在该坐标系中的在该坐标系中的位置,并可设定位置,并可设定用户观察该场景用户观察该场景时所在的坐标位时所在的坐标位置,这些位置信置,这些位置信息都会包含在场息都会包含在场景的描述中。景的描述中。2024/7/29苏州大学数字媒体技术基础课程MPEG-7oMPEG-7是一种用于信息检索的内容表示的标准。标准编号是一种用于信息检索的内容表示的标准。标准编号ISO/IEC15938nMPEG-7将建立各种类型多媒体信息的标准的描述方法。这种描述与内容关联在一起,将建立各种类型多媒体信息的标准的描述方法。这种描述与内容关联在一起,支持对
80、用户感兴趣的材料的快速、高效的检索。支持对用户感兴趣的材料的快速、高效的检索。oMPEG-7的目标是的目标是:n规定规定astandardsetofdescriptors用来描述各种类型的多媒体信息用来描述各种类型的多媒体信息,n对描述符及其相互关系的预定义结构对描述符及其相互关系的预定义结构(称为称为DescriptionSchemes)以及用户定义自己的结以及用户定义自己的结构的方法进行标准化,构的方法进行标准化,n制定一种用于定义新的制定一种用于定义新的descriptionschemes的标准化的语言的标准化的语言DDL(DescriptionDefinitionLanguage),n
81、把描述把描述(asetofinstantiatedDescriptionSchemes)与内容关联在一起与内容关联在一起,以便用户快速有效以便用户快速有效地检索感兴趣的材料,地检索感兴趣的材料,n把描述进行编码表示把描述进行编码表示,以便有效地进行存储和快速访问。以便有效地进行存储和快速访问。Automatic extraction of features (or descriptors)Search engines2024/7/29苏州大学数字媒体技术基础课程MPEG-7 Description苏州大学数字媒体技术基础课程MPEG音频标准oMPEG音频压缩的主要依据是人耳音频压缩的主要依据是
82、人耳朵的听觉特性,利用了朵的听觉特性,利用了“心理声学心理声学模型模型(psychoacousticmodel)”。n心理声学模型的一个基本概念:心理声学模型的一个基本概念:听觉阈值。低于听觉阈值的声音听觉阈值。低于听觉阈值的声音信号听不到,因此就可以把这部信号听不到,因此就可以把这部分信号去掉。分信号去掉。n心理声学模型的另一个概念:听心理声学模型的另一个概念:听觉蔽特性。听觉阈值会随听到觉蔽特性。听觉阈值会随听到的不同频率的声音而发生变化。的不同频率的声音而发生变化。nMPEG音频标准音频标准nMPEG-1Layer1:子带无损压缩:子带无损压缩+可选的简单掩蔽模型。可选的简单掩蔽模型。n
83、MPEG-1Layer2:更高级的掩蔽模型。:更高级的掩蔽模型。nMPEG-1Layer3(即即MP3):增加了对低比特率的处理。:增加了对低比特率的处理。nMPEG-2AAC(即即MP4):压缩比更大:压缩比更大(15:1-20:1),增加了对立体声的完美再,增加了对立体声的完美再现、比特流效果音扫描、多媒体控制、降噪等特性。现、比特流效果音扫描、多媒体控制、降噪等特性。2024/7/29苏州大学数字媒体技术基础课程H.26X系列标准oH.26X系列标准由国际电联(系列标准由国际电联(ITU-T)制定的。)制定的。oH.26X系列标准系列标准nH.261:针对在窄带:针对在窄带ISDN上实现
84、速率上实现速率P64kbps的双向声像业务的双向声像业务,其中其中P=130。nH.263:针对低比特率视频应用:针对低比特率视频应用nH.264:ITU-T和和ISO/IEC的的MPEG共同成立的联合视频小组共同成立的联合视频小组JVT提出,目的是为视频编码应用提供下一代的解决方案。提出,目的是为视频编码应用提供下一代的解决方案。Video CodingSystem ControlAudio CodingDataCall ControlMultimedia Multiplex and SynchronizationNetwork InterfaceNetwork AdaptationGene
85、ral protocol stack of H-series audiovisual communication terminal2024/7/29苏州大学数字媒体技术基础课程H.261oH.261是是ITU-T于于19841989年制定的视频编码标准。年制定的视频编码标准。n针对可视电话和视频会议等业务。针对可视电话和视频会议等业务。n目的:在窄带目的:在窄带ISDN上实现速率上实现速率P64kbps的双向声像业务的双向声像业务,其中其中P=130。n只支持两种图像格式只支持两种图像格式:CIF(352288像素像素)和和QCIF(176144像素像素)。o技术特征技术特征n帧包括帧包括I帧
86、(帧(Intra-frames)和)和P帧(帧(Inter-frames););n1616微块的运动补偿、微块的运动补偿、88DCT、标量量化、标量量化、Z-Z扫描、游程编码扫描、游程编码和变长编码的编码结构。和变长编码的编码结构。oH.261是视频编码的一个里程碑,对后续标准有较大的影响。是视频编码的一个里程碑,对后续标准有较大的影响。n现有的一系列视频编码标准的编码方法都是基于现有的一系列视频编码标准的编码方法都是基于H.261中的混合编码方中的混合编码方法和编码结构。法和编码结构。oH.261的特点的特点n优点:低复杂度优点:低复杂度n缺点:低压缩比性能、缺乏灵活性缺点:低压缩比性能、缺
87、乏灵活性2152024/7/29苏州大学数字媒体技术基础课程H.263oH.263标准是标准是ITU-T于于1996年年制定的视频编码标准。制定的视频编码标准。n针对低比特率针对低比特率(低于(低于64Kb/s)视频应用视频应用;n目标目标:在许多方面上通过视频编码算法和处理性能的提高在许多方面上通过视频编码算法和处理性能的提高,从而比从而比H.261较大较大地提高编码性能。地提高编码性能。nH.263支持图像的格式有支持图像的格式有:SubQCIF(12896像素像素)、QCIF、CIF、4CIF(704576像素像素)和和16CIF(14081152像素像素)。o技术特征技术特征n使用了半
88、像素运动矢量和重新设计的可变长编码使用了半像素运动矢量和重新设计的可变长编码(VLC)表表;n更多的帧大小和可选的编码模式更多的帧大小和可选的编码模式;n运动向量预测。运动向量预测。oH.263+:H.263的修改版本的修改版本n修改量化模式;修改量化模式;n运动向量范围:取决于帧尺寸;运动向量范围:取决于帧尺寸;n修改半像素插值算法修改半像素插值算法n更多的输入视频格式等。更多的输入视频格式等。216H.263H.263+H.263+2024/7/29苏州大学数字媒体技术基础课程H.264oH.264标准是标准是ITU-T和和ISO/IEC的的MPEG共同成立的联合视频小组共同成立的联合视频
89、小组JVT于于2003年年公布的视频编码标准。公布的视频编码标准。n目标目标:为视频编码应用提供下一代的解决方案为视频编码应用提供下一代的解决方案,提供显著增强的编码效率提供显著增强的编码效率,,同同时减少时减少H.263中一些混乱的可选模式。中一些混乱的可选模式。o标准内容分三个档次:标准内容分三个档次:n基本档次基本档次-实现版本的基本功能;实现版本的基本功能;n核心档次核心档次-用于用于HDTV、DVD;n扩展档次扩展档次-用于用于IPTV。o技术特征技术特征n44块的整数变换块的整数变换n多参考帧预测多参考帧预测n多模式高精度帧间预测多模式高精度帧间预测n多种帧内预测模式多种帧内预测模
90、式n统一的熵编码等。统一的熵编码等。oH.264的特点的特点n有点:有点:更高的压缩比和更好的信道适应性更高的压缩比和更好的信道适应性;n缺点:缺点:计算复杂度的大大增加。计算复杂度的大大增加。2172024/7/29苏州大学数字媒体技术基础课程AVS标准oAVS是我国具有独立自主知识产权的视音频编码标准。是我国具有独立自主知识产权的视音频编码标准。o标准进展标准进展n2002年,数字音视频编解码技术标准年,数字音视频编解码技术标准(AVS)工作组成立。工作组成立。n2006年年1月月6日,信息产业部批准通过日,信息产业部批准通过AVS视频部分。视频部分。n2006年年2月,月,信息技术信息技
91、术先进音视频编码先进音视频编码第二部分:视频第二部分:视频国家标准国家标准GB/T20090.2-2006发布。发布。n2006年年3月月1日,日,GB/T20090.2-2006正式实施。正式实施。o走向国际走向国际n2006年年9月,月,AVS已正式成为国际电联已正式成为国际电联ITU-T的联络组织,意味着的联络组织,意味着AVS标准已具备选入标准已具备选入ITU-T标准体系的资格标准体系的资格,为为AVS的国际化道路打开了大的国际化道路打开了大门。门。n2007年年4月,月,ISO/IECMPEG在新一代标准框架在新一代标准框架RVC要求支持的第一要求支持的第一个非个非MPEG视频编码标
92、准就是视频编码标准就是AVS。n2007年年5月,月,AVS列入列入ITU-TIPTVFG的内容编码标准文件,成为与的内容编码标准文件,成为与H.264、VC-1并列的选项。并列的选项。2024/7/29苏州大学数字媒体技术基础课程AVS国家标准的构成AVS部分部分国家标准计划号国家标准计划号小组草案小组草案(WD)工作组草工作组草案案(CD)最终草案最终草案(FCD)标准送审标准送审稿(稿(FD)国家标准国家标准(GB)AVS1-P1(系统(系统-广播)广播)20051304-T-3392003.102003.122006.102007.03AVS1-P2(视频(视频-基准)基准)20032
93、265-T-3392003.102003.122004.42004.82006.2AVS1-P2(视频(视频-增强)增强)20032265-T-3392005.92006.32008.6AVS1-P3(音频双声道)(音频双声道)20051305-T-3392004.122005.32005.122006.4AVS1-P3(音频(音频-5.1)20051305-T-3392005.92005.122005.122006.4AVS1-P3(移动)(移动)20051305-T-3392007.032007.62007.92007.12AVS1-P4(一致性测试)(一致性测试)20051306-T-3
94、392007.3-P2AVS1-P5(参考软件)(参考软件)20051307-T-3392006.3AVS1-P6(DRM)20051308-T-3392005.32005.122006.122006.03AVS1-P7(移动视频)(移动视频)20051309-T-3392005.32005.62005.92006.4AVS1-P8.1(系统(系统-IP)TBD2005.32005.92005.122006.3AVS1-P8.2(系统(系统-IP)TBD2006.12006.32006.3AVS1-P9.1(文件格式)(文件格式)TBD2005.32005.92005.122006.3AVS1
95、-P9.2(文件格式)(文件格式)TBD2006.12006.32006.32006.3n2024/7/29苏州大学数字媒体技术基础课程AVS视频技术框架熵编码逆量化& 反变换运动补偿控制数据量化变换因子运动数据帧内/帧间编码控制运动估计变换/量化-输入视频信号划分成16x16的宏块帧内预测环路滤波输出视频信号苏州大学数字媒体技术基础课程Flower序列比较结果 (1080p)o与H.264的比较:编码性能基本相当,实现复杂度明显降低nAVS编码复杂度,相当于H.264的30%nAVS解码复杂度,相当于H.264的70%2024/7/29苏州大学数字媒体技术基础课程AVS创造中国音视频产业跨越
96、机遇n2024/7/29苏州大学数字媒体技术基础课程1.6 数字媒体的传播模式苏州大学数字媒体技术基础课程大众传播模式 o信息论的通信摸式 n任何电信通信技术如电话、电报、广播、电视等都遵循着这一模式 2024/7/29苏州大学数字媒体技术基础课程数字媒体的传播模式o5w传播模式 拉斯韦尔的5W传播模式 施拉姆的传播模式whoSay whatIn which channelTo whoWith what effect2024/7/29苏州大学数字媒体技术基础课程o大众传播模式 施拉姆的大众传播模式施拉姆的大众传播模式 核核心心接受信息接受信息理解信息理解信息把信息转换把信息转换成可在信道成可在
97、信道传送的信号传送的信号经大批复制的经大批复制的形同信息形同信息2024/7/29苏州大学数字媒体技术基础课程数字媒体传播模式 o数字媒体系统遵循着信息论的通讯模式 数字媒体传播模式数字媒体传播模式2024/7/29苏州大学数字媒体技术基础课程o信号、比特与信息n比特流就是信号,比特流包括信息码和控制码两部分比特流(码)比特流(码)注释注释信息码信息码比特流的主体,可映射为信息媒体和比特流的主体,可映射为信息媒体和超媒体超媒体控制码控制码同步同步记录比特流的起始和终止位置。记录比特流的起始和终止位置。压缩协议压缩协议记录编码采用的协议,以便译码时也记录编码采用的协议,以便译码时也采用相同的协议
98、还原信息。采用相同的协议还原信息。纠错校验纠错校验提供滤除噪声(错码)的方式。提供滤除噪声(错码)的方式。2024/7/29苏州大学数字媒体技术基础课程o编码与译码n编码是根据一定的协议或格式把模拟信息转换成比特流的过程n译码是编码的逆过程,同时去掉比特流在传播过程中混入的噪声o优点n同步控制n数据压缩n纠错校验2024/7/29苏州大学数字媒体技术基础课程o网络与信道n网络上的多点传播模式 o信源与信宿n信源和信宿都是计算机n信源和信宿的位置可以随时互换2024/7/29苏州大学数字媒体技术基础课程1.7 数字媒体处理系统苏州大学数字媒体技术基础课程构成2024/7/29苏州大学数字媒体技术
99、基础课程数据数据文本、图片、音频、视频输入输入键盘鼠标音频输入视频输入触摸屏网络处理器处理器16位、32位的高速控制器控制器BIOSDOSWINDOWS数字媒体软件输出输出显示打印机音频输出视频输出网络数据数据文本、图片、音频、视频数字媒体计算机数字媒体计算机存储器存储器RAM高速缓冲存储器视频硬盘CD-ROM可携式盘片2024/7/29苏州大学数字媒体技术基础课程1.8 数字媒体技术应用苏州大学数字媒体技术基础课程数字媒体技术的应用o家庭娱乐n数字影视(有线电视、IPTV、地面数字电视)n数字游戏n数字广播n数字广告o教育培训o视频会议o远程医疗o移动通信n移动多媒体广播、手机电视、移动电视
100、o2024/7/29苏州大学数字媒体技术基础课程应用示例1:高清视频Intel AVSIntel AVSIntel AVS高清播放器高清播放器高清播放器Intel AVSIntel AVSIntel AVS高清播放器高清播放器高清播放器2024/7/29苏州大学数字媒体技术基础课程应用示例2: 手机电视oIntel IMPlayer嵌入式AVS播放器n可在Pocket PC和Smart Phone上运行n支持全屏播放和窗口方式播放。2024/7/29苏州大学数字媒体技术基础课程应用示例3:高清地面广播2024/7/29苏州大学数字媒体技术基础课程应用示例4:数字动漫o数字动漫:艺术与科学的完美
101、结合2024/7/29苏州大学数字媒体技术基础课程电子出版物o电子出版物的概念及发展 n电子出版物系指以数字代码方式将图、文、声、像等信息存储在磁、光、电介质上,通过计算机或类似设备阅读使用,并可复制发行的大众传播媒体。 n电子出版物可以说是利用计算机产生,以数字代码的形式将多种媒体信息存储于光、磁介质上,可通过信息高速公路进行传播,借助于多媒体计算机进行阅读,并可复制发行的大众传播媒体 o电子出版物主要经历三个发展时期n运用信息技术改造传统的出版印刷业n发展封装型电子光盘出版物n发展网络出版物。 2024/7/29苏州大学数字媒体技术基础课程电子出版与传统出版的比较 出版形式出版形式 内容内
102、容编辑制编辑制作作介质介质发行方式发行方式阅读方式阅读方式传统出版传统出版物物有纸印刷有纸印刷 文字图片文字图片电子照电子照排排纸张纸张传统传统传统传统电子出版电子出版物物光盘出版光盘出版多媒体多媒体信息信息多媒体多媒体制作制作光盘光盘传统传统多媒体多媒体计算计算机机电子出版电子出版物物网络出版网络出版多媒体多媒体信息信息多媒体多媒体制作制作硬磁盘硬磁盘Internet网络网络网络多媒网络多媒体计体计算机算机n2024/7/29苏州大学数字媒体技术基础课程o电子出版物的特征 n信息量大、可靠性高,承载信息丰富n阅读需要借助计算机n信息的结构化和数据库功能n灵活方便的交互特性n需要相应的软件的支
103、持n发行速度快,实时性强o电子出版物的分类2024/7/29苏州大学数字媒体技术基础课程n2024/7/29苏州大学数字媒体技术基础课程o电子出版物的影响 n开发激光照排与轻印刷中的信息资源,降低出版成本n电子出版物易于拷贝,能避免发行数量的限制n网络出版有着巨大的潜力n电子出版物的版权保护是一个新的课题n传统出版印刷业还将长期存在下去2024/7/29苏州大学数字媒体技术基础课程IBM数字媒体工厂o它是一个开放式框架,是包含硬件、软件及服务的全面解决它是一个开放式框架,是包含硬件、软件及服务的全面解决方案。它将帮助企业在每一商业阶段充分利用数字媒体资源,方案。它将帮助企业在每一商业阶段充分利
104、用数字媒体资源,从而创造新的商业机会和获得更大的商业回报从而创造新的商业机会和获得更大的商业回报。o将媒体行业解决方案分为将媒体行业解决方案分为n数字媒体创建数字媒体创建p在开放技术平台下,进行在开放技术平台下,进行2D/3D生产,模拟,和非线性编辑。生产,模拟,和非线性编辑。IBMeServers(xSeries),LinuxOS,,Storage(FAStT)降低生产成本,缩短内容创作降低生产成本,缩短内容创作周期,简化运行和技术环境。周期,简化运行和技术环境。n数字媒体门户数字媒体门户p在共享、开放的存储基础上,建立一个安全可靠的门户中心来整合媒资内容及业在共享、开放的存储基础上,建立一
105、个安全可靠的门户中心来整合媒资内容及业务流程,达到内容的个性化及信息的动态发布务流程,达到内容的个性化及信息的动态发布2024/7/29苏州大学数字媒体技术基础课程IBM数字媒体工厂(续)n数字媒体管理数字媒体管理p基于基于IBM强壮的三角形架构的体系结构,帮助客户高效地采集、索引、编目、强壮的三角形架构的体系结构,帮助客户高效地采集、索引、编目、存储、查询、重用、管理媒资内容,实现复杂的元数据的统一管理、索引与内存储、查询、重用、管理媒资内容,实现复杂的元数据的统一管理、索引与内容的良好分离,定置灵活的业务流程,完成在线、近线、离线设备上的视、音容的良好分离,定置灵活的业务流程,完成在线、近
106、线、离线设备上的视、音频节目的自动归档及内容上下载。频节目的自动归档及内容上下载。n数字媒体贸易。数字媒体贸易。p帮助媒体公司有效地实现现有内容的再升值,做到数字媒体的个性化发布及网帮助媒体公司有效地实现现有内容的再升值,做到数字媒体的个性化发布及网上销售,使消费者能够方便地搜索、预览、下载、购买媒体商品,同时可选用上销售,使消费者能够方便地搜索、预览、下载、购买媒体商品,同时可选用多种媒体格式及支付手段多种媒体格式及支付手段2024/7/29苏州大学数字媒体技术基础课程数字媒体开发者的资源o杂志和期刊o销售商和交易展示o因特网、www和新闻组o经验2024/7/29苏州大学数字媒体技术基础课
107、程小结o数字媒体技术及其应用改变了使用计算机的方式o数字媒体技术使提供信息、培训和娱乐所需要的大容量文本、图形、音频和视频的传输成为可能o对数字媒体内容的使用必须经过版权法的审查,以维护开发者和使用者的权益。2024/7/29苏州大学数字媒体技术基础课程本课程的关注点o(以图像为例)o本课程不关心:n承载图片的照相纸、磁带或存储器,那是物理系、化学系或电子系关心的事情n图片的主观意义(是否美、传达什么理念),那是艺术系和传媒系的任务o本课程关注的是:n用比特表示任意图像的方法(编码问题)n(客观上)图像中存在什么对象、什么场景(理解问题)n以及用计算机这个工具处理数字媒体的方法苏州大学数字媒体
108、技术基础课程课堂讨论o3ANY: Any One, Any Topic, and Any Suggestion oExamplesn对多媒体技术的初步感受和体会n对未来多媒体技术发展趋势的理解与认知n对课程内容、形式、授课教师、课程作业等的建议n2024/7/29苏州大学数字媒体技术基础课程课程作业o任务:撰写数字媒体相关的课程报告,二选一任务:撰写数字媒体相关的课程报告,二选一n研究综述报告:对国内外数字媒体某一相关技术的最研究综述报告:对国内外数字媒体某一相关技术的最新发展进行全面综述,形成新发展进行全面综述,形成5000字以上的综述报告,字以上的综述报告,要求查阅英文学术论文要求查阅英文
109、学术论文30篇以上。篇以上。n研究技术报告:对课程涉及的数字媒体相关问题,要研究技术报告:对课程涉及的数字媒体相关问题,要求选择其中一篇重点精读,并围绕该论文的主题查阅求选择其中一篇重点精读,并围绕该论文的主题查阅相关文献(不少于相关文献(不少于10篇,其中英文不少于篇,其中英文不少于5篇),进篇),进行专题研究,并进行实验,最后根据文献的思路或自行专题研究,并进行实验,最后根据文献的思路或自己的思路撰写阅读报告。己的思路撰写阅读报告。o时间:时间:6月初提交(具体提交日期和方式再另行月初提交(具体提交日期和方式再另行通知)通知)2024/7/29苏州大学数字媒体技术基础课程思考题o 数字媒体包括哪几方面的内容,数字媒体传播有什么特点?o数字技术与数字传播应用有何区别和关系?o试讨论数字媒体在今后社会中会有什么新的应用。o你曾用过哪些类型的数字媒体产品2024/7/29