《【2017年整理】多媒体技术教案》由会员分享,可在线阅读,更多相关《【2017年整理】多媒体技术教案(470页珍藏版)》请在金锄头文库上搜索。
1、多媒体技术基础1、多媒体技术概述、多媒体技术概述2、多媒体编辑语言应用、多媒体编辑语言应用3、多媒体计算机结构体系、多媒体计算机结构体系4、图形、图像、色彩感觉、图形、图像、色彩感觉5、多媒体数据压缩技术、多媒体数据压缩技术6、超文本和超媒体、超文本和超媒体7、音频信息的获取与处理、音频信息的获取与处理8、多媒体网络应用、多媒体网络应用第一章第一章 多媒体技术概述多媒体技术概述 多媒体技术的定义多媒体技术的定义 多媒体的分类多媒体的分类 多媒体计算机的关键技术多媒体计算机的关键技术 多媒体计算机技术的发展和应用多媒体计算机技术的发展和应用多媒体技术的概述多媒体技术的概述多媒体:多媒体:融合两种
2、或两种以上媒体的一融合两种或两种以上媒体的一 种人种人 -机交互式信息交流和传播机交互式信息交流和传播 媒体媒体 。媒体媒体媒体(媒体( Medium)在计算机领域中有)在计算机领域中有两种含义两种含义 :1. 用以存储信息的实体,如磁带、磁盘用以存储信息的实体,如磁带、磁盘、光盘和半导体存储器;、光盘和半导体存储器;2. 信息的载体,如数字、文字、声音、信息的载体,如数字、文字、声音、图形和图像。图形和图像。多媒体技术中的媒体是指后者。多媒体技术中的媒体是指后者。媒体媒体 “媒体媒体 ”的原义是的原义是 “thingsinthemiddle”,又称载体或介质,指信息传送和存储的最基又称载体或
3、介质,指信息传送和存储的最基本的技术和手段本的技术和手段 。 可分为感知媒体(可分为感知媒体( perceptionmedium)、表示媒体(、表示媒体( representationmedium)、显示媒体(、显示媒体( presentationmedium)、)、存储媒体(存储媒体( storagemedium)和传输媒体)和传输媒体( transmissionmedium)五类。)五类。 媒体媒体感知媒体:指人的感觉器官所能感知媒体:指人的感觉器官所能 感觉感觉到的信息的自然种类。如声音、图形到的信息的自然种类。如声音、图形、图像、动画、电影和文本等。人的、图像、动画、电影和文本等。人的
4、感觉包括视觉、听觉、触觉、嗅觉、感觉包括视觉、听觉、触觉、嗅觉、味觉等。感知媒体帮助人类感知环境味觉等。感知媒体帮助人类感知环境的信息。目前,人类主要靠视觉和听的信息。目前,人类主要靠视觉和听觉来感知环境的信息。触觉作为一种觉来感知环境的信息。触觉作为一种感知方式也慢慢引入到计算机中。感知方式也慢慢引入到计算机中。媒体媒体人类从外部世界获取信息的人类从外部世界获取信息的70%80%是从视觉获得,是从视觉获得, 10%从听从听觉获得,其余的觉获得,其余的 10%从触觉、嗅觉和从触觉、嗅觉和味觉获得。味觉获得。感知媒体例:文本感知媒体例:文本象形文字: foot(埃及)汉字:水(唐朝怀素、东晋王羲
5、之及周朝石鼓文)中国甲骨文字释文 旬壬申夕月有食 说明 远在三千年前我国即有关于天文方面的记录,本片甲骨是当时月食的记录。这说明我国具有悠久的文明历史。 感知媒体例:图形和图像感知媒体例:图形和图像图形图像感知媒体例:动画感知媒体例:动画动画媒体媒体表示媒体:为传播和表达某种感知媒体表示媒体:为传播和表达某种感知媒体所指定的各类信息的编码与格式。例如所指定的各类信息的编码与格式。例如ASCII码、码、 语音语音 编码、电报码、图像编编码、电报码、图像编码乐谱等。码乐谱等。媒体媒体表示媒体是为传输感觉媒体而研究出表示媒体是为传输感觉媒体而研究出来的中间手段,能更有效地将感觉媒来的中间手段,能更有
6、效地将感觉媒体从一地传向另一地体从一地传向另一地 媒体媒体显示媒体:用于输入和输出感觉媒体的载体显示媒体:用于输入和输出感觉媒体的载体输出媒体输出媒体显示器、扬声器、打印机、绘图仪等,显示器、扬声器、打印机、绘图仪等,输入媒体输入媒体键盘、鼠标器、扫描器、话筒、摄像机等键盘、鼠标器、扫描器、话筒、摄像机等显示媒体是用于通信中电信号和感觉媒体之间转换所显示媒体是用于通信中电信号和感觉媒体之间转换所用的媒体用的媒体媒体媒体存储媒体:用于存放表示媒体的载体存储媒体:用于存放表示媒体的载体,如内存、软盘、硬盘、光盘、纸张,如内存、软盘、硬盘、光盘、纸张等。等。 媒体媒体传输媒体:用于把表示媒体从一处传
7、输到传输媒体:用于把表示媒体从一处传输到另一处的物理实体另一处的物理实体如各种导线、电缆、电话线、光纤、无线如各种导线、电缆、电话线、光纤、无线电、红外线等传输媒体。电、红外线等传输媒体。显示媒体(输入设备 ) 存储媒体显示媒体(输出设备)感觉媒体感觉媒体表示媒体表示媒体各种媒体的关系:媒体媒体摄像机 .avi 硬盘 .avi 显示器多媒体计算机技术定义多媒体计算机技术定义 多媒体多媒体 =多种媒体数据多种媒体数据 +一系列交一系列交互互Multimedia Computing简单地说简单地说 :计算机综合处理声、文、图信息;计算机综合处理声、文、图信息;具有集成性和交互性;具有集成性和交互性
8、;交互交互 交互是人类获取信息、掌握知识的重交互是人类获取信息、掌握知识的重要途径要途径 看见的信息人们只能记住看见的信息人们只能记住 20% 听见的信息人们只能记住听见的信息人们只能记住 30% 既看见同时又听见的信息人们能记住既看见同时又听见的信息人们能记住50% 既看见同时又听见并且也参与的信息人既看见同时又听见并且也参与的信息人们能记住们能记住 80%人机交互人机交互 人机交互(人机交互( Human-ComputerInteraction,简写简写 HCI):):是研究关于设计、评价和实现供是研究关于设计、评价和实现供人们使用的交互计算系统以及有关这人们使用的交互计算系统以及有关这些
9、现象进行研究的科学。些现象进行研究的科学。返回超文本超文本 hypertext 传统文本:以传统文本:以 线性线性 方式组织的。方式组织的。 超文本:以超文本:以 非线性非线性 方式组织的。方式组织的。 超链接(超链接( hyperlink):多种媒体之):多种媒体之间或者媒体于其他文件之间的链接。间或者媒体于其他文件之间的链接。超媒体超媒体 除了使用文本外,还使用图形、图像除了使用文本外,还使用图形、图像、声音、动画或影视片段等媒体之间、声音、动画或影视片段等媒体之间的链接关系的链接关系计算机技术发展潮流计算机技术发展潮流 网络技术时代网络技术时代无所不在的网(无所不在的网( Interne
10、t)众多的用户众多的用户浩瀚的信息浩瀚的信息超文本标记语言超文本标记语言 HTMLHelloEveryone!虚拟现实造型语言虚拟现实造型语言 VRMLVirtualRealityModelingLanguage是用来描述万维网页面上三维交互环是用来描述万维网页面上三维交互环境的文件格式。境的文件格式。浏览方式:浏览方式: 1.普通浏览器安装插件普通浏览器安装插件2.单独的单独的 VRML浏览器浏览器VRML浏览器浏览器 Cortona ParallelGraphics公司的公司的 VRML浏览器最为突出浏览器最为突出 。 ParallelGraphics公司的公司的 VRML浏览器浏览器 C
11、ortona,支持支持 MPEG等视频文件,流媒体文件,等视频文件,流媒体文件, Mp3等多种等多种音频文件,音频文件, Flash动画文件,多种材质效果,支持动画文件,多种材质效果,支持Nurbs曲线,粒子效果,雾化效果。支持键盘输入曲线,粒子效果,雾化效果。支持键盘输入、拖放控制,支持、拖放控制,支持 VR眼镜等硬件设备,眼镜等硬件设备, 更是业内更是业内第一个第一个 (也是唯一也是唯一 )支持最新支持最新 EAI功能的功能的 VRML浏览器浏览器,支持微软公司,支持微软公司 Windows操作系统,并已在操作系统,并已在 PC机机、苹果机和、苹果机和 Java(X3D)机的操机的操 作系
12、统平台上经过作系统平台上经过测试,甚至支持带测试,甚至支持带 WindowsCE操作系统的无线设操作系统的无线设备(备( PDA、手机等)和机顶盒上网浏览、手机等)和机顶盒上网浏览 VRML内容内容。而它的安装文件仅有。而它的安装文件仅有 1M多,是各种多,是各种 VRML浏览器浏览器中最小的。中最小的。 Cortona浏览浏览 器器 使用方便,使用方便, 3D的效果的效果,交互性能近乎完美,交互性能近乎完美 ,是目前最多用户使用的是目前最多用户使用的 VRML浏览器。浏览器。 计算机技术发展潮流计算机技术发展潮流 后后 PC时代时代无所不在的计算机无所不在的计算机高性能、低价位、超小型的高性
13、能、低价位、超小型的 CPU瘦终端对瘦终端对 PC的冲击的冲击 无线网络时代的来临:无线网络时代的来临:笔记本笔记本 PC、 PDA,蜂窝电话需要更方便,蜂窝电话需要更方便的联结的联结各种智能设备渗入家庭各种智能设备渗入家庭*多媒体计算机的关键技术多媒体计算机的关键技术 要把一台普通的计算机变成多媒体计要把一台普通的计算机变成多媒体计算机要解决的关键技术是:算机要解决的关键技术是:视频音频信号获取技术;视频音频信号获取技术;多媒体数据压缩编码和解码技术;多媒体数据压缩编码和解码技术;视频音频数据的实时处理技术;视频音频数据的实时处理技术; 视频音频数据的输出技术。视频音频数据的输出技术。视频音
14、频信号获取技术视频音频信号获取技术过去计算机处理数和文字,现在过去计算机处理数和文字,现在要综合处理生、文、图要综合处理生、文、图多媒体计算机要解决视频音频信多媒体计算机要解决视频音频信号获取问题号获取问题多媒体数据压缩编码和解码技术多媒体数据压缩编码和解码技术过去计算机企图综合处理生、文、图,过去计算机企图综合处理生、文、图,但是不可以但是不可以原因在于:原因在于:文件量过大文件量过大21世纪的人类社会将是信息化社世纪的人类社会将是信息化社会,数字化后的信息,尤其是数字化会,数字化后的信息,尤其是数字化后的视频信息和音频信息具有后的视频信息和音频信息具有 数据海数据海量性量性 ,它给数据的存
15、储和传输造成较,它给数据的存储和传输造成较大的困难,称为阻碍人类有效的获取大的困难,称为阻碍人类有效的获取和使用信息的瓶颈问题之一。和使用信息的瓶颈问题之一。以一幅彩色静态图像(以一幅彩色静态图像( RGB)为例)为例设分辨率为设分辨率为 512512每一种颜色用每一种颜色用 8bit表示表示R用用 8bit: 256级别表示级别表示G用用 8bit: 256级别表示级别表示B用用 8bit: 256级别表示级别表示RGB以一幅彩色静态图像(以一幅彩色静态图像( RGB)为例)为例则一幅彩色静态图像则一幅彩色静态图像的数据量为的数据量为51251238bitRGBPAL制式制式 25帧帧 /秒秒NTSC制式制式 30帧帧 /秒秒以以 PAL制制 25帧帧 /秒为例,视频每秒钟的数秒为例,视频每秒钟的数据量据量5125123825 150Mbps差不多要压缩近似差不多要压缩近似 200倍倍过去计算机的总线为过去计算机的总线为 ISAISA总线的传输率为总线的传输率为 150KB/s变成变成 bit为为 1508 1.2Mbps把把 150Mbps的视频