音乐与科技_音乐媒体录像

《音乐与科技_音乐媒体录像》由会员分享，可在线阅读，更多相关《音乐与科技_音乐媒体录像（38页珍藏版）》请在金锄头文库上搜索。

1、视频公开课视频公开课音乐与科技音乐与科技 音乐与多媒体音乐与多媒体1作者声明作者声明为了形象生动，本课件选用了大量的网为了形象生动，本课件选用了大量的网络图片，目的仅用于教学，在此对所有图片络图片，目的仅用于教学，在此对所有图片的作者和所有者表示诚挚敬意和衷心感谢！的作者和所有者表示诚挚敬意和衷心感谢！ 2第第9 9单元单元 音乐与多媒体音乐与多媒体n n9.1 9.1 社会技术背景与发展趋势社会技术背景与发展趋势n9.2 什么是媒体？n9.3 什么是多媒体？n9.4 什么是多媒体技术？n9.5 多媒体录放应用中的音乐媒体n9.6 多媒体通信的业务类型n9.7 多媒体通信中的音乐媒体n9.8

2、物联网是什么？不能“盲人摸象”n9.9 从多媒体通信定义物联网3数 码 化数字化革命数字化革命信息时代信息时代/ /信息化社会信息化社会网络化多媒体化网络时代网络时代 网络经济网络经济多媒体时代多媒体时代9.1 9.1 社会技术背景与发展趋势社会技术背景与发展趋势 14n媒体又称媒介、媒质，是承载、表示、分配和展 现信息的手段。n国际电信联盟电信标准局（ITU-T）定义了感知 、表示、展现、存储和传输这五类媒体。9.2 9.2 什么是媒体什么是媒体？25n感知媒体（perception medium）：n能直接作用于人的感官，使人产生感觉的一类媒体 ，可以帮助人类来感知环境。n例如引起听觉反应

3、的声音，引起视觉反应的图文等 。n人的感觉器官主要包括视觉、听觉、嗅觉、味觉和 触觉等。n显然，音乐直接与听觉有关。9.2 9.2 什么是媒体什么是媒体？36n表示媒体（representation medium）：n是对感知媒体的信息编码，作用是加工、处理和传 输感知媒体，如文字编码、语音编码、图像编码等 。n形态上有与时间无关的离散媒体（如文本、图片等 ）和与时间有关（呈现某种周期性）的连续媒体（ 如声音、影像等）两大类。n显然，音乐和语音都属于连续媒体中的声音媒体。9.2 9.2 什么是媒体什么是媒体？47n展现媒体（presentation medium）n用来展示和呈现媒体信息的内容

4、。又分为：n输入类展现媒体，指获取信息的工具和设备 ，如键盘、鼠标、扫描仪、摄像机、光笔、 话筒等；n输出类展现媒体，指再现信息的物理工具和 设备，如显示器、扬声器、打印机等。 n与音乐直接有关的是话筒和扬声器。9.2 9.2 什么是媒体什么是媒体？58n存储媒体（storage medium）n用来保存表示媒体的物理实体，如硬盘、光盘和半导 体存储器等。n都可以用来保存音乐编码数据。n传输媒体（transmission medium）n用来传送表示媒体的物理媒介，如同轴电缆、双绞线 、光纤、自由空间及其它通信信道等。n都可以用来传输音乐编码数据。n存储媒体与传输媒体又可合称为信息交换媒体（

5、Information Exchange Media） 。9.2 9.2 什么是媒体什么是媒体？69n多媒体（multimedia）即为“多”（multiple）与“媒体” （media）的复合词。人们谈论“多媒体”常常想到感知 媒体，但实际上计算机技术所处理的，只是感知媒体的 数字编码形式即表示媒体。n广义地讲，所谓多媒体就是多种信息表示媒体的结合与 利用。但严格地说，必须既有连续媒体，又有离散媒体 ，才能称之为多媒体。9.3 9.3 什么是多媒体什么是多媒体？7问题：传统的电视机、录像机声像俱全，问题：传统的电视机、录像机声像俱全，WORDWORD文档图文档图 文并茂，能不能叫做多媒体？为

6、什么？文并茂，能不能叫做多媒体？为什么？10n一般所说的“多媒体”，不仅指多种媒体信息本 身，而且指处理和应用多媒体信息的相应技术。n多媒体常被当作多媒体技术的同义语，即利用计 算机技术把文本、图形、图像、动画、音频及视 频等多种媒体融合一体化，使之建立逻辑联系， 并能对其进行获取、编码、编辑、处理、存储、 传输和再现。89.4 9.4 什么是多媒体技术什么是多媒体技术？119.4 9.4 什么是多媒体技术什么是多媒体技术？所谓多媒体计 算机技术就是计 算机综合处理连 续媒体和离散媒 体信息，使多种 信息建立逻辑连 接，集成为一个 系统并具有实时 的交互性。多媒体技术注重改善信息表示方式，在新

7、层次上将各种技 术进行了集成和发展，在系统级上面向用户交互。912n有了多媒体的定义和对于多媒体的理解，音乐作为多媒 体中的一种媒体（什么媒体？），就可借助于计算机平 台（如何借助？），渗透与融合到工学乃至其它学科门 类的各个学科领域和专业，使之音像俱全，声色并茂。9.4 9.4 什么是多媒体技术什么是多媒体技术？10n反之，如果没 有音乐支持， 所谓多媒体大 多是残缺不全 和不可想象的 。139.5 9.5 多媒体录放应用中的音乐媒体多媒体录放应用中的音乐媒体11n根据是否涉及传输媒体，可把音乐在多媒体中的应 用划分为多媒体录放类应用和多媒体通信类应用。n涉及音乐的多媒体录放类应用的典型场景

8、，是直接 回放和展现事先编辑、录制好的音像资料，没有传 输带宽的限制。而在日益发展的通用计算机硬件平 台上，对于一般的多媒体资料，即使采用软解压也 不存在吞吐率的瓶颈。因此，这类应用已经进入家 庭和个人。典型应用如：149.5 9.5 多媒体录放应用中的音乐媒体多媒体录放应用中的音乐媒体12n多媒体课件：n在音乐欣赏类教学（例如本课程的一些单元）中 ，利用多媒体技术分段、分声部欣赏音乐作品， 比较音色，展现特殊音效，进行音色片段的音像 欣赏等。n此时，静止图片或动态视频画面反而成为了“背 景”。n卡拉OK虽能现场演唱音乐的叠加，但通常只能 线性地顺序播放。159.5 9.5 多媒体录放应用中的

9、音乐媒体多媒体录放应用中的音乐媒体13n电子相册：n是可在电脑上观赏的以静止图片为主的特殊文档，其 内容不局限于摄影照片，也可包括艺术创作图片。n具有传统相册无法比拟的优越性：图文声像并茂的表 现手法，随意修改的编辑功能，快速灵活的检索方式 ，永不褪色的恒久保存，以及廉价复制分发的优越手 段。n其中的声音媒体，语音可用于解说词，而音乐反而多 用于背景的烘托。169.5 9.5 多媒体录放应用中的音乐媒体多媒体录放应用中的音乐媒体14n3D音乐：n在好莱坞大片如阿凡达的影响下，一方面设计发 烧音乐的作曲家与音响设计家开始更注意3D视频给音 乐带来的故事情节及歌曲的创作，另一方面音频的多 声道设计

10、、音画的高标准配合也慢慢进入观众的视听 范畴。n发烧音乐开始了现代三维音乐试听设计的交互式尝试 ，多声道声音设计与视频的3D同步发展的学科计划已 在实践中进行。n3D音乐也用于虚拟现实（VR）中。1715n如果音乐在多媒体中的应用涉及传输媒体，就属于 多媒体通信类应用。而ITU-T的F.700建议（1996/ 1999/2000）将多媒体通信业务划分为6类，并分别 定义为：9.6 9.6 多媒体通信的业务类型多媒体通信的业务类型n会话型业务（conversation services）：表现为点到点通 信和双向信息交换，如可视电话、数据交换等； n会议型业务（conference servic

11、es）：特点是多点通信和 双向信息交换，如会议电视、远程教育、远程医疗等； 1816n分配型业务（distribution services）：为点到多点通信和 单向信息交换，如网上多媒体广播、组播或群发；n检索型业务（retrieval services）：为点到点通信和单向信 息交换，如影视点播、数字图书馆和基于内容的检索； n消息型业务（message services）：为多点到多点通信和单 向信息交换，如多媒体邮件、网上广告和彩信业务等；n采集型业务（collection services）：为多点到点通信和单 向信息交换，如远程监视、网上投票等。n涉及音乐的多媒体通信类应用，由于信

12、道传输带宽的限制 和通信业务类型的不同，关注的重点也不尽相同。9.6 9.6 多媒体通信的业务类型多媒体通信的业务类型199.7 9.7 多媒体通信中的音乐媒体多媒体通信中的音乐媒体17n多媒体通信业务特点：n支持一体化业务（综合业务）n具备较强的实时数据传输能力n能够完成多媒体同步n多媒体对象内部，各媒体对象之间在时域、空域存在着约束关 系，而这种约束关系的破坏，会在一定程度上妨碍对多媒体数 据所含内容的理解。这也就决定了多媒体通信系统需要对这种 约束关系进行维护，即实现通信过程中的多媒体同步。 n支持多种通信模式 n实际上是要求支持不同的业务类型209.7 9.7 多媒体通信中的音乐媒体多

13、媒体通信中的音乐媒体18n会话型多媒体通信业务：n此时的信道带宽一般都比较窄，甚至较为恶劣（例如无 线移动通信信道），诸如可视电话这一类的应用视频本 身都很难达到高清全动态（即每秒25/30帧），因此一般 只传输语音，很少考虑音乐。由于误码率或丢包率较高 ，这时更多关注的是讲话人的音像同步即所谓“唇同步” 问题。n在3G、4G时代，由于信道传输速率大为改观，采用会 话型终端传输音乐节目（例如用手机实时传输音乐会实 况）也能做到了，但实际上已相当于采集型通信应用。219.7 9.7 多媒体通信中的音乐媒体多媒体通信中的音乐媒体19n会议型多媒体通信业务：n此时的信道带宽和视频质量都优于会话型多媒

14、体通信， 因而对于会场的音响环境要求也大为提高，除了宽带话 音外，也能够支持（或要求支持）音乐的传输。n此外，随着Skype越来越广泛地渗透到笔记本电脑、平 板电脑、上网本和互联网电视，利用移动PC设备和TV 在机场、酒吧或客厅里进行视频通话或会议的需求也开 始出现，很自然地，用户也开始要求这些设备能提供像 今天会议室中语音会议系统一样的通话质量。因而目前 IPTV和平板电脑也开始有高清音频的需求。229.7 9.7 多媒体通信中的音乐媒体多媒体通信中的音乐媒体20n分配型多媒体通信业务：n此时的业务模式或应用场景为点（信息源，机器）到 多点（用户，即人）的通信和单向信息交换，如网上 多媒体广

15、播、组播或群发，类似于广播电视，因而对 于数字音乐的支持是必须的。n分配型业务对于高清音视频的要求也越来越高。239.7 9.7 多媒体通信中的音乐媒体多媒体通信中的音乐媒体21n检索型多媒体通信业务：n此时的业务模式或应用场景为点（信息源，机器）到 点（用户，即人）通信和单向信息交换，如影视点播 、数字图书馆和基于内容的检索。n被检索的信息源可以有多个，且分布于不同的地点。n除了完整的大文件下载外，还支持以流媒体的方式边 下载边欣赏，此时支持高清音视频的要求也越来越高 。249.7 9.7 多媒体通信中的音乐媒体多媒体通信中的音乐媒体22n消息型多媒体通信业务：n此时的业务模式为多点（机器）

16、到多点（机器）通信 和单向信息交换，如多媒体邮件、网上广告和彩信业 务等。n此时的应用场景一般并不要求实时观看，因而用户机 （PC、手机等）收到后可以暂存并事后观看，类似 于多媒体录放类应用的回放，要求也相似。259.7 9.7 多媒体通信中的音乐媒体多媒体通信中的音乐媒体23n采集型多媒体通信业务：n此时的业务模式为多点（机器）到点（机器）通信和单 向信息交换，如远程监视、网上投票等。业务特点：n多用于监控或监测； n传输带宽不对称：上行宽，下行窄；n涉及的信号类型更多：可能包括各种传感信息；n数据量差别更大；n融合的学科门类更宽；n可能的应用范围更广；n用户的要求更杂；n尚未形成统一的国际标准。269.7 9.7 多媒体通信中的音乐媒体多媒体通信中的音乐媒体24n值得注意的是，“机器对机器”的多媒体采集型业务 正是当今物联网中的“物对物”，可见物联网的业务 模式正是典型的采集型通信业务。所以本课程将论 证：n物联网的实质并非一