第2章 音频信号处理技术

《第2章 音频信号处理技术》由会员分享，可在线阅读，更多相关《第2章 音频信号处理技术（104页珍藏版）》请在金锄头文库上搜索。

1、2019/11/6,第二章:音频信号处理技术,教学建议 以介绍多媒体计算机中声音的特性、类型与处理等音频信号处理技术的基本原理为主，并讲述常用软件的使用以及应用前景 。 本章需6 8学时 。,2019/11/6,第二章:音频信号处理技术,教学提示 声音是携带信息的极其重要的媒体,音频信号处理技术是多媒体信息处理中的核心技术之一，它是多媒体技术和多媒体产品开发中的重要内容。本章主要介绍多媒体计算机中音频信号处理技术的基本原理、硬件、软件以及应用前景。 教学目标 通过学习本章内容，要求大家掌握计算机声音处理的常用技术与原理，了解声音处理硬件的基本构成、常用的声音合成方法、声音的编码与压缩技术、数字

2、音频的合成以及数字声音的应用知识。,2019/11/6 Multimedia Technology & Application,教学内容,1 声音的特性、类型与处理 2 声卡的构成与功能 3 声音信号的数字化 4 声音文件的存储格式 5 电子乐器数字接口(MIDI)系统,2019/11/6 Multimedia Technology & Application,教学内容,6 音频信息的压缩技术 7 数字语音的应用 语音识别 语音合成 8 声音媒体编辑软件的应用 Windows 的录音机软件 声音编辑软件Cool Edit 9 本章小结,2019/11/6 Multimedia Technolo

3、gy & Application,2.声音的特性、类型与处理 2.1.1 声音的特性,自然界中声音是靠空气传播的 声音在空气中能引起非常小的压力变化 声源所引起的空气压力变化，被耳朵的耳膜所检测，然后产生电信号刺激大脑的听觉神经，从而使人们能感觉到声音的存在。 自然界的各种声音大都具有周期性的强弱变化的特性，因而也使得输出的压力信号周期变化,2019/11/6 Multimedia Technology & Application,声音的正弦波特性,2019/11/6 Multimedia Technology & Application,2.1.1 声音的特性 有关的名词术语,将曲线上的任一

4、点再次出现所需时间间隔称为周期。 而一秒钟内声音由高(压力强)到低(压力低)再到高(压力强)，这样一个循环出现的次数称为频率。频率越高，声音越高，以赫兹(Hz)为其度量单位。 一个系统能够接收的频率是有限的，人们把系统能够接受的最低的听觉和最高频率之间的范围称为系统的带宽(Bandwidth）。人类能够接受的听觉带宽是从20Hz到20KHz。,2019/11/6 Multimedia Technology & Application,2.1.1 声音的特性,声音的三要素即为音调、音强、音色。 音调与声音的频率有关，频率快则声音高，频率慢则声音低。 音强又称响度，取决于声音的幅度，即振幅的大小和

5、强弱。 而音色则由混入基音的泛音所决定的，每个基音又都有其固有的频率和不同音强的泛音，从而使得每个声音具有特殊的音色效果。,2019/11/6 Multimedia Technology & Application,2.1.1 声音的特性 声音的连续谱特性,声音是一种弹性波，声音信号可以分成周期信号与非周期信号两类。周期信号即为单一频率音调的信号，其频谱是线性谱；而非周期信号包含一定频带的所有频率分量，其频谱是连续谱。真正的线性谱仅可从计算机或类似的声音设备中才能听到，这种声音听起来十分单调。,2019/11/6 Multimedia Technology & Application,2.1.

6、1 声音的特性 声音的方向感特性,声音的传播是以声波形式进行的。 由于人类的耳朵能够判别出声音到达左右耳的相对时差、声音强度，所有能够判别出声音的方向以及由于空间使声音来回反射而造成声音的特殊空间效果。 现在的音响设备都在竭力模拟这种立体声效果和空间感效果。,2019/11/6 Multimedia Technology & Application,2.1.1 声音的特性 声音的时效性,声音具有很强的时效性，没有时间也就没有声音，声音适合在一个时间段中表现。声音常常处于一种伴随状态，如伴音、伴奏等，起一种气氛渲染的作用。 由于时间性，声音数据具有很强的前后相关性，因而，数据量要大得多，实时性要

7、求也比较高。,2019/11/6 Multimedia Technology & Application,2.1.1 声音的特性 声音的质量,声音的质量与声音的频率范围有关。 一般说来，频率范围越宽声音的质量就越高。 对语音而言，常用可懂度、清晰度、自然度来衡量；而对音乐来说，保真度、空间感、音响效果都是重要的指标。,2019/11/6 Multimedia Technology & Application,2.1.2 声音的类型与处理 不同种类声音频宽,次声（Infra-sound） 0-20Hz 电话语音 200Hz3.4KHz 调幅广播 50Hz7KHz 调频广播 20Hz15KHz 音

8、 响 20Hz20KHz 超声（Ultrasound）20kHZ-1GHz 特（强）超声（Hypersound) 1GHz-10THz,2019/11/6 Multimedia Technology & Application,2.1.2 声音的类型与处理 声音质量评价标准,级别 评 价 失真级别 1 优（Excellent） 感觉不到声音失 2 良（Good） 刚察觉但不讨厌 3 中（Fair） 声音有些失真，有点讨厌 4 差（Poor） 声音失真，不令人反感 5 劣（Bad） 严重失真，令人反感,2019/11/6 Multimedia Technology & Application,2

9、.1.2 声音的类型与处理,自然界中的声音可分为四种类型： 次声、可听声、超声与特超声（1G Hz10THz） 人类的听觉能范围是20Hz20KHz, 次声、超声与特超声均非可听声。 多媒体计算机主要处理的是人类听觉范围内的可听声。 声音的处理主要有：声音的录制、回放、压缩、传输和编辑等,2019/11/6 Multimedia Technology & Application,2.1.2 声音的类型与处理 模拟音频和数字音频,（1）模拟音频(Analog audio) 模拟音频是一种连续的模拟量，以电的、磁 的等形式表示。例如当我们对着麦克风讲话时，麦克风能根据它周围空气压力的不同变化而输出

10、相应连续变化的电压值，这种变化的电压值便是一种对我们讲话声音的模拟，是一种模拟量，称为模拟音频。 计算机不能直接处理模拟音频,2019/11/6 Multimedia Technology & Application,2.1.2 声音的类型与处理 模拟音频和数字音频,（2）数字音频 (Digital audio) 数字化音频的获得是通过每隔一定的时间间隔测一次模拟音频的值(如电压)并将其数字化。这一过程称为采样，每秒钟采样的次数称为采样率 一般地，采样率越高，记录的声音就越自然，反之，若采样率太低将失去原有声音的自然特性，这一现象称为失真。由模拟量变为数字量的过程称为模数转换。 由上述可知：数

11、字音频是离散的，而模拟音频是连续的，数字音频质量的好坏与采样率密切相关。数字音频信息可以被计算机存储、处理和播放。,2019/11/6 Multimedia Technology & Application,2.1.2 声音的类型与处理 多媒体计算机中录音/放音的处理过程,2019/11/6 Multimedia Technology & Application,2.2 声卡的构成与功能,声卡可分为三类： 第一类为低档声卡，此类卡仅提供比较单一的声音，音质较差，无录音功能 第二类为中档声卡，这类声卡具有立体声音质，音乐、录音、播放等功能，能满足一般的多媒体应用需求。 第三类为高档声卡，此类声卡

12、除具有中档声卡的所有特点外，一般都带有专用的数字信号处理器DSP，可用于高级音乐编辑、创作，实时语言识别等功能。,2019/11/6 Multimedia Technology & Application,2.2 声卡的构成与功能 2.2.1 声卡的组成,声卡的结构 声卡主要有四个组成： AD/DA 转换器 AD / DA 转换器负责录音及播放*.WAV格式的波形文件。 电子合成器（Synthesizer） 电子合成器负责MIDI乐曲的合成可以及时创造各种音乐。 混音器（Mixer） 混音器（Mixer）它是一个处理音效控制的芯片，负责调 节各声音来源的音量、混音与调整录放音的音量大小。 CD

13、 音频连接器 (CD-Audio connector) CD音频连接器可以接收光盘机中的音乐信号。,2019/11/6 Multimedia Technology & Application,2.2 声卡的构成与功能 声卡的基本结构,2019/11/6 Multimedia Technology & Application,2.2 声卡的构成与功能 声卡的基本结构,2019/11/6 Multimedia Technology & Application,2.2 声卡的构成与功能 2.2.2 声卡的主要功能,（1）录制与播放声音 通过接在声卡上的话筒录制声音，并以文件形式保存在计算机中，随时可

14、打开声音文件进行播放。声音文件的格式可因使用不同的软件而不同。 （2）音乐合成 利用声卡上的合成器将存储在计算机内存中的MIDI文件合成为音乐乐曲。通过混合器混合和处理多个不同音频源的声音，控制和调节音量大小，最后送至音箱或耳机播放。,2019/11/6 Multimedia Technology & Application,2.2 声卡的构成与功能 2.2.2 声卡的主要功能,（3）压缩和解压缩音频文件 目前，大多数声卡上都固化了不同标准的音频压缩和解压缩软件，常用的压缩编码方法有ADPCM(自适应差分脉冲编码调制)和ACM(微软音频压缩管理器)等，压缩比大约为2:15:l。 （4）与MID

15、I设备和CD驱动器的连接 通过声卡上的MIDI接口，计算机可以同外界的MIDI设备相连接，如连接电子琴、电吉他等，使MPC具有创作电脑乐曲和播放MIDI文件的功能。游戏杆也可通过MIDI接口与计算机相连接，使游戏玩起来得心应手。,2019/11/6 Multimedia Technology & Application,2.2 声卡的构成与功能 声卡与其它设备连接 （图2.3）,2019/11/6 Multimedia Technology & Application,2.2 声卡的构成与功能 声卡中的插孔连接方法,声卡中的line in 插孔可连接录音机、袖珍CD播放机和合成器等，将其播放的音信息输入计算机； Microphone插孔与麦克风相连，用于录音； Line out 可与喇叭、耳机或功放相连 Joystick/MIDI Adapter 可与游戏操纵竿, MIDI设备相连。,2019/11/6 Multimedia Technology & Application,2.2.3 声卡的性能指标,声卡的性能指标决定了声卡声音采集、合成与播放的质量，主要取决于以下几个方面： (l) 采样分辨率 (2) 采样速率 (3) 声道数 (4) 兼容性 (5) 功能接口,2019