《基于情感分析的音乐可视化研究》由会员分享，可在线阅读，更多相关《基于情感分析的音乐可视化研究（42页珍藏版）》请在金锄头文库上搜索。
1、基于情感分析的音乐可视化研究 I 目 录 摘 要.II 关键词.II ABSTRACT.III KEY WORDS.III 1绪论 .1 1.1研究问题的概念范畴 .1 1.2国内外研究现状 .2 1.3选题缘由及研究意义 .3 2音乐的特征提取 .3 2.1音乐文件概述 .3 2.2已有的特征提取方法 .5 2.3本文提出的算法及所需的特征值 .8 2.3.1旋律模块的特征值提取.10 2.3.2和声背景模块的特征值提取方法.12 3情感建模 .18 3.1对“基于情感分析的”理解 .18 3.2心理学、声学支撑 .19 3.3音乐理论支撑 .20 3.4已有方法的优势及不足 .21 3.5
2、基于情感分析的音乐可视化算法设想 .22 3.5.1音色模块.22 3.5.2节奏模块与紧张度模块.23 3.5.3旋律模块.23 3.5.4和声背景模块.24 4可视化效果 .25 4.1可视化问题所涉及的相关领域的疑惑 .25 4.2已有的软件及研究 .27 4.3以MAX/MSP/JITTER为平台实现的构想 .29 5在MAX/MSP/JITTER平台下实现本文研究的内容 .29 5.1 MAX/MSP/JITTER概览 .29 5.2设计 PATCH.31 5.2.1与本文相关的patch .31 5.2.2本文实现的主patch .34 5.3结合程序语言设计 MXJ.35 5.4
3、对实时演奏的辅助效果 .37华中农业大学 2011届本科毕业论文 II 6总结与展望 .37 参考文献.39 致 谢.41基于情感分析的音乐可视化研究 III 基于情感分析的音乐可视化研究 摘 要 音乐可视化（Music Visualization）是对音乐表达的一种非主观的解释和判断， 是为理解、分析、比较音乐的表现力和内部结构提供的一种呈现技术。当前，音乐 可视化方法众多，其中特别以基于计算机图形图像变换处理而产生的视觉效果独占 鳌头。然而这些方法对情感表达的可视化效果并不理想。本文首先归纳了音乐可视 化的概念范畴以及分类，分析了 MIDI 文件格式，比较了国内外对 MIDI 格式音乐 文
4、件的特征提取和情感建模方法、可视化手段；在此基础上，结合和声学、配器法 等相关音乐理论，从音乐创作的角度探究了特征值和情感可视化效果之间的关系， 构建了音色、节奏、紧张度、旋律、和声背景五个特征提取模块，设计了和声类型 判定的算法；最终在 Max/MSP/Jitter 开发环境下初步实现了简单的音乐情感可视化 效果。全文以基于情感分析的算法设计为主，Max 实现为辅。 关键词 音乐可视化；MIDI 文件特征提取；情感建模；和声； Max/MSP/Jitter华中农业大学 2011届本科毕业论文 IV Music Visualization Research Based on Emotion A
5、nalysis Abstract Music visualization is a kind of non-subjective explanation or judgement for music expression. It is as a technology provided for understanding, analyzing and comparing the performance capability and inner structure of music. Currently, there have been various methods mapping on the
6、 effects of music visualization. Particularly, the methods based on computer graphics and image processing are prevalent. However, they are far from perfect for expressing emotion. This article has generally summarized the conceptions and categories about music visualization, analyzed the format of
7、MIDI standard file, and compared the methods of character extracting, emotion modeling, and visualization. Base on these all above, this paper has explored the relationship between the character values and emotion visualization effect, built five modules including timbre, rhythm, tension, melody and
8、 harmonic background, and proposed a series of algorithms and designs to judge the type of harmony from composers perspective, which has combined related theories such as harmonics and orchestration. Finally, it realized a simple music emotional visualization effect under a software developing envir
9、onment called Max/MSP/Jitter. The whole article put the algorithms and designs of five modules based on emotion analysis as the major part, while the realization in Max as the supplement. Key Words Music Visualization; MIDI Character Extracting; Emotional Model; Harmony; Max/MSP/Jitter 基于情感分析的音乐可视化研
10、究 1 1绪论 1.1研究问题的概念范畴 音乐可视化(Music Visualization)，顾名思义，即将音乐这种传统意义上的听觉 艺术转化为一定视觉艺术的过程。通俗的理解可见 Wikipedia 上的定义 1 （电子音 乐和媒体播放器的一种功能，可基于某段音乐生成图像，与音乐的演奏同步并进行 实时渲染）但这只是音乐可视化的一种应用形式的解释，学术上成文的定义可 见音乐可视化是对音乐表达的一种非主观的解释和判断，是为理解、分析、比 较音乐的表现力和内部结构提供的一种呈现技术（白亮等，2003） 。 从整体架构上看， “音乐可视化”的概念可上溯至“信息可视化” ，作为其分支 共同包含于“可视化”技术的概念范畴。可视化(Visualization)即在人脑中形成对某 物(某人)的图像，是一个心智处理过程(Mental Process)，用于促进对事物的观察及 建立概念等。在计算机技术中，可视化是一种过程呈现手段，是人机交互的工具， 如可视化编程、可视化建模等（屈天喜
