音乐可视化研究特征选择及表达方式综述

三一文库（）
〔音乐可视化研究特征选择及表达方式
综述〕
黄宗珊饶志双
【摘要】随着可视化方法和技术的不断进步，对音频的可视化逐渐发展。

研究者根据不同特征从不同角度观察分析音频文件，并使用可视化展示这些特征。

本文结合现有的研究，简要地介绍在音乐可视化中分析的特征以及对这些特征所采用的可视化表达方式。

【关键词】音乐可视化；特征选择；表达方式
中图分类号：TP391.42文献标识码：A文章编号：2095-2457（2018）05-0211-002
【Abstract】Withthecontinuousprogressofvisualizationmethodsandt echnologies，thevisualizationofaudiohasbeengraduallydeveloped.Re searchersobservetheanalysisofaudiofilesfromdifferen
tperspectivesdondifferentcharacteristicsandusevisua lizationstodisplaythesefeatures.Thisarticlecombines theexistingresearch，brieflyintroducesthecharacteristicsoftheanalysisint hevisualizationofmusicandthevisualrepresentationoft hesefeatures.
【Keywords】Musicvisualization；Featureselection；Manifestation
0引言
音乐作为一种艺术形式，不仅能够抒发情感、反映社会现实生活，在历史上还曾有过鼓舞人心、治疗疾病的例子，即使是不同国度不同时代的人也可以欣赏。

在音乐被谱写之后，乐器的演奏或人声的演唱等诠释方式能够将其传达给听众，为了能够使听众更全面地体会音乐所表达的情感和思想，创作或传播者采用了不同的辅助表達方式。

可视化的发展为音乐的表达提供了新的方式，使用特定的规则进行解读，为其产生可复现的视觉效果。

1音乐可视化的研究内容和现状
可视化（Visualization）是使用计算机图形学和图像
处理技术，将数据通过图形或图像的方式进行显示并进行交互处理的理论、方法和技术。

音乐可视化（MusicVisualization）是利用可视化的方法，客观解释和
判断音乐的表现力和结构，帮助听众提供理解、分析、比较音乐。

对音乐可视化的研究包括了感知模型、特征提取、实时计算、情绪检测、系统结构、沉浸感的展示、交互式图形界面以及应用研究等。

由于音乐可视化结合了艺术与科学，对研究者有一定的要求，因此在这方面的研究相对并不完善，并且可视化系统的一些使用者无法体会系统所表达的涵义。

在应用方面，Windows、MacOSX、Linux等平台上都有支持音乐可视化的媒体播放器，也有人使用D3.js和HTML5实现了音乐可视化的效果。

2音乐可视化的特征选择
音乐可视化对单个音频的特征分析分为两种层面。

低层的特征主要为响度、音调、频率、音色等物理特性，WindowsMediaP、Winamp附带的多种可视化效果就是基于振幅和频率的；TakayukiItoh[1]等人为了帮助爱好者了解管弦乐曲，依据不同乐器的乐谱对不同乐器进行区分。

高层的特征主要为语义、情感等，S.Zhang等人[2]在情感分析和可视化的基础上，实现了基于情感信息的MV检索。

对多个音频文件，E.Pampalk等人[3]对359段音频基于心理声学模型估计其相似性，在不需要手动进行流派分类的情况下，根据音乐风格差异建造了音乐岛。

3音乐可视化的表达方式。