摘 要 本文研究了基于傅里叶变换的音乐与视觉的互动形式，提供了一种可视化的方法，这种可视化方法可用于音乐学相关的研究，以及互动媒体创造方法中。

关键词 音乐;可视化;FFT;傅立叶变换

在音乐创作领域中，近些年出现了探索音乐与视觉之间的关系的研究方向。有很多方法可以将音乐“转换”为二维（或三维）视觉效果（图像，视频），尽管它们始于手动转换，现在有许多自动转换的方法进行逆向转换（从视觉到音乐）的方法较少，主要涉及声音化而不是输出音乐。而且，许多流行的可视化工具都使用声音而不是音乐作为输入（例如，媒体播放器），因此，除了音乐本身之外，这种可视化还受到乐器音色和人类演奏的影响。仅将抽象音乐符号作为其输入的可视化将提供对音乐结构而不是特定音乐录音的一般特征的洞察。

傅立叶变换是检测信号周期性的工具。它在分析音频和声音时非常有用，因为它可以在短时间内（通常为100ms）提供声音的频谱。如果在水平时间线上垂直绘制一组这些频谱（低频在底部，高频在顶部），则将获得二维频谱图。这样的频谱图显示了随时间变化的频率（音符）和谐波，等效于计算机音乐音序器软件中使用的钢琴侧倾图，但未显示或编码较高级别的内部音乐结构和较长的周期性。

傅立叶变换（FT）通常显示信号的周期性，但是也可以用于将一般的非周期性信号变换为其傅立叶分量。基于这样的想法，可以尝试将FT方法应用于音乐结构本身。……