陶雨琦 上海工程技术大学 上海 201680

一、简介

（一）项目背景及作品创意

众所周知，声音是由振动产生的。在传统意义上，音乐属于耳朵，是用听觉体验美感的艺术。人们在欣赏音乐时，往往是在倾听的基础上，通过“音响感知与情绪感受”“形象联想与理性感悟”以及“音乐美的体验与感悟”等阶段，完成对音乐作品由感性到理性的审美体验过程。音乐具有形象思维的特点，在情感的伴随下，通过想象联想，获得音乐形象、生活情景以及意境等形象，音乐可视化变为现实。

我们计划塑造一个能将音乐可视化的产品，以更好地呈现音乐所带来的情绪。同时，我们期望这款产品在未来的迭代过程中，实现能够帮助听障人士感受音乐的功能。

（二）作品功能

第一部分的作品包括My Song和麦克风输入。这两者都是将音频进行图像化处理的程序，这两者是根据音频的振幅变化来生成图像，所以使用Processing自身创建amplitude对象。第二部分的作品包括键盘钢琴与电子琴，这一部分的作品是对于图像音频化的诠释。其中，电子琴一共有32个键位，键盘上的三排字母都可以成为按键。最低音是G3最高音到D8，因为G3是扬声器所能发出的最低音；而最高音则是受限于键盘数所以只排到D8，实际最高音未知。电子琴的琴音是电脑自生成音，与钢琴不同，不需要data文件夹来添加音频文件。

图1 系统功能框架图

（三）系统开发平台

开发工具与编程语言：Processing；源码支持环境：Windows/Linux/MacOS，需在Processing Development Environment-processing.exe中运行；开发使用的库文件：Minim 2.2.2，Sound 2.2.3；音乐、视觉效果均为团队原创，使用工具有：Adobe Illustrator，Adobe Photoshop，库乐队，Adobe Audition。……