来像一个真正的指挥家那样来指挥你的虚拟管弦乐队吧

musiXboy 发布于2014-08-17 暂无评论

德国门德尔松博物馆引进了一套惊艳的互动装置,利用触摸屏和手势识别让任何人都可以感受到当指挥家的乐趣。

这套位于德国Mendelssohn-Haus门德尔松博物馆的装置由十多个带有反馈LED灯光的音箱组成,每个音箱发出代表自己所演奏的一种乐器的声音,同时音箱下面的LED灯光则有速度和力度的反馈。然后站在「指挥台」前的你只要挥动指挥棒即可控制音乐的速度,而利用前面的触摸屏则可以看到乐谱,通过触摸可在不同小节之间跳转、让某个「乐手」静音、改变音乐的调式、改变音乐的风格等等。


装置系统的创作者表示他们想展示一种人与音乐沟通交互的新方式,同时又要保持原始的精髓,音乐应该是一种可探索的事物,成为听者进行实验的场所,让观众亲自与门德尔松的音乐互动起来。


整个系统由两台互相通过局域网连接的电脑组成,第一台电脑运行着使用Java和OpenGL自制的软件来显示触摸屏上的内容,还有利用Leap Motion做的手势识别。第二台电脑运行Ableton Live和Max for Live,Ableton Live读取位于莱比锡的MDR Studio录音棚所录制的音频,每个声部的声音都需要非常干才可以,所以当时录音动用了70多个人。在Live里用了一些EQ和Convolution Reverb Pro卷积混响,一些Utility的插件功能。当然最重要的是自己写的Max Patch和Max for Live的Patch。Live完全只使用Arrangement视图,这样好在时间轴上规划好整个音乐。


Leap Motion只用于识别指挥棒的手势,然后将手势变成节奏通过OSC信息传输给Ableton Live告诉它用什么样的节奏回放,也会有一个视觉性的提示告诉指挥者速度太快或太慢了。有两种模式,一个是音乐自动播放,然后你用指挥棒来控制速度快慢,停下指挥棒音乐就还按照之前的速度回放。还有一种是完全按照你指挥棒来播放,如果你停下指挥棒,音乐也会停止。


最后请观看视频,体验一下这套神奇的装置吧,谁有机会去德国莱比锡的德尔松博物馆的话千万别忘了去体验一把:



共有 0 条评论