基于 Kinect 的乐器 MultiMultiTouchTouch
Mark Mosher 采访 Tim Thompson,首先来看看 Thompson 的基于 Kinect 的乐器,MultiMultiTouchTouch(多多触触):
MultiMultiTouchTouch 是 Tim Thompson 发明的一个自定义解决方案,通过三维空间控制给演奏者提供任意数量任意形状的多触点区域。
通过与这些空间的互动可以让用户通过 Microsoft Kinect 作为控制器来控制和演奏虚拟合成器。
在这个视频中 Mark Mosher 采访了 Tim,他讲述了一些该技术的幕后故事。在视频的结束部分 Mark 还亲自尝试了一下这个 MultiMultitouchTouc。
Thompson 的 MultiMultiTouchTouc 基于以下这些组件:
- Microsoft Kinect(带有电源)
- KeyKit 这是 Tim 自己的 MIDI 编程语言和图形环境
- Cinder 开源 SDK
- Open Source Computer Vision(OpenCV)(开源计算机视觉)
- Open Sound Control (OSC)(开源声音控制)
- Python,用于实现参数控制的图形用户界面
- 运行 Windows 7 的 HP 笔记本电脑
- 一个用于校准的木框(木框不是每次都需要,只要画面已经校准就可以了)
该控制器的原生输出是用于 TUIO(多触)标准格式的 OSC 消息格式。这个软件可以通过 JSON 格式消息控制参数。
文章出处 http://www.synthtopia.com/content/2011/04/02/the-kinect-based-multimultitouchtouch-instrument/
转载新闻请注明出自 Midifan.com
-
2011-04-13 02:18
匿名
还得用木框来定位,真落后。不是早就可以用带颜色的手指来追踪了吗