“MultiMultiTouchTouch”是Tim Thompson发明的一个自定义解决方案,通过三维空间控制给演奏者提供任意数量任意形状的多触点区域。
通过与这些空间的互动可以让用户通过“Microsoft Kinect”作为控制器来控制和演奏虚拟合成器。
在这个视频中Mark Mosher采访了Tim,他讲述了一些该技术的幕后故事。在视频的结束部分Mark还亲自尝试了一下这个“MultiMultitouchTouc”。
Thompson的“MultiMultiTouchTouc”基于以下这些组件:
Microsoft Kinect(带有电源);
KeyKit,这是Tim自己的MIDI编程语言和图形环境;
Cinder,开源SDK;
Open Source Computer Vision(OpenCV)(开源计算机视觉);
Open Sound Control (OSC)(开源声音控制);
Python,用于实现参数控制的图形用户界面;
运行Windows 7的HP笔记本电脑;
一个用于校准的木框(木框不是每次都需要,只要画面已经校准就可以了)。
该控制器的原生输出是用于TUIO(多触)标准格式的OSC消息格式。这个软件可以通过JSON格式消息控制参数。
http://daimajishu.iteye.com/blog/1088469