雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再

Root 编译自 雅马哈官网
量子位 出品 | 公众号 QbitAI

雅马哈公司在前天很开森地宣布,自家AI可以把世界顶级舞蹈家森山开次(Kaiji Moriyama)的舞蹈动作实时转换成钢琴曲。

雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再_第1张图片

 舞蹈家:森山开次Kaiji Moriyama

管弦乐团:柏林爱乐乐团Scharoun Ensemble

去年11月22号,森山开次在东京举办了一场演出,名叫Mai Hi Ten Yu。

雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再_第2张图片

这次演出使用了雅马哈的AI系统。舞蹈家森山开次的背部、手腕和脚上一共装了四种传感器。当他跳舞时,舞蹈动作可以被实时地转换成乐曲数据。

雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再_第3张图片

为了确保舞蹈动作转换输出的音乐不是随机杂乱的,雅马哈的AI系统对照MIDI音乐数据库,控制钢琴的演奏,把这些数据输出成好听的乐曲。

技术视角解读

这套舞姿实时转换乐曲的AI系统,现在还处于研发阶段。

通过舞蹈家身上穿戴的传感器,可以实时捕捉到舞蹈家的动作姿态。结合AI系统已有的姿态对应旋律的数据库,可以把动作即时输出旋律数据。然后再把旋律数据传送给雅马哈的Disklavier钢琴,演奏出动耳的音乐。

雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再_第4张图片

雅马哈的Disklavier系统,是舞姿实时转换乐曲至关重要的一环。Disklavier的钢琴还可以表现出不同力度弹奏琴键的细微差别。

而且其音色是从9英尺高的钢琴中最完美的雅马哈CFX采的,也只有CFX富和完整、醇厚丰润的音色才能配得上舞蹈大家森山开次倾情忘我的演绎。

雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再_第5张图片

 后台所需的AI系统

森山开次这回演出可以说非常震惊:舞蹈上带来视觉震撼的同时,还有AI实时合成的钢琴曲,搭配上世界顶级管弦乐团柏林爱乐乐团Scharoun Ensemble带来的听觉享受。

class="video_iframe" data-vidtype="2" allowfullscreen="" frameborder="0" data-ratio="1.7647058823529411" data-w="480" data-src="http://v.qq.com/iframe/player.html?vid=k0544w0m5wy&width=670&height=376.875&auto=0" style="display: block; width: 670px !important; height: 376.875px !important;" width="670" height="376.875" data-vh="376.875" data-vw="670" src="http://v.qq.com/iframe/player.html?vid=k0544w0m5wy&width=670&height=376.875&auto=0"/>

把身段优美的姿态化成音符,是一次新型艺术表现形式的大胆尝试。

作为日本乐器生产巨头,雅马哈不满足于卖卖乐器。这次汇聚世界顶级舞蹈家及乐团,还融合当下最高尖的科技AI,雅马哈也是希望能给世界打开新的想象空间,拓展人表达情感精神世界的更多的可能性。

顶尖艺术家参与的感受

舞蹈家,森山开次

雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再_第6张图片

当听到AI把我的舞姿转成乐曲时,我感受到身体深处内部的力量被唤醒了,对自我意识和身体动作感知有了新的理解。

柏林爱乐乐团乐器演奏家,Peter Riegelbauer

雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再_第7张图片

太震撼了!能和如此优秀的舞蹈家合作演出我们感到非常荣幸,也感谢雅马哈提供这次机会。

东京艺术大学副主席及作曲家,Isao Matsushita

雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再_第8张图片

艺术得随着时代一起演化。

这一次能聚集这么多世界顶级优秀的舞蹈家、乐器演奏家、工程师一起做这场演出,是件非常有意义的事。

作为一个作曲家,我觉得给这次演出编曲是个很大的挑战。在尝试全新的乐曲风格时,我受到了很多启发,产生一些以往从来没有的灵感。

雅马哈研发中心总经理,Motoichi Tamura

在雅马哈内部,大家深信AI能拉近人与乐器之间的距离。我们不断推进AI技术,想把精神世界丰富的情绪得到最大的释放。

最后,附编译来源,
https://www.yamaha.com/en/news_release/2018/18013101/

加入社群

量子位AI社群13群开始招募啦,欢迎对AI感兴趣的同学,加小助手微信qbitbot5入群;


此外,量子位专业细分群(自动驾驶、CV、NLP、机器学习等)正在招募,面向正在从事相关领域的工程师及研究人员。


进群请加小助手微信号qbitbot5,并务必备注相应群的关键词~通过审核后我们将邀请进群。(专业群审核较严,敬请谅解)

诚挚招聘

量子位正在招募编辑/记者,工作地点在北京中关村。期待有才气、有热情的同学加入我们!相关细节,请在量子位公众号(QbitAI)对话界面,回复“招聘”两个字。

640?wx_fmt=jpeg

量子位 QbitAI · 头条号签约作者

վ'ᴗ' ի 追踪AI技术和产品新动态


你可能感兴趣的:(雅马哈AI系统能自动为舞蹈配乐,跟节奏跳舞时代已不再)