太疯狂了,你能想象与视频中的人物互动吗?— 工业风向标

本文来自公号“工业风向标” 之前,我们体验到的各种VR技术大多是在现实世界中模拟虚拟事物,完全无法带来真实的浸入感。而现在进一步地,又出现了新的玩法,一群麻省理工的学霸,反向思考,通过将现实中的事物投放到虚拟世界中,让用户与虚拟世界的物体产生“触感”,建立起了情感的桥梁。



想要真正认识某件物品,我们往往会通过戳、推、刺,来观察它们如何反应,从而真正感受它,了解它。


然而,面对视频中很多我们不了解或者感兴趣,想要去触摸的东西,我们却无法这么做,顶多只能摸摸屏幕,默默想象这个东西摸起来会是怎样?


现在我要告诉你,只要看视频,你就可以与其中的人物互动,感受视频中的场景,甚至可以触摸哪些可爱的自己却没法养的小宠物。




这个想法并不疯狂,现在,麻省理工的交互动态视频技术,让幻想变成了现实。通过任意显示设备、伸手即可和屏幕上的物件进行互动。


负责开发此项目的教授博士生Abe Davis表示:这项技术让我们捕捉到对象的物理行为,从而在虚拟空间中与之交互。


通过将视频互动化,分析并预估出物体如何应对各种未知作用力,探索出了视频交互的新方式。




而且,大火的游戏《Pokemon Go》就是团队试验该技术的试点对象,与《Pokemon Go》单纯地在真实世界中放置虚拟小精灵不同,此项技术更进一步,能让我们在现实世界与小精灵们产生真实具体的互动。


比如说,他们会从你周围的草丛中跳出来,围着你欢快地跳跃。


神奇简单的原理


其实,实现该技术需要的工具很简单,一台传统的摄像机和一套算法,步骤也很简单,通过摄像机拍下物体轻微震颤的视频,然后用算法生成预测模型,预测出该物体在其他外力的作用下产生的振动模式。


但是,最后还原出来的效果却是那么真实,用户完全可以在虚拟环境中与物体自然地进行交互。




斯坦福大学计算机科学教授 Doug James 评论说:“以往的模拟技术往往是通过3D建模,但是这种方法非常昂贵,而且也不是每一种物体都可以进行建模,而Davis 和他的同事却另辟蹊径,提供了一种简单而聪明的方法,提取视频中一段非常小但十分有用的动态模型。”


Abe Davis 已经把这项技术用于视频中的很多对象,如桥梁、攀爬架和尤克里里。只需点击鼠标,就能实现不同方向推、拉、弯曲视频中的物体,甚至动动手指就可以控制灌木丛中的叶子。


应用潜力无穷




除了用《Pokemon Go》做实验,Abe Davis还发现这项技术适用于某些 YouTube 视频。


而且研究人员表示,此项技术在娱乐,工程等领域也有很多潜在用途。


这项技术用于电影制作中,通过算法模拟出真实世界的情景,可以简化特效师的工作,打造逼真的视觉效果。


交互动态视频技术同样可以用来模拟桥梁,建筑等工程的结构强度,进行安全性预测。


把现实世界中的物体放到虚拟的模型中,进行测试,从而不会损害现实世界中的对象。


例如,对于安全测试工程师来说,他们可以用这个系统,模拟桥梁和建筑物在遇到强风和地震时的情景。



导  读

工业风向标欢迎

专业人士、兴趣爱好者和撰稿人前来投稿

来稿请在后台留言或

发送到邮箱:[email protected]




本文由工业风向标原创,转载请在后台留言




阅读原文:http://mp.weixin.qq.com/s?__biz=MzI4NzIzMDUyNA==&mid=2651573426&idx=1&sn=b309cb658f079eb6e9998b9e3618dbac#rd

你可能感兴趣的:(太疯狂了,你能想象与视频中的人物互动吗?— 工业风向标)