MIT实验室研发出可以交互的VR视频 VR2048

↑ 点击上方“VR2048”关注我们




在这样一个即将被虚拟现实统治的世界里要打造一个逼真的虚拟环境几乎全凭先进的3D建模技术、昂贵,密集的劳动才能产生令人满意的结果,同样还需要数以百计的工作时间。现在 麻省理工学院计算机科学与人工智能实验室的研究人员也许可以为你提供一个更好的方法。


这种方法被称为“互动动态视频”(IDV),该方法使用传统相机和算法制作物体细微的震动效果,使模拟用户可以进行虚拟的交互。这些物体可以被推动、拉扯、堆放——就像在现实生活中一样---通过使用一种新的成像模式,成本仅仅是3D建模的一小部分,并且只需要一个摄像头和一些简单的图像编辑。

 

计算机图形学允许我们使用3D模型来构建交互式的仿真 但技术略复杂没有参与研究的斯坦福大学计算机科学教授Doug James这样说。Davis和他的同事们开发了一个简单而灵活的方式从视频里非常微小的震动中提取有用的动力学模型 并展示如何用它制作动画图像。


虽然现在已经有算法可以追踪视频中运动并对其进行放大, 但在未知的环境中对目标物体进行准确的模拟还是十分困难的。这项工作要与控制照明和背景(如绿幕)同时进行才能更好地控制环境,从而制作出高质量的模型。




互动动态视频的原理则与之不同。其不用绿幕拍摄, 而是算法通过使用现有视频中的信息进行模拟,即使是在一个没有控制的环境中。要做到这一点,团队分析了一些视频片段来找到这些对象在不同频率下的振动模式, 每个模式代表对象活动的特点。通过识别振动模式的形状,研究人员发现他们可以更好地在虚拟环境中预测模型移动的方式。




”这种技术能让我们捕捉对象的物理行为,因此我们便可以在虚拟的环境中与之交互“CSAIL的博士生Abe Davis说,他将于本月出版他的毕业论文。“通过使视频互动,我们可以预测对象如何应对未知力量并探索视频交互的新方法。”


这对于虚拟现实和增强现实的影响都是巨大的,不过Davis也提到它在其他领域也大有用途,比如帮助电影制作者降低电影的制作成本,帮助建造师明确建筑结构是否合理。

 

 把现实世界的对象制作成虚拟模型不仅对于各种娱乐应用程序来说大有价值 对于在不损害真实世界对应物的前提下, 测试虚拟环境中的压力也是很有帮助的Davis说。


它还可以提升虚拟现实和增强现实游戏,比如 Pokémon Go。Niamtic成功地利用增强现实技术将数码形象融入到真实的环境中。动态互动视频同样能够做到这一点, 它的虚构人物还可以以更现实的方式与环境交互,比如从反弹到墙上或躲避障碍。




从 Pokémon Go到建筑领域、互动动态视频的潜力巨大,并且有一件事是肯定的:这将是推进虚拟现实不断向前发展的一个重要技术。互动动态视频是一个很好的开始。

VR2048昨日新闻回顾

对于下一个计算机3D图形的挑战是什么 | VR2048


一台平板电脑60秒钟时间高通构建了一个真实完美的3D人脸模型 | VR2048


VR直播体育节目给制片人带来新的挑战 | VR2048


PSVR要求一个比我们想象中更大的使用空间 | VR2048





我们致力于服务 VR/AR 爱好者,从业者和开发者,传播先锋资讯。
更多资讯:www.vr2048.com

主编微信:jianxiong_hu
商务合作:press@vr2048.com
欢迎关注微信公众号: vr2048com


点击下方“阅读原文”查看更多