Facebook Reality Labs推出了Half Dome原型机


[IT搜购网 原创] 2018-12-24 12:55:47 编辑:
今年5月底,Facebook Reality Labs推出了Half Dome原型机。这是业界首款集成了眼动追踪相机、宽视场光学系统和可独立变焦显示器的VR头显,展示了VR体验发展方向。

Half Dome的变焦设计可以根据用户眼球的运动来显示相应的画面,使每个虚拟物体都能清晰聚焦。这种更加先进的显示方法可以在VR中创造更舒适、自然和富有沉浸感的真实画面。但要充分发挥其潜力,Half Dome不仅需要更高级的硬件,同样需要具有创新性的软件。

于是DeepFocus应运而生。这是一种新的人工智能渲染系统,可与Half Dome配合使用,模仿我们在日常生活中观察世界的方式,创建逼真的散焦效果。DeepFocus是第一个能够产生这种效果的系统,它以一种实时的、逼真的且依赖于凝视方式来对VR头显佩戴者没有聚焦的场景部分进行模糊。

本月在东京举办的SIGGRAPH Asia大会上Facebook Reality Labs展示了该研究论文,目前DeepFocus正在进行开源,开源内容包括系统代码和我们用来训练它的数据集,以帮助更广泛的VR研究人员将模糊画面的效果融入他们的工作中。

下面的动图演示了一款使用了DeepFocus技术的Half Dome原型,该头显与Oculus Rift拥有相同的视场角。红色光标表示佩戴者的注视位置。

模糊渲染对于极其逼真的VR至关重要

DeepFocus由Facebook Reality Labs的多学科研究团队开发,与电影美学或引人注目的视觉效果无关。实际上,模糊渲染越精确,观察者就越不可能注意到它。“我们的最终目标是提供与现实无法区分的视觉体验”,Facebook Reality Labs的视觉科学家Marina Zannoli表示,他很早就加入了DeepFocus项目。

真正逼真的体验的关键是聚焦(Focused)和散焦(Defocused)视觉效果的组合。“我们的眼睛就像微小的相机:当它们聚焦在一个特定的物体上时,视野中处于其他景深的部分场景看起来很模糊。那些模糊的区域有助于我们的视觉系统理解世界的三维结构,并帮助我们决定下一步关注的焦点。

虽然可变焦VR头显可以在观看者看向场景中任何地方时提供清晰的图像,DeepFocus允许我们以现实世界中的外观呈现场景的其余部分:自然模糊。“

此动图演示了DeepFocus系统如何呈现模糊,头显佩戴者的焦点(由红色光标表示)在场景中的不同元素之间移动。

逼真的视网膜模糊的最大潜在好处之一是更舒适的VR体验。Facebook Reality Labs显示系统研究总监Douglas Lanman说:“这种技术可以实现全天沉浸。无论你是玩电子游戏几个小时还是看一个无聊的电子表格到眼睛和视觉疲劳,又或者只是花一天的时间来陪伴着一幅美景,DeepFocus对所有这一切都很重要。”

在2015年Half Dome项目的早期阶段,Lanman已经认识到了模糊渲染的必要性。那时他刚加入该项目几个月,早期的Half Dome原型展示了在VR中创造清晰焦点的希望。然而,基于软件的散焦被证明是实现这一希望的主要障碍之一。

Facebook Reality Labs想要实现的方法无法利用用于渲染非VR游戏中的实时模糊的现有技术,这些非VR游戏更多地需要产生引人注目的电影效果(如漂亮的散焦背景)而不是真实感。这些快速但不准确的创造游戏里的背景模糊的方法与Half Dome的目标背道而驰,Half Dome想要重现光线传播时落在人类视网膜上的方式。

 
分享到:

频道精选

IT搜购网简介 | 广告服务 | 招聘 | IT搜购记事 | 站点地图 | 联系方式 | RSS订阅 | 猴科技
Copyright ©2005 - 2016 ITSOGO. All rights reserved. IT搜购网 版权所有. 冀ICP备13010806号