Oculus Connect时光机：Michael Abrash预测VR的前景如何?

 
在每个Oculus Connect的后半个十年中，Facebook的顶级VR研究人员对技术的未来进行了年度回顾。
Michael Abrash以研究为重点的演讲是Facebook举办的年度会议的亮点，我们希望在Oculus Connect 6期间能看到类似的更新。Abrash受Valve的聘用，首先在Oculus上建立了Facebook的长期VR研究成果。研究，然后以新名称Facebook Reality Labs。
Abrash概述了Oculus Research，并尝试解决以下问题：VR过去未能得到广泛采用，为什么这次会有所不同。
他说：“实际上，这是最终的平台。” “包装我们的感官，最终将能够提供我们能够拥有的任何体验的人。”
他说，Oculus Research是20年来第一个资金雄厚的VR研究团队，他们的工作是推进“ VR平台”的“深入，长期的工作”。他指出了他们计划在一系列关键领域追求包括眼动追踪。偏向渲染的思想是，如果您足够快速可靠地跟踪眼球的运动，则可以构建VR头戴式受话器，该头戴式受话器只能直接在您所看的位置绘制场景的最详细部分。他还将现代VR头戴式耳机的固定焦距描述为“在感知上并不理想”，并承认它们可能“引起不适”或“可能使VR变得不太真实”，同时暗示了“解决该问题的几种可能方法”，需要新的硬件和更改渲染模型。
他说：“机会来临时，这就是样子。”
在2015年末，Abrash概述了使用VR技术驱动人类感官所需要的一系列更具体的进展。他说，可以将未来的VR研究者的品味留给他，而且触摸和嗅觉都需要突破传送技术的发展。他还讨论了前庭系统-他将其描述为用于感测方向和加速度变化的内部加速度计和陀螺仪-以及“前庭感觉与所见之间的冲突是造成不适的主要原因”。
他说：“目前，这个问题还没有解决之道。”
他说，尽管如此，对于听力来说，“几乎完美地做到这一点是一条清晰的道路”。 “但是，清晰并不意味着容易。”他将音频模拟的三个要素分解为：综合(“创建源声音”)，传播(“声音如何在空间中移动”)和空间化(“传入方向”)。声音”)以及将这三个方面都做好的困难。
他说：“我们了解控制声音的方程式，但即使在只有几个移动声源和物体的单个房间中，也无法实时运行完整的模拟，这要差几个数量级。”
他预测，在20年后，您将能够听到虚拟的针脚掉落的声音，“这听起来不错-一个有趣的问题是，我们将在五年内达到多近的距离。”
他将“光子传输系统”描述为需要五个经常相互冲突的属性，这需要在视场，图像质量，焦点深度，高动态范围和全天人体工程学之间进行权衡。
他说：“目前所有已知的权衡都离现实世界很远。”
他提供了以下图表，显示了当前的市场标准和未来VR视觉系统的“期望”属性。
Abrash将Facebook的VR研究描述为其他令人感兴趣的领域，如场景重建，人体追踪和人体重建。他补充说，互动和虚拟现实手指控制的开发是一个特别难解决的问题。
他说：“没有一种可行的方法可以完全重现现实世界中的运动学。” “换句话说，当您将手放在虚拟桌子上时，没有已知或潜在的消费类技术会阻止您的手继续前进。”
他说，这还处于初期，“第一个真正起作用的触觉VR界面将具有与第一个基于鼠标的窗口系统同等的改变世界的魔力。”
Facebook的PC驱动的Oculus Rift VR头盔于2016年推出，但Facebook尚未为其交付Oculus Touch控制器。他回应了他在2015年发表的评论，他说，“甚至还没有出现在遥远的地平线上的”触觉和运动学”技术才能使您的手用作“直接物理操纵器”。结果，他说，五年内，“类似触摸的控制器将仍然是复杂VR交互的主要模式”。
2021年的裂谷也许能够实现。然而，他的许多预测最大的风险是，VR显示器的许多进步所需的眼动追踪质量不是一个解决的问题。他说，这“对VR的未来至关重要”。他认为偏偏的渲染甚至是使无线PC VR头戴式耳机正常工作的关键。
他说：“消除束缚，您可以在VR中自由地在现实世界中移动，但仍然可以使用PC的处理能力，”
他说，他相信虚拟人类将仍然存在于奇异的山谷中，并且“令人信服的人类”化身将超过五年。
在2017年的Oculus Connect 4中，Facebook将Abrash更新更改为对话格式。对于Abrash提出的问题包括他的研究团队如何为公司的VR产品做出贡献。
他说：“我们这一代人一无所有。” “但是在未来几年中肯定会看到很多事情。”
尽管本届会议的未来并不多，但以下评论帮助解释了他认为Facebook VR和AR研究的目的：
“我们如何使光子更好地进入您的眼睛，如何为您提供更好的计算机视觉，以实现自我存在，其他人的存在以及您周围的环境。我们如何更好地进行音频处理，如何使您与世界更好地互动-它是一个整体，每个部分都可以自己向前推进，但是从长远来看，您真的希望所有部分都融合在一起。一个很好的例子是，假设我们神奇地让您在VR中完美使用您的手，对吧?您只需要伸出手，就可以抓取虚拟对象-还记得我说的关于您专注于哪里的事情吗?伸手可及的距离实际上并不会非常清晰，而且聚焦良好。因此，您也确实可以解决该问题。它就这样持续不断地进行，您需要将所有这些部分整合到正确的系统和平台中。”
在去年的Oculus Connect会议上，阿布拉什(Abrash)更新了他对2016年的一些预测。虽然这些预测最初定于2021年投放到高端VR头戴设备，但这次他说，他认为这些可能会在2022年掌握在消费者手中。
他在本演讲中建议，由于AR技术的并行发展，VR的发展速度比他预期的要快。
他认为新的透镜和波导技术可能会对未来的显示系统产生巨大影响。他还说，偏心的渲染和出色的眼动跟踪仍然对他的预测构成风险，但现在他很乐意做出这样的预测：“到2022年，“高度可靠”的眼动跟踪和偏心的渲染“应该是可行的”。
阿布拉什(Abrash)在谈到Facebook的声音研究时说：“音频的存在是一件实事。” “这可能比我想象的要长。”
阿布拉什(Abrash)展示了Facebook在“编解码器化身”方面的工作，以说服人类化身重建，并暗示这些可能与他的其他预测(2022年)同时出现。
他还做出了最长远的预测，他说他相信到2028年，我们将拥有“某种形式的有用的触觉手”。