Meta产品经理Sarthak Ray表示,通过混合现实看到周围世界并与之互动的功能为VR开辟了新的机会。“你可以在同一个物理房间里与朋友一起游戏,或者将巨大的虚拟显示屏与物理工具相结合,这是我们朝着增强现实的长期愿景迈出的一步。”
与流行观念相反,如果VR/AR设备能够令人信服融合物理世界和虚拟世界,那么混合现实体验是最有效的。根据Oculus.com最近的一篇博文,这意味着头戴式设备不仅仅是实现2D视频输入。
为了进一步致力于开发尖端VR技术,Meta宣布推出Meta Reality,这是一种新的混合现实系统,可以使开发者深入了解创造非凡体验的要素。
用于空间感知的立体彩色透视
Meta认识到了彩色透视和立体3D技术在提供舒适和身临其境的混合现实体验方面的重要性。
“Meta Quest Pro结合了两个摄像头视图以重建逼真的深度,这确保了基于彩色透视构建的混合现实体验对人们来说是舒适的,”Meta计算机视觉工程经理Ricardo Silveira Cabral解释,“但同时,即使深度重建不完美或超出系统范围,根据立体纹理提示用户也能完成深度推断。”
Oculus Insight只能捕捉100个兴趣点以确定头显在房间中的位置,这项技术为消费者VR 设备提供了首个独立的追踪系统。相比之下,Quest Pro在不同的光照条件下每秒可以产生多达10000个兴趣点,以支持用户可以实时创建物理空间的改进3D表示。
通过这个过程,Meta能够创建一个不断更新的物理世界的3D模型,然后,用户可以根据这些数据创建一个预测渲染框架,该框架可以生成真实环境的图像,而为了补偿渲染延迟,异步TimeWarp算法将重建调整为用户的左右眼视图。
Silveira Cabral指出,基于彩色立体相机,团队将能对现实世界进行更逼真的诠释。
Presence Platform 场景理解组件是在Connect 2021期间推出的,该技术使开发者能够创建复杂且场景感知的混合现实体验,据Quest Pro产品经理 Wei Lyu介绍,该公司的Scene Understanding 组件旨在帮助开发者专注于构建业务和体验。
开发者可以基于Spatial Anchors轻松创建一流的混合现实体验,这是Quest Pro平台的核心功能。例如,产品设计师可以使用Gravity Sketch等平台轻松在整个物理空间中锚定多个3D模型,从而为其产品创建无缝环境。
Meta产品经理Laura Onu表示:“如果说立体色彩透视和场景理解使MR体验融合物理世界和虚拟世界起到了举足轻重的作用,那么我们的锚定功能则提供了将它们结合在一起的结缔组织。”
与场景模型一起,空间锚点可用于为各种体验创建丰富且自动的环境。例如,你可以创建一个连接到实体墙的虚拟门,对于将XR技术用于数字孪生、仓库自动化甚至机器人技术的企业解决方案商来说,这将是一个巨大的进步。
目前看来,Meta更侧重于社交体验,“通过将Scene Understanding与Spatial Anchors 相结合,开发者可以将MR体验融合并适应用户环境,从而创造一个充满可能性的新世界,”Onu补充,“用户可以成为自己客厅里的秘密特工,将虚拟家具置于房间或绘制房屋的延伸部分,创建物理游戏等等。”
此外,Meta Presence Platform 添加了Shared Spatial Anchors功能,这将支持用户通过与同一空间中的其他用户共享锚点以创建本地多人游戏体验。
Spatial Anchors、Passthrough和Scene Understanding的结合可以帮助创建一个丰富的交互式环境,Quest Pro产品经理Avinav Pashine指出,为用户创建出色且舒适的混合现实环境涉及许多权衡。
Meta Reality仍在不断发展,Meta通过软件更新和硬件创新不断改进平台,Quest Pro产品经理Silveira Cabral指出,Quest Pro是 Meta Reality进化过程中的重要一步。
评论