近日,Meta 首席执行官马克・扎克伯格在Lex Fridman 的视频博客采访过程中,展示了 Meta 的新型Codec虚拟现实化身,该化身使用扫描技术构建用户面部的 3D 模型,再由机器学习实现驱动。在对话过程中,新型头显会检测用户的面部表情并将其实时映射到 3D 化身上形成动作。
其形象本身与Meta在去年发布的,一张扎克伯格在虚拟埃菲尔铁塔外发布了一张他的元宇宙化身的自拍照相差甚远,可以说是非常逼真,令人惊讶的是没想到仅仅时隔一年,技术的进步就如此巨大。
扎克伯格说,在进行元宇宙对话时,“平台基本上是在通过网络发送你形象的编码版本,这种方式甚至比传输视频的带宽效率更高。”
当然在元宇宙里,你也可以对自己的形象进行一些定制,比如修改一下打光:
这一切显然给进行渲染的硬件带来了更多的负载。在对话中,扎克伯格和 Fridman 都戴着最新版 Quest Pro,它具有内置的面部跟踪和眼球跟踪功能。需要注意的是,这并不是前几天发布的 Quest 3。Quest Pro 可能要等 2025 年才能正式发布。
尽管虚拟化身令人印象深刻,但要广泛使用它们可能还需要一段时间。而且需要注意的是,Codec 形象需要对用户的面部进行扫描,以建立 3D 虚拟模型。而这次采访中显示的人物形象是使用当今最先进的、长达数小时的扫描(包括数百个摄像头)创建的,如此高的成本也和普通消费者们拉开了距离。
不过扎克伯格在采访中也表示,Meta 的计划是让人们能够使用智能手机进行非常快速的扫描。 “你只需拿起你的手机在自己面前晃动几分钟,说几句话,做出一堆表情...... 然后 AI 就可以制作出无比真实的形象”,扎克伯格告诉 Lex Fridman。
评论