「这是我与扎克伯格在元宇宙中的对话。我跟 Mark 物理距离有上百英里,但我感觉是在和他面对面。因为我们的形象都由照片级精度的 3D 模型进行了建模,这技术太神奇了!我认为这就是人们未来在互联网上交流的方式,」Lex Fridman 说道。
昨天,麻省理工学院(MIT)科学家 Lex Fridman 与 Meta 首席执行官马克・扎克伯格的一番隔空对话,成为了社交网络上的最大热门。他们在元宇宙里长达一个小时的采访视频播放量很快就冲上了千万。
现在,在元宇宙里,我们的形象可以做到和真人几乎一致,从全身细节到表情动作,自然得让人惊叹。
以至于在现实世界里,我们需要注意管理一下表情:
在 Lex Fridman 播客的「首次 Metaverse 对话」中,扎克伯格展示了 Meta 的新型 Codec 虚拟现实化身,其使用扫描技术构建用户面部的 3D 模型,再由机器学习实现驱动。在对话过程中,新型头显会检测用户的面部表情并将其实时映射到 3D 化身上形成动作。
扎克伯格说,在元宇宙对话时,「平台基本上是在通过网络发送你形象的编码版本,这种方式甚至比传输视频的带宽效率更高。」
当然在元宇宙里,你也可以对自己的形象进行一些定制,比如修改一下打光:
与 Meta 最初的虚拟化身不同,此前的技术被嘲笑为无腿、目光呆滞且令人难受,新一代的形象却显得极其真实,延迟也可以忽略不计,能让你在虚拟世界里感受到和别人在一起。
扎克伯格表示:「这触及了增强现实愿景的核心,即无论你身在世界何处,它都能提供一种临场感。」
这一切显然给进行渲染的硬件带来了更多的负载。在对话中,扎克伯格和 Fridman 都戴着最新版 Quest Pro,它具有内置的面部跟踪和眼球跟踪功能。需要注意的是,这并不是前几天发布的 Quest 3。Quest Pro 可能要等 2025 年才能正式发布。