元宇宙“跨世纪”对话震惊世界! 扎克伯格与主持人用逼真虚拟形象隔空交谈

文/小杰2023-10-04 05:53:09来源:第三方供稿

FX168财经报社(北美)讯 周二(10月3日),Meta首席执行官马克·扎克伯格与麻省理工学院研究科学家Lex Fridman一起在Lex Fridman播客中谈论Meta的AR和VR功能的未来。这次采访是在元宇宙中进行的,扎克伯格和Lex Fridman都使用自己的真实化身展示了一些令人印象深刻的技术。

(来源:YouTube)

主持人Lex Fridman在VR中采访扎克伯格时说道:“这确实是我见过的最不可思议的事情。他们在虚拟现实中采用Meta公司新开发的惊人逼真的虚拟形象,这些虚拟形象即将推出到Meta的虚拟现实头戴设备Quest上,它们的逼真程度相当高,以至于出现了“怪异谷效应”(uncanny valley effect)。这是指在人工智能和虚拟现实领域中,当虚拟形象(比如人的虚拟形象)逼真程度达到一定程度时,人们对它们的认知会出现突然的变化,产生一种“怪异”或“不真实”的感觉。

扎克伯格在网上因Meta早期VR头像的糟糕外观而受到了很多批评,但这些新头像绝对是一次巨大的飞跃。这为人们展示了未来世界中,虚拟现实通信和会议将真正让你感觉自己置身于与人们共处的房间中。

目前的虚拟形象(avatars)制作方式如下:这些逼真的虚拟形象目前是一个研究项目的一部分,制作这些虚拟形象需要扎克伯格和Lex Fridman在一个工作室里坐了数小时,由多台摄像机捕捉他们做出各种不同面部表情的过程。这些面部表情数据被用来构建可以通过动作控制的虚拟形象。

(来源:YouTube)

他们使用的虚拟现实头戴设备是Meta Quest Pro型号,但这项技术同样适用于价格更便宜的Meta Quest 3。这些头戴设备内部内置了多个摄像头,用来追踪你的面部表情,特别关注眼睛和嘴巴的运动。

这些捕捉的运动数据加上来自耳机麦克风的音频,构成了一个紧凑的数据流,可以以接近零延迟的方式跨国发送,而对话双方的头像副本则以预先下载的形式存入双方的头显中。

这种效果显然让Lex Fridman印象深刻。 “这里的逼真程度真是令人难以置信。我认为这是人们在互联网上以一种深层次、有意义的方式相互连接的未来。这真是非常有趣,居然可以远程实现如此亲密的对话。此前因为这个原因,我从不做远程播客,但这一切都改变了。”

(来源:YouTube)

Meta公司计划将虚拟形象的捕捉过程变得更加简单和快速,将在智能手机上仅需2-3分钟的时间。扎克伯格表示:“在进行扫描时,我们可能采集了过多的表情数据,因为我们还没有找出能够将这个过程大幅简化并且从已经完成的扫描中进行推断的方法。我们已经有一个正在进行的项目,目标就是进行一个非常快速的扫描,你只需拿起手机,在你的脸前晃动几分钟,说几句话,做一些表情。”

在采访中展示一些世界上最先进的面部表情捕捉和传输技术是一个有趣的选择。Lex Fridman表示:“这里令人惊奇的是表情和眼神的微妙之处,这些眼角的微妙运动在表达快乐、无聊或所有类似的东西方面是多么具有表现力。”

这些逼真的化身可能非常适合某些亲密的面对面交流,但就它们的构建方式而言,用户当然可以用它们做各种各样的事情,包括代表其他人说话,选择夸张或减小面部表情,甚至完全摆脱逼真度,从而驾驭任何类型的虚拟形象。

掌握最新全球资讯,下载FX168财经APP

相关推荐

关闭

元宇宙“跨世纪”对话震惊世界! 扎克伯格与主持人用逼真虚拟形象隔空交谈


FX168财经报社(北美)讯 周二(10月3日),Meta首席执行官马克·扎克伯格与麻省理工学院研究科学家Lex Fridman一起在Lex Fridman播客中谈论Meta的AR和VR功能的未来。这次采访是在元宇宙中进行的,扎克伯格和Lex Fridman都使用自己的真实...

分享至: