近日，人工智能大佬和知名播客主播Lex Fridman对Meta首席执行官马克·扎克伯格进行了一场关于增强现实、AI和大语言模型的深度访谈。

元宇宙超写实虚拟人的对话

与以往不同的是，这次两人没有在物理世界见面，而是相隔大半个美国，在元宇宙里以超逼真的3D虚拟形象完成了对话。这场名为”First Interview in Metaverse“的采访已在X(原推特)上获得了近1千3百万的观看量。

在访谈中，Lex Fridman和扎克伯格都佩戴着Meta Quest Pro VR头显。由于视野里的效果太过真实，Lex一度像个好奇宝宝，除了咧嘴“傻笑”，就是不停感叹。扎克伯格介绍了创建这些全新模拟真人的Meta Codec虚拟形象的过程，需要对用户的各种面部表情和动作细节进行广泛扫描，而后建模并压缩成一个编码版本。随后，头戴设备的实时眼部和面部追踪功能会捕捉用户表情，映射到3D虚拟化身上，并“发送一个编码版本的你应该看起来的样子”给虚拟世界或会议通话另一端的人们，在他们眼前呈现一个足以以假乱真的人物。

由于元宇宙里的形象数据是以编码形式传输，所以除了逼真外，也比发送一个完整的沉浸式视频更加节省带宽。从采访视频来看，虚拟化身呈现出对真人细节的还原能力确实太强，用Lex的话说，“它捕捉到了一切，包括人脸上的缺陷。对我来说，这些缺陷正是人的微妙之处，这些小雀斑、皱纹、不对称的脸颊、笑的时候眼角的表情…它们让我更加享受其中，意识到完美并不是沉浸的关键。”扎克伯格认为这也触及了虚拟现实和增强现实的视觉核心，就是令人们不论在世界上的哪一个地方，都会感觉在一起。

想象未来进入会议室，有些人实际在现场，有些人则以这种逼真的虚拟形态出现，并通过结合混合现实技术叠加在物理环境上：你以为TA坐在桌子边跟你聊项目，其实TA远在千里之外；夜深人静一个人在外地想家的时候，带上头显亲人就近在咫尺。而对面人的一颦一笑，每一个细微的面部表情，都可以几乎没有延时和耗损地立体真实再现。

不过需要说明的是，实现视频中的对话效果目前对普通人还不是那么容易。在开始采访前，两人都曾提前飞到匹兹堡，在Meta Codec项目组进行了融合当前软硬件最高技术、长达几个小时的细节扫描。