Meta或将为Quest头显引入超逼真Avatar编解码器

Codec Avatars 是 Meta 长期运行的研发项目，旨在通过实现真正令人信服的逼真化身来彻底改变远程通信，这些头化身由带有面部追踪传感器的头显/眼镜实时驱动。Meta 于 2019 年首次透露了该项目的存在，并在此后的几年里展示了多个保真度更新以及全身版本。

虽然超逼真 Avatar 编解码器一直被描述为研究领域，但一项新发现表明，它现在可能正在成为 Quest 头显的一项功能。

近日，VR 爱好者 Luna 通过反编译 Meta Quest v62 版本找到了对 Codec Avatars 相关代码的引用，该固件目前可供测试人员在公共测试频道中使用。

即将推出的 Quest 功能在过去已多次以这种方式被发现。它告诉我们，Meta 正在努力在 Quest 头显上集成一项功能。但是，它并没有告诉我们该功能距离发布还有多远，或者它是否真的会发布。例如，Space Sense 在固件中被发现几个月后就到了，而 Quest Pro 则花了一年多的时间。多年来，人们已经发现了对 Discord 集成和 Project Avalanche 云 PC VR 流媒体功能的引用，但两者都没有发布。

去年 3 月，Meta 首席技术官 Andrew Bosworth 表示，该公司在发布 Codec Avatars 方面“取得了进展”，但“还需几年的时间"。

2021 年，Meta 研究人员展示了一种更有效的 Codec Avatars 解决方案。在 Quest 2 上，新解决方案可以以 72FPS 的速度在空白场景中渲染一个化身，以 63FPS 左右的速度渲染三个化身，或者以 43FPS 左右的速度渲染五个化身。

但是，如何在缺乏面部和眼动追踪的 Quest 2 和 Quest 3 上驱动这些化身呢？Meta 研究人员还展示了一个不需要面部追踪的 Codec Avatars 版本，最近甚至展示了一个根本不需要任何追踪的版本。取而代之的是，来自麦克风的音频被输入到神经网络中，该神经网络模拟还原当前语音模式的可能面部姿势。

目前还不清楚此功能是针对现有的 Quest 头显还是未来的 Quest Pro 2 开发的。但 Meta 也可能打算将超逼真 Avatar 编解码器引入现有的 Quest Pro，甚至是 Quest 2 和 Quest 3。