用于沉浸式元宇宙体验的AI技术

SDI数字创新，您值得信赖的Metaverse合作伙伴！

要点

人工智能算法可以通过更智能的频段分配和路由有效地使用底层网络基础设施来优化元宇宙应用程序。

智能手表、眼镜、手势识别设备、多感官模拟设备等丰富元宇宙体验的人机界面，都可以通过AI算法变得更加智能。

例如，用于手势识别或眼球运动分析的算法可以帮助理解用户的意图并改善体验。空间计算作为元宇宙体验的核心元素，可以通过基于深度学习的解决方案得到增强。

例如，基于神经网络的 3D 场景渲染可以使空间计算更快更好，增强 3D 网格质量。元宇宙的重要承诺之一是实现真正的创作者经济，创作者可以公平分享他们的创作。人工智能可以在实现它方面发挥重要作用，因为它可以为创作者配备多种设计工具，例如图像生成器、3D 模型生成器等，以增强他们的创造力。基于人工智能的价格推荐算法将帮助他们为自己的创作获得一个公平的价格。

沉浸式内容生成

元宇宙应用程序通常需要使用大量 3D 建模和优化工作内容。由于游戏、AR/VR、3D 动画电影和虚拟世界模拟的流行，对 3D 内容的需求正在快速增长，因此需要在 3D 建模和生成中实现自动化。各类公司正在积极努力减少（甚至消除）创建 3D 内容的学习曲线。基于人工智能的方法在大规模生成 3D 模型方面发挥着关键作用。

AI 可以促进内容创建过程，例如，AI 模块“GANverse3D”由 NVIDIA 推出，使开发人员和创作者能够拍摄物体照片并生成 3D 模型。近年来，在使用深度神经网络生成 3D 形状方面取得了巨大进步。3D 对象的生成模型大致遵循三种方法——草图到 3D 生成、图像到 3D 生成和3D 编辑/风格化。

目前已经提出了几种方法来使用文本和草图来操纵隐式 3D 形状表示。Text2Mesh在文本输入的驱动下，在各种源网格上生成颜色和几何细节。3DSTNet和 3DStyleNet通过将形状和纹理样式从一个 3D 对象转移到另一个来创建 3D 对象的几何和纹理变化。PolyGen使用Transformers和Pointer Networks按照逐个顶点和逐个面的顺序生成网格。

元宇宙智能用户交互

由于元宇宙应用程序大多以用户为中心，因此用户交互变得更加重要。借助最新的AI工具和技术，元宇宙应用程序可以更具吸引力，并可以为最终用户提供更加无缝的体验。

例如，智能对话机器人可用于通过跟踪对话的上下文来理解用户的意图。这些机器人可以使用多种语言，以支持用户以其母语进行交互。此外，借助最先进的 AI 技术，可以使这些机器人更加智能，并通过使用有关用户的模态信息在对话中表现出个性和同理心。人工智能可用于使用复杂的神经网络和大量数据构建此类机器人。这也将解决当前在元宇宙中交互方式的局限性。

元宇宙本质上是空间和 3D 的，它还为我们提供了使对话人性化的机会。例如，用户的 3D 数字化身代表他们在元宇宙中的另一个自我。

最近，使用智能工具和基于深度神经网络的生成模型构建智能3D Avatar有了很多发展。人工智能提供了很大的灵活性，可以更快地构建和定制 3D 头像。它不仅可以创建用户的 3D 网格，还可以创建可以模仿用户手势的 3D头像。

NVIDIA的Audio 2 face等 AI 解决方案可用于捕捉用户的对话和情绪，并将其实时应用到 3D Avatar 中，使交互更真实、更紧密，就像谷歌设想的项目星光一样。

由对话式 AI 提供支持的虚拟化身可以使元宇宙更具吸引力。我们已经见证了人们对虚拟影响者领域的兴趣增加。人工智能是让虚拟网红更像人的核心技术。

SDI数字创新为您带来精彩直播内容，马上预约！

往期前沿

版权声明：本文编译自相关学术论文，转载内容版权归属报告作者所有。转载仅用于公众信息普及，不涉及商业服务，如涉及版权问题，请联系我们删除或做相关处理。