Meta与佐治亚理工学院合作利用VR/AR技术加速机器人训练

Meta 正在积极探索 VR 头显和 AR 眼镜在机器人训练领域的应用，并已推出多项工具以推动这一进程。最近，美国佐治亚理工学院的一项新研究揭示了如何利用 Meta Project Aria 眼镜来训练机器人执行日常任务，这一成果有望为人形机器人的发展带来革命性变化。

传统上，教导机器人完成日常任务通常依赖于机器人远程操作，这种方法不仅缓慢而且效率低下。然而，佐治亚理工学院的机器人学习与推理实验室通过利用 Project Aria 的自中心传感器，成功创建了所谓的“人类数据”，从而显著减少了训练机器人策略所需的机器人远程操作数据量。

据乔治亚理工学院交互计算学院的博士生西玛·卡雷尔介绍，传统数据收集方法需要操作机器人的关节来完成任务，并记录传感器数据，这一过程既耗时又困难。而利用 Project Aria 眼镜，研究人员可以被动地从一系列人体上收集数据，为更广泛的任务创建数据，进而在未来创建更加通用的机器人。

为了推动这一进程，卡雷尔开发了新算法框架 EgoMimic，该框架能够利用人类数据和机器人数据进行类人机器人开发。在研究中，Project Aria 眼镜不仅用于人体数据收集，还作为机器人实时操作设置的一个组成部分，允许机器人实时感知周围环境。

通过使用 Project Aria 进行数据收集和实时感知管道，研究人员最大限度地减少了人类演示者和机器人之间的域差，为未来机器人任务训练的规模化人类数据生成铺平了道路。得益于 EgoMimic 框架，与之前的方法相比，机器人只需 90 分钟的录像就能在各种任务中的表现提高 400%，并能够在新环境中成功地完成相关任务。

Meta Reality Labs 研究产品经理詹姆斯·福特表示，Meta 将 Project Aria 视为对研究界的投资，并希望自为中心的研究社区能够越来越标准化，以便更多研究人员能够通力合作，共同推动机器人技术的发展。