在机器人技术领域的最新进展中,智元机器人公司近期宣布了一项重大突破,推出了名为AgiBot Digital World的大型仿真框架。这一创新平台旨在为机器人操作提供全面且灵活的仿真数据生成方案,同时预训练了大规模的仿真数据,并建立了统一的模型评测标准。
AgiBot Digital World不仅是一个仿真框架,更是专为机器人操作技能研究与应用设计的综合性工具。它集成了海量的高保真三维资产、多样化的专家轨迹生成机制,以及全面的模型评估工具。通过模拟各种训练场景,AgiBot Digital World能够生成逼真的机器人操作数据,为机器人提供接近真实世界的训练环境。
AgiBot Digital World的三维资产库包含丰富多样的物体、场景和机器人模型,这些资产通过精细的人工建模、三维重建技术和生成式人工智能(AIGC)技术转化而来,能够满足复杂机器人操作任务的仿真需求。从家居用品到工业设备,从常见的家具到罕见的工具,AgiBot Digital World都提供了详尽的模拟。
基于NVIDIA Isaac-Sim仿真平台,AgiBot Digital World提供了高度逼真的视觉渲染和精确的物理模拟。仿真场景中的光影效果、物体的材质和物理行为都得到了精细的再现,使得仿真情景与真实世界之间的域差异最小化,从而提升了感知和交互的真实感。
除了逼真的视觉和物理模拟外,AgiBot Digital World还引入了多模态大模型,支持基于资产库自动生成操作任务,并根据指定任务自动生成操作场景和物体布局。这一功能使得用户能够根据实际训练需求,灵活创建多样化、复杂度可调的仿真任务与仿真环境,实现了数据的闭环生成。
在数据生成方面,AgiBot Digital World提供了多元化的专家轨迹生成策略。通过真机操作数字孪生、具身智能体自动生成和仿真遥操作等方式,AgiBot Digital World能够生成丰富多样的专家轨迹数据,这些数据具有多样性和鲁棒性,有助于提升模型在真实环境中的泛化能力。
智元机器人还开源了海量规模的仿真数据集AgiBot Digital World Dataset。该数据集涵盖了家居、商超、办公、餐饮和工业五大场景,包含了超过180种具体物品、9种常见材质和12种核心技能。这些数据具有高质量、高泛化性和任务多样性等特点,能够为机器人操作提供坚实的训练基础。
通过AgiBot Digital World和AgiBot Digital World Dataset,智元机器人为机器人技术的研究和应用提供了强有力的支持。这些工具和数据的开源,将有望降低行业研发门槛,加速具身智能技术的开发和应用,推动机器人技术向更高水平发展。
领取专属 10元无门槛券
私享最新 技术干货