在机器人技术的前沿探索中,一款名为AgiBot Digital World的大型仿真框架近日由智元机器人公司隆重推出。这一创新成果不仅为机器人操作技能的研发与应用开辟了新路径,还伴随着海量仿真数据的开源,为行业内的开发者与研究人员提供了宝贵的资源。
AgiBot Digital World专为机器人操作技能设计,集成了丰富多样的三维资产、灵活的专家轨迹生成机制以及全面的模型评估工具。通过这些功能,该框架能够高度逼真地模拟各种训练场景,为机器人的具身仿真服务提供了强有力的支持。
该框架的三维资产库包含了众多精细建模的物体、场景和机器人模型,这些资产通过人工建模、三维重建技术以及生成式人工智能等手段转化而来,能够满足复杂多变的机器人操作任务需求。基于NVIDIA Isaac-Sim仿真平台,AgiBot Digital World提供了高度真实的视觉渲染和精确的物理模拟,使得仿真情景与真实世界之间的差异微乎其微。
在AgiBot Digital World中,光透过窗户的自然投射、物体随机器人动作而变化的倒影等视觉效果都显得异常自然。该框架还能模拟出真实世界的物理效应,如机器人将小车放入篮子时产生的晃动等,进一步增强了仿真的真实感。
AgiBot Digital World引入了多模态大模型,支持基于资产库自动生成操作任务,并根据指定任务自动创建操作场景和物体布局。这一功能使得开发者能够根据实际训练需求,灵活创建多样化、复杂度可调的仿真任务与仿真环境,实现了数据的闭环。
在数据生成方面,AgiBot Digital World提供了多元化专家轨迹生成策略,包括真机操作数字孪生、具身智能体自动生成以及仿真遥操作等。这些策略能够生成具有多样性和鲁棒性的专家轨迹数据,增强模型在真实环境中的泛化能力。同时,数据生成引擎还支持包括多视角RGB-D图像、触觉信息、机器人状态信息在内的多模态数据,为策略学习提供了丰富的数据源。
此次智元机器人还开源了海量规模的仿真数据集AgiBot Digital World Dataset,该数据集涵盖了家居、商超、办公、餐饮和工业五大场景,包含了超过180种具体物品和9种主要材质,以及12种核心技能。这些数据具有高质量、高泛化性、任务多样性和应用灵活性等特点,为各类场景应用提供了坚实的开发基础和广泛的应用可能性。
AgiBot Digital World的推出和海量数据的开源,无疑将加速具身智能技术的开发与应用。这一举措不仅降低了行业研发门槛,还为多技能训练和多任务泛化执行提供了有力支持。随着技术的不断进步和应用场景的不断拓展,AgiBot Digital World有望成为机器人技术领域中一颗璀璨的明珠。
领取专属 10元无门槛券
私享最新 技术干货