仿生AI机器人的AI模型需要自真实世界的人类演示作为培训资料,不过由于真实世界会有许多的变数,会有一部分的情况难以取得资料进行重现,但也往往成为机器人AI模型训练的盲点;NVIDIA在CES 2025公布NVIDIA Isaac GROOT合成运动生成蓝图,能够自真人演示撷取远端遥控资料,并透过生成式AI产生大型合成轨迹资料库,使机器人能够在更丰富的真实与合成素材进行训练与模拟。
NVIDIA Isaac GROOT是为了人形机器人开发提供基础模型、资料管道与模拟框架的平台,而NVIDIA Isaac GROOT合成运动生成蓝图则是用于模仿学习的模拟工作流程,能够以少量的真人演示产生丰富且高品质的合成资料。
▲NVIDIA Isaac GROOT合成运动生成蓝图的目的是将有限的资料透过生成式AI变成大量高品质的合成轨迹资料库
NVIDIA也介绍了NVIDIA Isaac GROOT合成运动生成蓝图的工作流程;首先在初始的GR00T-Teleop流程包括两阶段,利用Apple Vision Pro搭配NVIDIA CloudXR作为撷取人类示范的资料来源,再利用Isaac XR Teleop将参考资料传送到NVIDIA Isaac Sim、Isaac Lab或导出到其它平台;接着进入利用机器人学习的开源统一框架训练机器人决策的Isaa Lab阶段,并借由GR00T-Mimic以这些真实资料产生大量的合成运动轨迹资料,在借由GR00T-Gen将场景的变因如背景、光照等进行随机化,而后透过NVIDIA Cosmos合成内容。
发表评论 取消回复