技术的飞速发展,正在让人形机器人从形态的“拟人化”逐步转向功能的实用性,以此来加速产品商业化和市场扩展。NVIDIA一直在积极研究和开发人工智能和机器人技术,尤其是在人形机器人领域,NVIDIA致力于通过 NVIDIA Isaac 、NVIDIA Jetson等平台加速全球人形机器人的发展和创新。
为了加速全球人形机器人的发展,在 SIGGRAPH 2024上,NVIDIA正式宣布为全球机器人制造商、AI模型开发者和软件制造商提供一套服务、模型以及计算平台,以开发、训练和构建下一代人形机器人。
整套产品包括用于机器人仿真和学习的全新 NVIDIA NIM™ 微服务和框架、用于运行多阶段机器人工作负载的 NVIDIA OSMO 编排服务,以及支持 AI和仿真的远程操作工作流,该工作流允许开发者使用少量人类演示数据来训练机器人。
简化训练和仿真工作流,缩短部署和开发周期
NVIDIA NIM(NVIDIA
Inference Manager)是一个由NVIDIA提供的工具,用于管理和优化AI模型的推理过程。NIM旨在帮助开发者和企业更高效地部署、扩展和维护他们的AI推理应用。
为了帮助开发者加速产品开发,NVIDIA在NIM 微服务中提供了由 NVIDIA 推理软件提供支持的预构建容器,使开发者能够将部署时间从数周缩短到几分钟。机器人专家将能够通过两项新的AI微服务,在 NVIDIA Isaac Sim™m(基于NVIDIA Omniverse™ 平台构建的机器人仿真参考应用)中增强生成式物理 AI仿真工作流。
除此之外,MimicGen NIM 可根据 Apple Vision Pro 等空间计算设备记录的远程操作数据,生成合成运动数据。Robocasa
NIM 可在 OpenUSD(一个用于在 3D 世界中进行开发和协作的通用框架)中生成机器人任务和仿真就绪环境。
现已推出的 NVIDIA OSMO 是一项云原生托管服务,允许用户跨分布式计算资源来协调和扩展复杂的机器人开发工作流,无论是在本地还是在云端。
OSMO 大大简化了机器人训练和仿真工作流,将部署和开发周期从数月缩短到一周内。用户可以对各种任务进行可视化管理,包括合成数据生成、模型训练、强化学习以及大规模的人形机器人、自主移动机器人和工业机械臂软件在环测试。
不难发现,
使用真实数据和合成数据,节省时间和降低成本
训练人形机器人的基础模型需要大量的数据。远程操作是获取人类演示数据的方法之一,但这个过程正变得越来越昂贵和漫长。