NVIDIA宣布推出一套全面的服务、模型和计算平台,旨在加速全球范围内人形机器人的发展。该计划旨在支持领先的机器人制造商、AI模型开发者和软件制造商打造下一代人形机器人。
NVIDIA人形机器人开发者计划
您正在构建人形机器人吗?如果是这样,那么加入新的NVIDIA开发者计划以独家抢先体验NVIDIA的加速计算系统可能是值得的。从云端到边缘,机器人基础模型和加速库、机器人学习和模拟框架以及开发者管道工具。
兴趣点:
NVIDIA为机器人开发引入了NIM微服务和OSMO编排服务。
用于训练机器人的新型人工智能和模拟远程操作工作流程。
NIM微服务包括MimicGen和Robocasa,用于生成合成运动数据和模拟环境。
OSMO简化了机器人训练和模拟工作流程,缩短了开发周期时间。
在SIGGRAPH会议上演示的远程操作工作流程。
Fourier和其他公司受益于NVIDIA的模拟技术。
NVIDIA提供三种计算平台:AI超级计算机、IsaacSim和JetsonThor。
通过NVIDIA人形机器人开发者计划提前获得新产品。
NVIDIANIM和OSMO
NVIDIA的新NIM微服务和OSMO编排服务旨在简化人形机器人的开发。NIM微服务提供由NVIDIA推理软件驱动的预构建容器,将部署时间从几周大幅缩短至几分钟。两项新的AI微服务MimicGen和Robocasa增强了NVIDIAIsaacSim中生成物理AI的模拟工作流程,NVIDIAIsaacSim是基于NVIDIAOmniverse平台构建的机器人模拟参考应用程序。
MimicGen根据来自空间计算设备(如AppleVisionPro)的记录遥控数据生成合成运动数据。Robocasa在OpenUSD(一种用于在3D世界中开发和协作的通用框架)中生成机器人任务和模拟环境。
NVIDIAOSMO是一种云原生托管服务,它允许用户在分布式计算资源(无论是在本地还是在云中)中编排和扩展复杂的机器人开发工作流程。OSMO简化了机器人训练和模拟工作流程,将部署和开发周期从数月缩短至不到一周。
为人形机器人开发人员提供先进的数据捕获工作流程
训练人形机器人的基础模型需要大量的数据。NVIDIA在SIGGRAPH计算机图形大会上展示了支持AI和Omniverse的远程操作参考工作流程,该工作流程使研究人员和AI开发人员能够从最少量的远程捕获的人类演示中生成大量合成运动和感知数据。
开发人员使用AppleVisionPro捕捉少量遥控演示。然后在NVIDIAIsaacSim中模拟这些记录,MimicGenNIM微服务从记录中生成合成数据集。ProjectGR00T人形基础模型使用真实数据和合成数据进行训练,使开发人员可以节省时间并降低成本。IsaacLab中的RobocasaNIM微服务生成经验以重新训练机器人模型,而NVIDIAOSMO则无缝地将计算作业分配给不同的资源,为开发人员节省了数周的管理任务。
通用机器人平台公司Fourier看到了使用模拟技术合成训练数据的好处。Fourier首席执行官AlexGu表示:“开发人形机器人极其复杂,需要从现实世界中费力捕捉的大量真实数据。NVIDIA的新模拟和生成式AI开发人员工具将有助于引导和加速我们的模型开发工作流程。”
扩大对NVIDIA人形机器人开发者技术的访问权限
NVIDIA提供三种计算平台来简化人形机器人的开发:
NVIDIAAI超级计算机来训练模型。
NVIDIAIsaacSim建立在Omniverse之上,机器人可以在模拟世界中学习和提高技能。
NVIDIAJetsonThor人形机器人计算机运行模型。
开发人员可以根据自己的特定需求访问和使用这些平台的全部或部分内容。通过新的NVIDIA人形机器人开发者计划,开发人员可以抢先体验新产品以及最新版本的NVIDIAIsaacSim、NVIDIAIsaacLab、JetsonThor和ProjectGR00T通用人形机器人基础模型。
1x、波士顿动力、字节跳动研究、FieldAI、Figure、Fourier、Galbot、LimXDynamics、Mentee、NeuraRobotics、RobotEra和SkildAI等多家公司是首批加入早期访问计划的公司。波士顿动力首席技术官AaronSaunders表示:“波士顿动力和NVIDIA长期以来一直密切合作,不断突破机器人技术的极限。我们非常高兴看到这项工作的成果加速了整个行业的发展,而早期访问计划是获取一流技术的绝佳方式。”
可用性
开发人员现在可以加入NVIDIA人形机器人开发者计划,以访问NVIDIAOSMO和IsaacLab,并且很快将获得NVIDIANIM微服务的访问权限。
对于那些对人形机器人发展的更广泛影响感兴趣的人,其他值得探索的领域包括人工智能伦理的进步、机器人对劳动力市场的影响以及人形机器人在医疗保健、制造业和客户服务等各个行业的整合。这些主题可以更深入地了解人形机器人快速发展的潜力和挑战。