产业 / 官方
英伟达与 Hugging Face 合作 将新模型与框架引入 LeRobot 开放机器人社区
英伟达与 Hugging Face 宣布将多款物理 AI 模型与框架整合进开源机器人库 LeRobot,覆盖数据采集、模型训练、仿真验证到真机部署的完整链路。具体包括面向人形机器人的开放推理视觉语言动作模型 Isaac GR00T 1.7、用于人类示教数据采集的开源框架 Isaac Teleop,以及即将上线的世界基础模型 Cosmos 3,可用于合成数据与场景仿真。双方还将最大规模的开放物理 AI 数据集、Isaac Sim、Isaac Lab-Arena 仿真环境以及 Jetson Thor 边缘计算模块接入 LeRobot。整体合作意在打通碎片化的机器人开发资源,降低研究与应用门槛。
英伟达与 Hugging Face 联合宣布,将 Isaac GR00T 1.7 推理视觉语言动作模型、Isaac Teleop 遥操作数据采集框架以及即将推出的 Cosmos 3 世界基础模型,陆续集成进 Hugging Face 的开源机器人库 LeRobot。三项工具覆盖了从人类示教采集、基础模型微调到合成数据生成的关键环节,目标是为机器人开发者提供标准化的端到端工作流,替代过去分散且昂贵的工具组合。
LeRobot 本身是一个面向真实机器人数据、模型、策略与训练流程的开源社区库。通过此次合作,英伟达约 300 万机器人开发者将与 Hugging Face 约 1600 万 AI 开发者直接连通,双方共享模型、数据集与评估流程,使社区能够共同训练与评测机器人策略,而不必各自从零搭建工具链。
在数据与仿真层面,英伟达把下载量超过 1500 万次的最大规模开源物理 AI 数据集同步到 LeRobot,涵盖超过 35 万条真实与仿真轨迹以及 5700 万次抓取样本。配套的 Isaac Sim 与 Isaac Lab-Arena 环境则允许开发者在 LeRobot Environment Hub 中注册自定义仿真场景,并直接用于 GR00T、Pi、SmolVLA 等通用机器人策略的训练与评估。
在落地部署方面,英伟达将 Jetson Thor 边缘计算模块与 LeRobot 支持的开源人形机器人 Reachy 2 完成对接,使视觉语言动作模型能够直接在真机上运行。这一集成将此前主要停留在云端训练阶段的模型推进到真实硬件部署阶段,让开源社区可以评估模型在物理世界中的真实表现。
Hugging Face 联合创始人兼首席科学官 Thomas Wolf 表示,开放源代码是把前沿研究转化为可学习、可复用成果的关键方式,GR00T 1.7 与 TeleOp 进入 LeRobot 意味着机器人开发者可以在开放的生态中完成训练与评估,而 Cosmos 3 的加入将进一步把前沿世界模型纳入同一协作闭环。
此次合作被视作开源机器人走向工业化协作的标志性一步。英伟达与 Hugging Face 在模型、数据、仿真与硬件层面同步打通,意味着开发者不再需要自行拼接多种商业工具,而是可以基于统一的开放工作流完成从研究到部署的全过程。
要点
- 英伟达 GR00T 1.7、Isaac Teleop 与即将推出的 Cosmos 3 三项核心模型与框架将集成进 LeRobot。
- LeRobot 现已接入超过 35 万条真实与仿真轨迹、5700 万次抓取样本的开源数据集。
- Isaac Lab-Arena 与 Isaac Sim 通过 Environment Hub 提供可注册的仿真环境,用于通用策略训练。
- Jetson Thor 与 Reachy 2 完成对接,支持视觉语言动作模型在开源人形机器人上直接部署。
- 英伟达与 Hugging Face 合计可触达约 300 万机器人开发者与 1600 万 AI 开发者群体。
原始标题:NVIDIA and Hugging Face Bring New Models and Frameworks to LeRobot for the Open Robotics Community
本文由 DataHub 基于公开来源整理,用于信息发现与摘要阅读;具体事实、数据和后续更新以原始来源为准。