开源人工智能已经证明,当模型、数据和工具被共享时,开发者的创新速度能有多快。机器人领域同样拥有这样的机遇,但物理AI(physical AI)的发展进步仍然可能被昂贵且碎片化的资源所掣肘——从大型数据集和机器人基础模型,到仿真、算力和验证工具,无一不是如此。
![]()
NVIDIA与Hugging Face正在展开合作,将面向人形机器人的NVIDIA Isaac GR00T 1.7(一款开源推理型视觉-语言-动作,即VLA模型)和NVIDIA Isaac Teleop框架引入LeRobot——Hugging Face的机器人开源库;同时,面向物理AI的前沿模型NVIDIA Cosmos 3也计划很快接入。这些整合举措共同为开发者提供了一条更易获取、更标准化的端到端机器人开发路径,同时推动整个开源机器人社区的创新与协作。
![]()
"开源是一个领域将前沿研究转化为人们可以学习、适配和拓展的成果的方式,"Hugging Face联合创始人兼首席科学官Thomas Wolf表示。"随着NVIDIA Isaac GR00T 1.7和Isaac Teleop今日上线LeRobot,机器人开发者可以利用共享的模型、数据和工作流,以开放的方式训练和评估机器人。而随着NVIDIA Cosmos 3的后续加入,社区将拥有一条将前沿世界模型纳入同一协作闭环的路径。"
机器人基础模型的开放流水线
Hugging Face LeRobot 是一个开源机器人库,用于训练、运行和共享机器人数据集、模型、策略与工作流。NVIDIA与Hugging Face持续深化合作,将NVIDIA的300万机器人开发者与Hugging Face的1600万AI构建者连接起来,通过开放工作流扩大前沿物理AI工具的可及性。
![]()
将NVIDIA物理AI能力引入LeRobot,为开发者提供了一套通用方式来收集和标准化数据、训练和微调机器人基础模型、评估性能,并通过开放工作流部署模型。
此次整合包括:
- NVIDIA Isaac Teleop,一个用于机器人数据收集的开源框架,帮助开发者使用标准化、可互操作的格式,从外部设备捕获高质量的人类示范数据,然后直接在LeRobot中扩展数据集并与社区共享。
- NVIDIA Isaac GR00T 1.7,首款开源且具备商业可行性的机器人基础模型,使开发者能够更轻松地通过LeRobot工作流对模型进行后训练和部署,帮助开发者将GR00T适配到新的机器人载体和任务,并具备可基准测试的性能。
- NVIDIA Cosmos 3,一款面向物理AI的前沿世界基础模型,即将上线LeRobot。当真实世界数据有限或收集成本过高时,它将帮助开发者生成和增强机器人数据、仿真场景并支持策略开发。
![]()
这些整合建立在已接入LeRobot的更广泛NVIDIA资源之上,以支撑完整的机器人开发闭环,包括:
全球最大的开源物理 AI 数据集,下载量超过 1500 万次,包含超过 35 万条真实与仿真轨迹及 5700 万次抓取数据,帮助开发者快速启动机器人工作流。
基于 NVIDIA Isaac Sim 和 Isaac Lab 的仿真框架,帮助开发者搭建环境、生成机器人数据、测试策略并在迁移到实体机器人之前验证行为。
- LeRobot环境中心(Environment Hub)中的NVIDIA Isaac Lab-Arena,使开发者能够快速构建复杂仿真环境原型,在LeRobot EnvHub中注册,并在LeRobot生态系统内无缝使用,以训练和评估GR00T、Pi、SmolVLA等通用机器人策略。
- NVIDIA Jetson Thor与LeRobot的Reachy 2集成,支持在开源人形机器人上部署VLA模型。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.