英伟达Isaac远程操作及GR00T 1.7视觉语言动作模型正式接入LeRobot机器人学习库

2026年7月7日，英伟达与Hugging Face联合发布重磅消息——官方博客正式宣布：NVIDIA Isaac Teleop远程操控框架与GR00T 1.7开源视觉语言动作（VLA）人形机器人基础模型，现已全面适配Hugging Face的LeRobot开源机器人开发库。简而言之，此次深度整合将英伟达的Isaac机器人仿真、远程示教、通用VLA大模型能力，与LeRobot的标准化数据集、模型训练及开源分发生态无缝衔接。一边是英伟达的300万机器人开发者，另一边是Hugging Face超过1600万的AI开发者，两大群体终于能在统一平台上协同工作。具身智能的研发门槛被显著降低，一套涵盖远程数据采集、仿真训练、模型微调及真机部署的全链路标准化开源工具链正式成型。 本次更新的核心包含两个组件：Isaac Teleop标准化示教采集工具，以及GR00T 1.7商用开源VLA基础模型。两者原生兼容LeRobot数据格式，开发者无需额外适配即可从人类示范数据采集直接推进至机器人自主策略落地。后续英伟达还将把Cosmos 3物理世界生成模型接入LeRobot生态，补齐仿真数据生成的关键拼图。

两大核心技术：Isaac Teleop远程示教框架与GR00T 1.7 VLA模型

1. Isaac Teleop：首个开放商用机器人远程示教采集系统

NVIDIA Isaac Teleop是英伟达为物理AI打造的标准化远程操控工具，也是业内首个支持开源商用落地的机器人示教框架。其核心任务极为明确：快速生成高质量的人类示范数据集，并完美适配LeRobot的数据标准格式（Parquet结构化机器人轨迹文件）。 **多终端沉浸式操控采集** 兼容XR头显、动作捕捉手套、全身追踪设备——操作者能以第一人称视角远程控制仿真机器人或实体机械臂、人形机器人，实现亚毫米级的动作捕捉。关节运动、手部精细抓取、双目视觉画面、自然语言指令等多模态信息均可被精准记录，同步输出为LeRobot可直接读取的标准化数据集。格式转换、数据清洗等高成本开发环节被彻底省去。 **仿真与真机双场景数据互通** 无缝对接NVIDIA Isaac Sim和Isaac Lab仿真环境。开发者可先在虚拟场景中完成示教采集，再迁移至真实机器人上复现动作。采集到的示范数据可直接导入LeRobot，用于GR00T模型微调、策略复现及性能评测。一条从仿真到现实（Sim-to-Real）的闭环开发管线就此搭建完成。 **全流程集成LeRobot工作流** LeRobot内置了Teleop专用启动脚本。仅需一行命令即可启动远程操控采集、自动标注任务文本、可视化回放动作轨迹。搭配Rerun可视化工具，可实时查看相机画面、关节动作、模型预测输出，显著简化示教逻辑和数据集质量的调试过程。

2. GR00T 1.7：面向人形机器人的商用开源VLA基础模型

GR00T 1.7（N1.7）是英伟达迭代后的通用人形机器人视觉-语言-动作基础模型。采用3B参数的轻量化架构，结合Cosmos-Reason2-2B视觉语言主干与Diffusion Transformer动作解码器的双层设计，既能将长任务拆解清晰，又能生成高精度连续动作。最为关键的是——开放商用授权，企业可直接将其应用于工业场景。 **核心技术升级亮点** - **长时序多步骤任务推理**：新增任务/子任务分层推理能力，有效解决了传统VLA模型在长流程操作中逻辑易断裂的问题。针对“取料-组装-收纳”等复杂工业流程，模型可自主拆解，无需人工设计分步逻辑。 - **手指级精细灵巧控制**：支持五指独立驱动，可胜任小零件装配、试剂操作、精密分拣等接触密集型任务，突破了传统机械臂粗粒度抓取的能力边界。 - **EgoScale人类视觉预训练底座**：基于超过20800小时人类第一视角视频完成预训练，建立了机器人灵巧性的数据缩放定律——人类示范数据越多，机器人操作精度与泛化能力线性提升。 - **原生适配LeRobot数据标准**：完全兼容LeRobot v2数据集格式。Teleop采集的示教数据无需二次转换，可直接送入GR00T 1.7进行微调训练。支持Unitree、Agibot等人形机器人及多自由度机械臂的跨硬件迁移。 - **轻量化端侧部署优化**：针对Jetson嵌入式平台进行了TensorRT加速优化，可直接部署于小型机器人的机载算力设备，无需依赖云端大型GPU集群。

Isaac GR00T LeRobot一体化完整开发流程

借助本次生态打通，开发者能够构建一条标准化、可复现的机器人开发流水线。完整链路分为四大环节： **数据采集：Isaac Teleop远程示教生成数据集** 通过VR/动作捕捉设备操控机器人，采集视觉图像、语言指令、关节动作序列。工具自动输出LeRobot标准数据集，支持批量标注、数据过滤、异常轨迹剔除。 **模型微调：LeRobot加载GR00T 1.7做任务定制** 调用LeRobot内置训练接口，基于Teleop采集的自有示范数据微调通用VLA模型。支持自定义动作预测窗口、语言提示模板、多相机输入配置，内置评测脚本可快速验证策略效果。 **仿真验证：Isaac Sim闭环测试机器人策略** 将微调完成的GR00T策略导入Isaac仿真环境，批量自动化执行上百组任务场景。通过LeRobot评测工具量化抓取成功率、任务完成时长、动作平滑度，快速迭代优化模型。 **真机部署：Jetson硬件端侧运行自主策略** 导出优化后的GR00T推理模型，部署至实体人形机器人或机械臂。复用Teleop采集时的硬件标定参数，大幅降低仿真到真机的迁移误差。

生态融合带来的行业价值

1. 大幅降低具身智能研发门槛

以往机器人开发者需自行搭建远程示教工具、研发数据格式、适配VLA模型、对接仿真平台，开发周期常达数月之久。如今整套工具链全部开源打通，个人研究者及中小企业无需投入大量底层开发，只要掌握基础Python技能，即可从数据采集一路推进至落地部署。

2. 打通AI大模型与人形机器人两大开发者群体

Hugging Face深耕通用视觉、语言大模型社区，英伟达则专注于机器人仿真、硬件及实体落地。两者结合后，NLP、多模态AI开发者可快速切入机器人领域，机器人工程师也能便捷运用前沿的开源VLA技术，跨领域技术融合显著加速。

3. 兼顾学术研究与工业商用落地

GR00T 1.7提供完整商用授权，Teleop与LeRobot均为开源可商用框架。高校实验室可免费开展机器人科研，制造、物流、医疗企业也能直接搭建产线机器人的自主操作方案，覆盖原型验证、小规模试点、规模化量产的全阶段需求。

4. 统一全球机器人数据与模型标准

LeRobot作为行业通用机器人开源库，统一了全球机器人数据集的存储与模型分发规范。英伟达此次将核心工具原生适配该标准，推动机器人领域摆脱碎片化的私有数据格式。开发者共享数据集和预训练策略变得更加便捷，行业技术迭代自然提速。

后续生态规划：Cosmos 3物理AI模型接入

英伟达在博客中同步公布了后续路线：下一步将把NVIDIA Cosmos 3物理世界基础模型集成到LeRobot生态中，补全当前开发流程中“真实数据不足”的短板。当真实场景采集成本过高或危险场景无法人工示教时，Cosmos 3可基于少量人类示范数据，批量生成海量物理仿真场景及合成机器人动作轨迹，进一步扩充训练数据集，提升GR00T模型在未知环境下的泛化能力。最终形成“示教真实数据 + AI合成数据”的双数据源训练体系。

总结

NVIDIA Isaac Teleop与GR00T 1.7 VLA模型接入LeRobot，是物理AI与开源大模型生态融合的里程碑事件。这套一体化工具链直接解决了人形机器人开发中的四个核心痛点——数据采集难、模型适配繁琐、仿真真机割裂、商用授权受限。它为全球开发者提供了一套完整、标准化、可商用的开源机器人研发底座。 随着Cosmos 3后续接入，英伟达与Hugging Face将构建“远程示教采集（Teleop）— 通用VLA大脑（GR00T 1.7）— 物理仿真数据生成（Cosmos 3）— 开源训练分发（LeRobot）”的完整闭环。人形机器人从实验室走向工业、服务、仓储等真实场景的落地速度将显著加快。具身智能的规模化开源创新时代，正徐徐拉开帷幕。 资源： GrootN 1.7模型：http://huggingface.co/nvidia/GR00T-N1.7 Lerobot文档：https://huggingface.co/docs/lerobot/groot 适配LeRobot与SO-101的Isaac远程示教操作文档：https://nvidia.github.io/IsaacTeleop/main/getting_started/lerobot/index.html