李飞飞团队新研究 视频生成机器人训练场 告别昂贵虚实转换
李飞飞团队联合英伟达等机构提出SimFoundry系统，仅需一段真实视频即可自动生成可交互的机器人仿真环境。通过构建数字孪生和数字表亲，系统自动解析物体几何、物理属性并生成海量训练数据，实现机器人策略零样本迁移至复杂任务，大幅降低仿真搭建成本。
在具身智能领域，“Sim2Real”始终是一道经典难题。仿真环境搭建成本极其高昂，精心训练的模型一旦迁移到现实世界便容易出现“水土不服”，性能大幅折扣几乎成为常态。近日，李飞飞团队联合英伟达GEAR实验室、佐治亚理工大学等多家机构，终于推出了一项令人眼前一亮的新方案：Real2Sim。
这套系统名为“SimFoundry”。简单来说，只需输入一段真实世界的视频，它便能自动生成一个交互式的机器人仿真环境——该环境不仅支持实时交互，还可直接用于策略训练与性能评测。这与传统耗时费力的3D场景重建方法截然不同。SimFoundry的独特之处在于，它对真实世界进行了一次深度解析与重构，借助自动化技术大幅降低了仿真环境的搭建门槛。
SimFoundry的核心创新，在于构建了一套“数字孪生”与“数字表亲”的闭环机制。具体如何实现？系统首先从视频中提取信息，解析出场景中每个物体的几何结构、物理属性乃至交互功能，并据此创建高精度的“数字孪生”。更关键的是，系统能在该基础上自动调整物体的外观、形态、场景布局甚至操作任务，从而生成海量的“数字表亲”。这意味着，开发者仅需一段真实视频，就能获取近乎无限的训练数据，让机器人在仿真环境中完成从策略学习到自动评测的全流程。
实验数据也验证了这套系统的强大能力。SimFoundry在仿真环境中评测出的机器人表现与真实世界结果高度吻合，展现出卓越的预测性能。更值得注意的是，利用这些自动生成数据训练的机器人策略，竟能实现“零样本”迁移，在多步操作、双臂协作等复杂任务中依然表现稳定。
这项研究的署名阵容同样扎实，既包括英伟达GEAR实验室的核心研究员，也有李飞飞团队的成员。随着SimFoundry的开源与落地应用，具身智能机器人的开发流程有望迎来重大变革——不再过度依赖昂贵的人工采集与建模，而是依靠生成式技术，让机器人更高效地从实验室走向真实世界。
你是一名 AI 行业编辑，请围绕下面这条热点输出一份资讯解读：
热点：李飞飞团队新研究 视频生成机器人训练场 告别昂贵虚实转换要求：
1. 先用一句话解释这条热点在讲什么
2. 再总结它为什么重要
3. 说明会影响哪些 AI 产品或内容方向
4. 最后给出 3 个适合资讯站使用的标题
游乐网为非赢利性网站，所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系youleyoucom@outlook.com。
相关热点度加剪辑是百度官方出品的剪辑工具，面向口播自媒体创作者。支持视频剪辑、智能识别字幕，并与百度网盘打通，可快速导入素材。适用于泛知识类创作者制作高质量视频，覆盖从素材导入到成品输出的完整流程。
WorkoutMaster是一款基于AI的个性化锻炼计划生成工具，能根据用户目标、偏好及历史训练记录，动态输出专属方案，并实时自适应调整负重、组次等参数。支持定制目标与器械偏好，借助机器学习持续优化，随时随地即可接入使用，确保训练高效安全。
Calorielens是一款利用AI分析餐食照片的卡路里追踪应用。用户只需拍照，AI即可自动识别食物种类和分量并估算卡路里，省去手动输入步骤。应用还提供历史记录追踪功能，帮助把握热量趋势。AI估算精度可满足日常健康管理需求。
百度旗下“简单搜索”AI搜索引擎集成语音、图像、多媒体搜索及实时翻译，支持多模态交互与智能推荐。基于大模型技术，用户可通过对话式交互直接获取精准答案，适用于学习、旅行、生活、职业发展等场景，高效满足信息需求。
- 日榜
- 周榜
- 月榜
热点快看