小米推出开箱即用机器人基座模型Xiaomi-Robotics-1基于10万小时数据训练
近日,小米发布具身基座模型Xiaomi-Robotics-1,基于超过10万小时真实数据预训练,并经过跨本体后训练,实现开箱即用。在多项关键基准测试中表现极为卓越:RoboCasa365成功率57 4%,RoboDojo平均分20 07刷新了纪录,VLABench成功率59 1%,RoboCasa成功率74 5%,成绩处于行业领先水平。
7月16日上午,小米技术团队正式发布了其具身基座模型——Xiaomi-Robotics-1。该模型的核心亮点在于,它基于10万小时真实世界操作数据进行预训练,再通过跨本体后训练,最终实现了“开箱即用”的效果。简而言之,用户拿到模型后无需从头调整参数,即可直接在真实环境中执行操作任务。

项目主页地址:https://robotics.xiaomi.com/xiaomi-robotics-1.html
首先剖析预训练阶段。这10万小时的轨迹数据,是通过一个名为Universal Manipulation Interface(UMI)的数据采集设备获取的。覆盖了家庭、商业空间、工业场景、办公室、户外……各类常见场景,并记录了海量的物体交互与操作动作。数据量如此庞大,如何完成标注?团队开发了一套自动化标注流程:将长轨迹切分为固定长度的片段,再利用视觉语言模型(VLM)描述每个片段中夹爪的状态变化以及交互物体的状态变化。这样一来,模型能够根据当前的视觉观察和语言条件,生成推动场景状态变化的动作。整套标注流程大约两周即可完成10万小时的数据处理,效率非常出色。
训练框架分为两个阶段:预训练+后训练。预训练的目标十分清晰——让模型掌握通用的动作生成能力。给定当前视觉画面和一段语言描述,模型需要预测出一系列动作,使场景从当前状态转化至目标状态。这个过程类似于对照菜谱烹饪:看到现状(一堆食材),理解指令(“把土豆切成块”),然后生成手的动作序列,直至任务完成。
后训练阶段需要解决两个对齐问题:
本体对齐:将预训练阶段从UMI数据中学到的动作生成能力,迁移到真实机器人本体上。简单来说,在虚拟环境中模拟完成后,需要让真实机器人同样能够执行。
指令对齐:把“根据状态变化描述生成动作”的能力,转换为“根据人类自然语言指令执行任务”的能力。例如当用户说“把桌上的杯子拿过来”,模型需要知道对应的动作序列是什么。
为此,团队构建了约10000小时跨本体后训练数据,其中包括7200+小时移动操作机器人和双臂机器人数据、1000+小时人工标注UMI数据,以及Bridge V2、RT-1、DROID等公开数据集。数据规模庞大,覆盖范围广泛。
完成后续训练后,Xiaomi-Robotics-1即可在真实环境中根据自然语言指令直接执行多种移动操作任务。若遇到特别复杂、需要灵巧操作的任务,模型也能通过少量下游真实机器人数据进行快速微调,无需从头学习。这种“预训练通用基座,再以少量数据适配任务”的策略,能显著降低新任务的开发与训练成本。
效果如何?几个基准测试的数据很能说明问题:
在RoboCasa365基准测试中,平均成功率为57.4%;在Composite-Unseen任务划分上,模型展现出强大的任务组合泛化能力。
在RoboDojo仿真评测中,Xiaomi-Robotics-1以20.07的平均得分和13.93%的平均成功率登顶排行榜,大幅超越了此前行业最优方法保持的纪录(13.07分/8.80%成功率)。
在VLABench评测中,该模型同样取得了最优表现(SoTA),平均成功率达到59.1%,平均进度得分70.3%。
在RoboCasa基准测试中,平均成功率高达74.5%,超越了RLDX-1、Cosmos Policy、GR00T N1.6、Pi-0.5、Pi-0-FAST等同类方法。
你是一名 AI 行业编辑,请围绕下面这条热点输出一份资讯解读:
热点:小米推出开箱即用机器人基座模型Xiaomi-Robotics-1基于10万小时数据训练要求:
1. 先用一句话解释这条热点在讲什么
2. 再总结它为什么重要
3. 说明会影响哪些 AI 产品或内容方向
4. 最后给出 3 个适合资讯站使用的标题
游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。
相关热点国际足联于6月17日宣布,中国裁判员马宁将担任美加墨世界杯E组第二轮厄瓜多尔对阵库拉索比赛的主裁判,助理裁判为周飞。比赛将于6月20日在堪萨斯城举行。此次任命是中国裁判再次亮相世界杯执法舞台的重要标志,体现了国际足联对其专业能力的认可,对于提升中国足球裁判的国际形象和水平具有积极意义。
SpaceX公司的货运“龙”飞船于近日成功完成国际空间站补给任务并返回地球,在加州附近海域溅落。此次任务带回了大量极具科研价值的物资,包括在太空中生物打印的人体组织样本、关乎深空探索的低温燃料储存技术数据,以及用于癌症治疗研究的DNA仿生材料。同时,用于监测宇航员健康的成像仪器、空气净化系统等实用设
我国科研机构与钢铁企业联合攻关,成功研发出国产“极地钢”。该材料攻克了钢材在极寒环境下易变脆的核心难题,通过在钢材中添加特殊元素并优化工艺,使其能在零下60摄氏度的低温中保持韧性。同时,新材料还具备优异的抗冰层冲击能力,且实现了更薄更轻。目前该产品已启动认证流程,并有型号率先获得中国船级社认证,标志
在近期举办的年度影像节上,美图公司发布了Picchi、Artflo等四款AI新品,并对站酷、美图设计室等四款产品进行了升级,全面覆盖多元创作场景。公司战略核心从提供“AI工作流”功能转向直接“交付成果”,并同步发布了基于MoE架构的美图奇想大模型V6以提供技术支撑。数据显示,该模型已成为驱动其产品A
- 日榜
- 周榜
- 月榜
热点快看
