面包屑图标 当前位置: 首页
AI资讯
热点详情

天工AI智源大会发布Matrix-Game 3.5重新定义世界模型

AI热点日报
AI热点日报时间:2026-06-29
热点解读

智源大会上,昆仑万维公布矩阵游戏3 5技术突破,提出状态与动作联合训练世界模型框架,采用旋转位置编码机制与空间块记忆检索,实现50亿参数模型720P实时生成,并从游戏场景向真实场景扩展,标志世界模型在真实应用的新突破。

# 世界模型深度技术教程:从Matrix-Game看长时序记忆与实时交互

在2025年6月12日至13日举办的第八届智源大会上,世界模型是全场最受瞩目的技术议题之一。汇聚了具身智能、机器人控制、游戏引擎、物理AI基础设施等领域的顶尖研究者,共同交流世界模型的技术路线与发展方向。其中,昆仑万维旗下Skywork首席科学家刘扬以《Matrix-Game:长时序记忆下的实时流式交互式世界模型》为题,深入讲解了Matrix-Game的研发历程与最新突破,并首次公开了Matrix-Game 3.5的核心技术细节。本教程将基于大会内容,为你系统拆解世界模型的定义、技术演进、数据构建与关键挑战。

一、重新定义世界模型:从“预测下一帧”到“状态-动作联合生成”

当前,全球世界模型赛道呈现出技术路线快速分化的格局。尽管路径各异,但一个共识正在浮现:世界模型已从纯学术命题,演变为机器人、仿真、游戏与通用AI底层能力的竞争核心。在国内,昆仑万维的Matrix-Game是该领域起步最早、系统化程度最高的技术力量之一。

从技术落地上看,全球主流技术路线已逐渐清晰:先进行大规模双向DiT预训练,再通过Self-Forcing或Causal Forcing蒸馏为因果模型,配合KVCache实现流式推理,最终达到25FPS的实时交互水平,辅以记忆注入机制解决长时程一致性问题。

Matrix-Game 2.0正是这一技术范式中首个开源的实现方案,而Matrix-Game 3.0则首次系统性地将记忆问题纳入开源解决方案。目前,Skywork的Matrix团队正全力推进从3.0到3.5的升级,核心目标在于攻克长时序生成中的记忆瓶颈,并实现5B参数模型在720P分辨率下的实时生成能力。

基于长期研究,刘扬指出,“世界模型”一词在业内的定义混乱程度远超普遍认知——视频生成、3D表征、交互式模拟器等不同方向的研究者所指并非同一对象。

1.1 刘扬提出的世界模型理解框架

他在演讲中提出了自己的理解框架,包含三个核心层次:

  • 理解当下状态:这超越纯视觉信息。一个真正的世界模型需要理解物体级别的物理属性——墙是否可穿越、水的温度等。纯视觉信号天然无法覆盖这些信息。
  • 预测下一个状态:在充分理解当前状态的基础上,模型需对世界的后续演化做出推断。
  • 将预测结果渲染呈现:使开发者和用户能够观测“下一帧”。

1.2 关键突破:状态与动作的联合训练

然而,团队的思考并未停留于此。Matrix-Game的实际训练揭示了一个更关键的结论:状态的预测与动作的生成应当联合训练,而非分而治之。

当我们把下一帧状态的生成和动作的生成进行联合训练,发现无论对状态理解还是对状态和动作的预测,都会带来显著的提升。

这意味着他眼中更完整的世界模型,是对状态与动作的联合理解与联合生成——而非单向的观测世界、预测下一帧。根据具体应用场景,模型可以侧重输出状态(用于交互模拟器)或侧重输出动作(用于机器人控制)。这一统一框架,是Skywork团队对世界模型认知的核心升级。

热点追踪提示词
你是一名 AI 行业编辑,请围绕下面这条热点输出一份资讯解读:
热点:天工AI智源大会发布Matrix-Game 3.5重新定义世界模型要求:
1. 先用一句话解释这条热点在讲什么
2. 再总结它为什么重要
3. 说明会影响哪些 AI 产品或内容方向
4. 最后给出 3 个适合资讯站使用的标题
来源:https://www.bestblogs.dev/article/5ca09d0e?utm_source=rss&utm_medium=feed&utm_campaign=resources&entry=rss_article_item
新技术突破

游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

相关热点
AI热点2026-07-02 14:27
Huddlenow Insights 谷歌Meet商业企业视频会议服务全方位深度解析

GoogleMeet是面向商业与企业的视频会议服务,支持屏幕共享、实时字幕及与GoogleWorkspace集成,适用于项目讨论、网络研讨和线上教学等多种会议场景,具备扎实的安全与隐私保护。

AI热点2026-07-02 14:27
一款实用的YouTube视频高亮标注Chrome浏览器扩展插件

Lanter是Chrome扩展,利用AI将YouTube视频语音转为带时间戳的文字笔记,支持一键抓取高光、自动标点排版、书签管理、全局搜索及每日邮件汇总,方便高效回顾视频关键内容。

AI热点2026-07-02 14:27
WhisperNotes智能音频笔记应用

一款AI驱动的Chrome扩展音频笔记应用,支持录音自动转文字、标签分类与全文搜索,将语音转化为可检索的数字资产,显著提升信息定位与管理效率。

AI热点2026-07-02 14:27
Sharpen AI:Chrome扩展秒转Google Meet为笔记邮件任务

专为GoogleMeet设计的AIChrome扩展,实时转录会议内容,自动生成摘要并提取行动项与决策,无缝同步至Google文档、任务及Gmail,省去手动整理时间,显著提升协作效率。

延伸阅读