北京智源Emu3.5开源:多模态能力升级,性能超Gemini 2.5 Flash

北京智源人工智能研究院再次掀起行业变革浪潮,其最新发布的开源原生多模态世界模型——悟界·Emu3.5,正在重塑AI对物理世界的认知能力。这款被业界称为"世界模型基座"的突破性成果,首次实现了文本、图像、视频三大模态的深度融合,在动态场景构建、长时序逻辑推理等核心领域展现出颠覆性创新。
与传统文生视频模型不同,Emu3.5突破了"表面相似性"的局限,构建起对物理规律的深层认知。当用户要求消除手写痕迹时,模型不仅能精准识别笔迹区域,更能理解纸张纹理的连续性,确保修改后的区域与整体保持光学一致性。这种能力源自其独特的训练范式——通过分析超过10万亿Token的多模态数据,其中包含海量互联网视频的连续帧序列,使模型天然掌握时空连续性法则。
在动态世界模拟方面,Emu3.5创造了前所未有的交互体验。用户以第一人称视角探索虚拟环境时,模型能实时推演空间变化:当镜头转向房间角落,系统会自动补充被遮挡的家具轮廓;在火星卡丁车场景中,车轮扬起的红色尘土会随着地形起伏呈现不同的扩散轨迹。这种空间一致性能力,使虚拟世界首次具备了物理引擎级别的真实感。
具身智能操作是该模型的另一大突破。在"整理桌面"任务中,Emu3.5展现出类人的规划能力:先识别所有物品的3D坐标,再根据线缆长度规划最优捆绑路径,最后通过理线槽实现隐藏式收纳。整个过程涉及27步连续操作,每步都严格遵循物理约束条件。更令人惊叹的是,当用户中途修改指令要求"改用蓝色扎带"时,模型能立即调整所有后续相关操作。
视觉创作领域,Emu3.5重新定义了"所见即所得"的标准。将狐狸草图转化为3D手办的任务中,模型在12个连续创作阶段始终保持特征一致性:从基础建模到3D打印支撑结构生成,再到上色时的光影过渡,每个环节都严格遵循初始设定的狐狸神态。这种长程创作能力,使其能生成包含38个步骤的烹饪教学指南,每个操作画面都附带精准的物理参数说明。
技术实现层面,研发团队创造了多项创新。340亿参数的Decoder-only架构将所有任务统一为状态预测问题,通过多模态分词器将文本、图像转化为离散Token序列。特别设计的IBQ视觉分词器拥有1.3万词汇表,配合扩散解码器可实现2K分辨率图像重建。为解决生成速度难题,离散扩散适配技术使图像推理效率提升19倍,同时保持97.3%的原始质量。
在权威基准测试中,Emu3.5展现出压倒性优势。文本渲染任务准确率达92.7%,超越Gemini-2.5-Flash-Image模型4.2个百分点;多模态交叉生成任务的逻辑连贯性评分创下89.1的新高。这些数据印证了其作为世界模型基座的潜力——既能生成电影级视觉叙事,也可为机器人提供空间推理引擎。
这款划时代模型的开源决定,正在引发全球开发者生态的连锁反应。研究团队同步释放了预训练框架、微调工具链和强化学习系统,使中小团队也能基于Emu3.5开发垂直领域应用。目前已有教育机构利用其生成物理实验模拟器,医疗领域则尝试构建手术训练的虚拟环境。
体验通道现已开启,科研内测版申请链接:https://jwolpxeehx.feishu.cn/share/base/form/shrcn0dzwo2ZkN2Q0dveDBSfR3b++ 项目技术文档与演示案例详见官网:https://zh.emu.world/pages/web/landingPage
免责声明
游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。
同类文章
一加Ace 6评测:7800mAh电池配165Hz屏的旗舰体验
10月23日消息,一加正式宣布将于10月27日发布一加 Ace 6新机。一加中国区总裁李杰将其称为“史上最强Ace”,并强调这款产品
奥特曼揭秘GPT-6:正式改名GPT-6.7,实现重大技术跨越
OpenAI首席执行官山姆・奥特曼近日在社交平台X上宣布,公司计划将下一代语言模型GPT-6更名为GPT-6-7。这一突如其来的命名调整引发业界关注,但最新尚未就具体原因作出说明。据科技媒体披露,奥
谷歌AI转型财报解读:传统业务与AI融合的中国经验
谷歌母公司Alphabet近日公布了最新季度财报,数据表现全面超出市场预期,引发资本市场热烈反应。财报显示,公司当季总营收达1023 46亿美元,同比增长16%,较华尔街预期高出逾20亿美元。摊薄每
2025日本移动出行展:日系车企蓝图,揭秘未来出行新趋势
在近期举办的日本移动出行展上,各大车企纷纷亮出创新产品与技术,勾勒出未来出行的多元图景。这场展会不仅展示了传统汽车领域的突破,更将视野拓展至海洋、天空乃至太空,展现了日本车企对未来移动出行的全面构想
00后天才学生回归!Sora核心贡献者与OpenAI团队重塑超强AI
OpenAI内部一支由年轻工程师组成的特种团队,正悄然推进一项可能改变人工智能发展轨迹的重大项目。这支三人小组的核心成员Will Depue,这位年仅22岁便在AI领域声名鹊起的工程师,正带领团队向
热门推荐
热门教程
更多- 游戏攻略
- 安卓教程
- 苹果教程
- 电脑教程
 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                 
												
                                                








 
								 
								 
								 
								 
								 
								 
								 
								 
								