面包屑图标 当前位置: 首页
AI资讯
热点详情

智谱发布实时多模态新模型惊艳行业

AI热点日报
AI热点日报时间:2026-06-29
热点解读

2025年伊始,智谱AI旗下GLM系列模型迎来重大升级。核心亮点在于:模型性能显著提升,同时开发者友好度持续提高。此次更新中最引人注目的,当属GLM-Realtime——业界首个端到端多模态大模型。经过深度体验,可以确信地说,AI大模型已迈入全新阶段。 行业首个端到端多模态模型:亲测体验 据官方介绍

2025年伊始,智谱AI旗下GLM系列模型迎来重大升级。核心亮点在于:模型性能显著提升,同时开发者友好度持续提高。此次更新中最引人注目的,当属GLM-Realtime——业界首个端到端多模态大模型。经过深度体验,可以确信地说,AI大模型已迈入全新阶段。

智谱发布新模型,

行业首个端到端多模态模型:亲测体验

据官方介绍,GLM-Realtime集成了多项核心能力:近乎实时的视频理解、端到端的语音交互、独特的清唱功能、长达2分钟的记忆存储,以及Function Call调用能力。

视频理解能力相当于为AI赋予了视觉感知,极大地丰富了输入信息的维度;端到端的语音交互支持随时打断,使交流更贴近人类自然对话;清唱功能在当前AI领域独一无二;记忆能力让AI能够处理更长上下文信息;Function Call则通过外部知识库调用,进一步扩展了模型的知识边界。

目前,GLM-Realtime API已在智谱AI开放平台正式上线,而且现阶段完全免费开放调用。对于广大个人开发者而言,这无疑是实实在在的利好。

那么,这些能力究竟如何落地?让我们通过几个实际应用场景一探究竟。

不会唱歌的AI,怎能称得上优秀聊天机器人

首先测试GLM-Realtime的语音对话能力。在智谱AI开放平台注册账号后,进入控制台创建API key,即可开始调用。下面是客户端的鉴权代码示例:

// 客户端鉴权代码示例

服务端鉴权代码如下:

// 服务端鉴权代码示例

随后是接口调用实现,通过WebSocket建立双向通信:

// WebSocket通信代码示例

设计一个简洁的语音对话界面,支持启动和停止对话。除了常规聊天功能,这里还隐藏着一个彩蛋——GLM-Realtime已经具备歌唱能力

// 语音对话界面代码示例

程序打包发布后,实际运行效果令人惊叹——不得不说,AI的演唱水平远超大多数人。

AI带你看见更广阔的世界

接下来,我们来体验GLM-Realtime的视频理解能力。客户端和服务端的鉴权代码与前述相同,此处不再赘述。需要额外设计一个视频交互界面:

// 视频交互界面代码示例(效果来自智谱清言,已支持视频通话)

以Android端应用为例,实现代码示例如下:

// Android端代码示例

服务端接收视频与音频数据,并返回音频响应:

// 服务端处理代码示例

执行上述代码后,检查服务端和客户端的日志输出,确保通信正常。完成调试并打包发布,最终效果令人惊艳。

(效果来自智谱清言,已支持视频通话)

当AI拥有了长期记忆

当GLM-Realtime强大的视频理解能力与智能眼镜相融合,将激发出怎样的创新应用?智谱AI与INMO影目携手进行了一次有趣的探索。佩戴智能眼镜,轻按开关进入对话模式,此时GLM-Realtime所见即你所见。来看看实际测试效果:

更令人惊叹的是,在长期记忆能力的加持下,用户可以对2分钟内看到的画面进行提问。春节临近,让AI帮忙撰写对联——对AI而言自然是轻而易举。整个互动过程妙趣横生,如同与一位博学多识的朋友吟诗作对。

从AI发展趋势来看,未来将实现记忆的分层管理,涵盖短期、中期和长期记忆。记忆系统将从"单一存储"模式向"分布式认知架构"演进,核心转向"智能筛选与整合",在"记忆"与"遗忘"之间寻求合理平衡。AI正日益贴近人类思维特性。

AI硬件即将迎来爆发

在情感陪伴场景中,GLM-Realtime的视频理解与语音交互能力拥有广阔的应用前景。想象一下,让智能眼镜与智能机器人进行一场角色扮演游戏——AI能否识别出对手也是AI呢?

AI与物理世界的深度融合,将催生具身智能——这也是行业一致看好的发展方向。具身智能能够更有效地理解并操控现实世界,不仅是技术层面的飞跃,更是人机交互方式的革命性变革。AI将不再局限于屏幕前的静态交互,而是通过机器人或其他智能设备与人类展开更自然、更深入的互动。这一方向的发展,将为教育、医疗、服务等行业创造全新的机遇。

大模型已迈入Next Level

智谱GLM系列模型的此次升级带来了诸多惊喜,特别是GLM-Realtime端到端多模态能力,将AI的应用边界进一步拓展。从语音对话到视频理解,从实时交互到长期记忆——每一项能力都在为开发者和用户创造前所未有的体验。值得持续关注。

热点追踪提示词
你是一名 AI 行业编辑,请围绕下面这条热点输出一份资讯解读:
热点:智谱发布实时多模态新模型惊艳行业要求:
1. 先用一句话解释这条热点在讲什么
2. 再总结它为什么重要
3. 说明会影响哪些 AI 产品或内容方向
4. 最后给出 3 个适合资讯站使用的标题
来源:https://www.53ai.com/news/MultimodalLargeModel/2025012228470.html
ai 人工智能

游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

相关热点
AI热点2026-07-06 20:47
百度官方出品度加剪辑口播自媒体必备工具

度加剪辑是百度官方出品的剪辑工具,面向口播自媒体创作者。支持视频剪辑、智能识别字幕,并与百度网盘打通,可快速导入素材。适用于泛知识类创作者制作高质量视频,覆盖从素材导入到成品输出的完整流程。

AI热点2026-07-06 20:46
基于AI的智能在线个性化锻炼计划生成工具 Workout Master

WorkoutMaster是一款基于AI的个性化锻炼计划生成工具,能根据用户目标、偏好及历史训练记录,动态输出专属方案,并实时自适应调整负重、组次等参数。支持定制目标与器械偏好,借助机器学习持续优化,随时随地即可接入使用,确保训练高效安全。

AI热点2026-07-06 20:46
Calorielens AI智能实时拍照分析餐点照片卡路里追踪应用

Calorielens是一款利用AI分析餐食照片的卡路里追踪应用。用户只需拍照,AI即可自动识别食物种类和分量并估算卡路里,省去手动输入步骤。应用还提供历史记录追踪功能,帮助把握热量趋势。AI估算精度可满足日常健康管理需求。

AI热点2026-07-06 20:46
百度旗下首个AI互动式搜索APP简单搜索

百度旗下“简单搜索”AI搜索引擎集成语音、图像、多媒体搜索及实时翻译,支持多模态交互与智能推荐。基于大模型技术,用户可通过对话式交互直接获取精准答案,适用于学习、旅行、生活、职业发展等场景,高效满足信息需求。

延伸阅读