大模型可解释性并非只有唯一机制
长久以来,机制可解释性(mechanistic interpretability)领域存在一个几乎未被明确提及、却被视为不证自明的前提:模型针对同一任务的性能或表现,其背后对应着一条唯一的、或近乎唯一的内在「电路」(circuit)。该领域的研究者之所以致力于「电路发现」(circuit disco
长久以来,机制可解释性(mechanistic interpretability)领域存在一个几乎未被明确提及、却被视为不证自明的前提:模型针对同一任务的性能或表现,其背后对应着一条唯一的、或近乎唯一的内在「电路」(circuit)。该领域的研究者之所以致力于「电路发现」(circuit discovery),正是为了将这些「特定的」电路精准识别出来。
然而,一篇被 ICML 2026 收录的新论文给出了一个令人不太舒服的结论:「唯一电路」或许从一开始就不存在。同一个任务,可以由大量结构上几乎完全不重合、却同样具备高任务能力、稀疏且完备的电路独立完成。论文将这个被长期默认的前提命名为「功能各向异性假说」(Functional Anisotropy Hypothesis),并分别从实验与理论两条路径,系统性地将其推翻。
这个假设被默认了相当长时间,却几乎从未被明确阐述。
近几年来,电路与丛发现(Circuit and Sheaf Discovery,简称CSD)已成为机制可解释性领域最热门的研究方向之一。其目标非常直接:打开大模型这个黑箱,探究当模型表现出某种能力时,内部具体是哪些注意力头、MLP,以及它们之间的连接(作为残差流的信息传递通道)在真正发挥作用。
不过,这里需要区分两个相关却不同的概念。电路(circuit)指的是在干预下因果相关的计算子图;而DiscoGP提出的丛(sheaf),标准更加严格:它不仅要因果相关,还必须在独立运行——即被剪枝的边只能传递全部置零的激活值——时,独自支撑起任务表现。
你是一名 AI 行业编辑,请围绕下面这条热点输出一份资讯解读:
热点:大模型可解释性并非只有唯一机制要求:
1. 先用一句话解释这条热点在讲什么
2. 再总结它为什么重要
3. 说明会影响哪些 AI 产品或内容方向
4. 最后给出 3 个适合资讯站使用的标题
游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。
相关热点Daetama是面向数据科学面试和SQL能力提升的练习平台,已收录超100个覆盖基础到进阶的SQL题目,求职板块与课程模块在开发中,团队保持每周更新节奏,提供系统性刷题与模拟面试场景。
SpeakMulti是一款AI驱动的配音平台,可将YouTube视频翻译成多种语言,保留原始说话者的音色和语调,降低本地化成本。用户提交视频并选择目标语言后,AI自动完成配音,并由专家团队审核,确保准确自然。
需求人群 如果你经常需要从图片中提取文字——例如整理截图内容、翻译图片里的外语文本、识别带有水印的图片信息——那么 Umi-OCR 无疑是一款相当实用的工具。它完全在本地运行,无需联网,对隐私保护极为友好。 产品特色 这款工具的核心亮点都集中在实用性上。截屏识别操作非常顺手,按下快捷键即可框选区域,
艺术创作与人工智能的融合,正在开启一个全新的创作时代。moonlightai 正是这样一款AI绘画工具,能够帮助用户通过人工智能快速生成不同风格的绘画作品——无论你想复刻文艺复兴时期的古典优雅,还是为画作注入梵高般炽热的笔触,甚至从艾沃佐夫斯基的海浪星空中汲取灵感,它都能轻松实现。 需求人群 简单来
- 日榜
- 周榜
- 月榜
热点快看
