当前位置: 首页
AI
DaPT双流框架:突破多语言RAG的杀手级技术详解

DaPT双流框架:突破多语言RAG的杀手级技术详解

热心网友 时间:2026-03-27
转载

DaPT框架通过创新的双路径并行推理机制,成功解决了多语言多跳问答中的核心挑战。它不仅构建了首个系统的多语言多跳问答评估基准,还提出了一种能有效利用LLM英文理解能力同时保留源语言语义的实用方法。

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

检索增强生成(RAG)技术在处理英文多跳问答上已取得显著进展,但在真实世界的应用中,我们常常需要处理跨语言的查询和文档。这就暴露了当前RAG系统的两大痛点:

缺乏评估基准:没有标准的多语言多跳问答数据集来系统评估模型性能。过度依赖英文理解:现有方法严重依赖LLM强大的英文语义理解能力,在跨语言场景中效果大打折扣。

针对这些问题,本文提出了DaPT(Dual-Path Framework),一个创新的多语言RAG框架,并配套构建了包含五种语言的多语言多跳问答数据集。

DaPT框架核心思想

DaPT的核心创新在于同时利用源语言和英语进行并行推理,然后融合两条路径的子问题图,形成更强大的双语推理结构。整个框架可分为三个主要阶段:

图片图片

阶段一:并行规划

输入:源语言查询(如中文)及其英文翻译过程:分别将两个版本的查询分解成子问题图(每个节点是一个单跳问题,边表示依赖关系)输出:两个独立的子问题图:源语言图(Gₗ)和英文图(Gₑₙ)

阶段二:节点融合

这是DaPT最巧妙的部分。通过以下步骤将两个子问题图融合:

识别关键节点:计算两个图中所有节点对的嵌入相似度,找到相似度最高的节点对设置阈值:只有相似度超过预设阈值(τ=0.8)的节点对才会被融合融合操作:将英文节点整合到源语言节点中,形成双语节点,并重定向所有边拓扑排序:对融合后的图进行排序,确定子问题的解决顺序

阶段三:双语检索与回答

按照拓扑排序顺序逐步解决子问题:

动态查询构建:将前一个子问题的答案与当前子问题结合,形成新的检索查询双语检索:对于双语节点,同时从源语言和英文语料库中检索答案验证与选择:使用轻量级LLM验证两个候选答案的一致性,优先选择源语言答案自纠正机制:如果验证失败,则重新生成答案

实验结果

论文在三个主流多跳问答数据集(HotpotQA、2WikiMultiHopQA、MuSiQue)上进行了全面评估,结果显示:

主要发现

现有RAG系统存在严重的语言不平衡:HippoRAG2在英文上表现优异(EM得分54.0),但在泰语等低资源语言上性能大幅下降(下降59.8%)DaPT显著提升多语言性能:相比最强基线HippoRAG2,DaPT在HotpotQA上平均提升6.8%,在更具挑战性的MuSiQue上提升15.5%

性能对比表格

注:表格展示的是各方法在所有语言上的平均EM得分

图片图片

消融研究

通过移除DaPT的不同组件,验证了各部分的必要性:

移除分解阶段:性能下降16.2%,证明子问题分解至关重要移除融合阶段:性能下降1.9%,说明节点融合虽提升有限但仍有价值简单翻译方案:性能下降3.2%,证明DaPT比简单的"翻译-检索-翻译回"策略更有效

图片图片

总结

DaPT框架通过创新的双路径并行推理机制,成功解决了多语言多跳问答中的核心挑战。它不仅构建了首个系统的多语言多跳问答评估基准,还提出了一种能有效利用LLM英文理解能力同时保留源语言语义的实用方法。

DAPT: A DUAL-PATH FRAMEWORK FOR MULTILINGUAL MULTI-HOP QUESTION ANSWERINGhttps://arxiv.org/pdf/2603.19097https://github.com/f6ster/DaPT


来源:https://www.51cto.com/article/839042.html

游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

同类文章
更多
谷歌内存论文疑被抄袭,华人学者控诉业内学术不公

谷歌内存论文疑被抄袭,华人学者控诉业内学术不公

新智元报道编辑:好困 Aeneas【新智元导读】把闪存股一夜干崩的谷歌顶会论文,出大事了。TurboQuant的核心方法,两年前就被一位华人学者做完、发完顶会、代码全部开源了。谷歌不仅没正面提及,而

时间:2026-03-28 16:58
OpenClaw漏洞威胁:智能家居被反锁与隐私泄露风险

OpenClaw漏洞威胁:智能家居被反锁与隐私泄露风险

新智元报道编辑:倾倾【新智元导读】2025年底,极客圈发生了一场数字哗变,Anthropic的遮羞布被Peter Steinberger撕了个精光。从OpenClaw开源到Claude被扒出80页「

时间:2026-03-28 16:52
华为大模型负责人离职,重大人事变动引发行业关注

华为大模型负责人离职,重大人事变动引发行业关注

智东西作者|江宇编辑|冰倩智东西3月28日报道,今日,华为诺亚方舟实验室主任、华为盘古大模型负责人王云鹤在朋友圈发文,确认离职。王云鹤于2017年以华为北京部门首位实习生身份加入,至今已接近9年。在

时间:2026-03-28 16:46
Nature重磅:AI生成论文在顶会通过率55%,单篇成本仅15美元

Nature重磅:AI生成论文在顶会通过率55%,单篇成本仅15美元

新智元报道编辑:元宇【新智元导读】刚刚,Nature盖章AI独立科研时代!全新Scaling Law显现,人类死守的学术铁王座,正发生不可逆的转移。一篇长达数十页的学术论文,在人类设定研究主题和实验

时间:2026-03-28 15:07
CMU首创无毒AutoGEO方案,破解GEO投毒产业链焦虑

CMU首创无毒AutoGEO方案,破解GEO投毒产业链焦虑

新智元报道编辑:LRST【新智元导读】ChatGPT上线广告、315曝光GEO投毒产业链,AI搜索商业化的隐忧接连浮出水面。龙虾热背后,3000元就能让AI搜索信口开河,离全面「瞎说」还有多远?来自

时间:2026-03-28 15:01
热门专题
更多
刀塔传奇破解版无限钻石下载大全 刀塔传奇破解版无限钻石下载大全
洛克王国正式正版手游下载安装大全 洛克王国正式正版手游下载安装大全
思美人手游下载专区 思美人手游下载专区
好玩的阿拉德之怒游戏下载合集 好玩的阿拉德之怒游戏下载合集
不思议迷宫手游下载合集 不思议迷宫手游下载合集
百宝袋汉化组游戏最新合集 百宝袋汉化组游戏最新合集
jsk游戏合集30款游戏大全 jsk游戏合集30款游戏大全
宾果消消消原版下载大全 宾果消消消原版下载大全
  • 日榜
  • 周榜
  • 月榜
热门教程
更多
  • 游戏攻略
  • 安卓教程
  • 苹果教程
  • 电脑教程