DaPT双流框架:突破多语言RAG的杀手级技术详解
DaPT框架通过创新的双路径并行推理机制,成功解决了多语言多跳问答中的核心挑战。它不仅构建了首个系统的多语言多跳问答评估基准,还提出了一种能有效利用LLM英文理解能力同时保留源语言语义的实用方法。
免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈
检索增强生成(RAG)技术在处理英文多跳问答上已取得显著进展,但在真实世界的应用中,我们常常需要处理跨语言的查询和文档。这就暴露了当前RAG系统的两大痛点:
缺乏评估基准:没有标准的多语言多跳问答数据集来系统评估模型性能。过度依赖英文理解:现有方法严重依赖LLM强大的英文语义理解能力,在跨语言场景中效果大打折扣。针对这些问题,本文提出了DaPT(Dual-Path Framework),一个创新的多语言RAG框架,并配套构建了包含五种语言的多语言多跳问答数据集。
DaPT框架核心思想
DaPT的核心创新在于同时利用源语言和英语进行并行推理,然后融合两条路径的子问题图,形成更强大的双语推理结构。整个框架可分为三个主要阶段:
图片
阶段一:并行规划
输入:源语言查询(如中文)及其英文翻译过程:分别将两个版本的查询分解成子问题图(每个节点是一个单跳问题,边表示依赖关系)输出:两个独立的子问题图:源语言图(Gₗ)和英文图(Gₑₙ)阶段二:节点融合
这是DaPT最巧妙的部分。通过以下步骤将两个子问题图融合:
识别关键节点:计算两个图中所有节点对的嵌入相似度,找到相似度最高的节点对设置阈值:只有相似度超过预设阈值(τ=0.8)的节点对才会被融合融合操作:将英文节点整合到源语言节点中,形成双语节点,并重定向所有边拓扑排序:对融合后的图进行排序,确定子问题的解决顺序阶段三:双语检索与回答
按照拓扑排序顺序逐步解决子问题:
动态查询构建:将前一个子问题的答案与当前子问题结合,形成新的检索查询双语检索:对于双语节点,同时从源语言和英文语料库中检索答案验证与选择:使用轻量级LLM验证两个候选答案的一致性,优先选择源语言答案自纠正机制:如果验证失败,则重新生成答案实验结果
论文在三个主流多跳问答数据集(HotpotQA、2WikiMultiHopQA、MuSiQue)上进行了全面评估,结果显示:
主要发现
现有RAG系统存在严重的语言不平衡:HippoRAG2在英文上表现优异(EM得分54.0),但在泰语等低资源语言上性能大幅下降(下降59.8%)DaPT显著提升多语言性能:相比最强基线HippoRAG2,DaPT在HotpotQA上平均提升6.8%,在更具挑战性的MuSiQue上提升15.5%性能对比表格
注:表格展示的是各方法在所有语言上的平均EM得分
图片
消融研究
通过移除DaPT的不同组件,验证了各部分的必要性:
移除分解阶段:性能下降16.2%,证明子问题分解至关重要移除融合阶段:性能下降1.9%,说明节点融合虽提升有限但仍有价值简单翻译方案:性能下降3.2%,证明DaPT比简单的"翻译-检索-翻译回"策略更有效
图片
总结
DaPT框架通过创新的双路径并行推理机制,成功解决了多语言多跳问答中的核心挑战。它不仅构建了首个系统的多语言多跳问答评估基准,还提出了一种能有效利用LLM英文理解能力同时保留源语言语义的实用方法。
DAPT: A DUAL-PATH FRAMEWORK FOR MULTILINGUAL MULTI-HOP QUESTION ANSWERINGhttps://arxiv.org/pdf/2603.19097https://github.com/f6ster/DaPT
游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。
同类文章
谷歌内存论文疑被抄袭,华人学者控诉业内学术不公
新智元报道编辑:好困 Aeneas【新智元导读】把闪存股一夜干崩的谷歌顶会论文,出大事了。TurboQuant的核心方法,两年前就被一位华人学者做完、发完顶会、代码全部开源了。谷歌不仅没正面提及,而
OpenClaw漏洞威胁:智能家居被反锁与隐私泄露风险
新智元报道编辑:倾倾【新智元导读】2025年底,极客圈发生了一场数字哗变,Anthropic的遮羞布被Peter Steinberger撕了个精光。从OpenClaw开源到Claude被扒出80页「
华为大模型负责人离职,重大人事变动引发行业关注
智东西作者|江宇编辑|冰倩智东西3月28日报道,今日,华为诺亚方舟实验室主任、华为盘古大模型负责人王云鹤在朋友圈发文,确认离职。王云鹤于2017年以华为北京部门首位实习生身份加入,至今已接近9年。在
Nature重磅:AI生成论文在顶会通过率55%,单篇成本仅15美元
新智元报道编辑:元宇【新智元导读】刚刚,Nature盖章AI独立科研时代!全新Scaling Law显现,人类死守的学术铁王座,正发生不可逆的转移。一篇长达数十页的学术论文,在人类设定研究主题和实验
CMU首创无毒AutoGEO方案,破解GEO投毒产业链焦虑
新智元报道编辑:LRST【新智元导读】ChatGPT上线广告、315曝光GEO投毒产业链,AI搜索商业化的隐忧接连浮出水面。龙虾热背后,3000元就能让AI搜索信口开河,离全面「瞎说」还有多远?来自
- 日榜
- 周榜
- 月榜
相关攻略
2015-03-10 11:25
2015-03-10 11:05
2021-08-04 13:30
2015-03-10 11:22
2015-03-10 12:39
2022-05-16 18:57
2025-05-23 13:43
2025-05-23 14:01
热门教程
- 游戏攻略
- 安卓教程
- 苹果教程
- 电脑教程

