当前位置:首页 > 文章列表 > 科技周边 > 人工智能 > RAG 检索结果如何做来源分层:上下文拼接、引用保留与空结果处理

RAG 检索结果如何做来源分层:上下文拼接、引用保留与空结果处理

来源:17golang原创 2026-08-29 15:26:24 0浏览 收藏

知识库问答最容易出问题的地方,不是模型不会回答,而是检索结果混在一起:一条过期产品说明、一段内部备注和一篇正式规范同时进入上下文,模型很难知道谁更可信。更稳的做法是先给结果分层,再决定拼接顺序;如果没有达到最低证据门槛,就明确返回“未检索到足够依据”,而不是让模型凭常识补全。

RAG 的关键控制点是“检索结果 → 来源分层 → 上下文拼接 → 引用保留 → 空结果分支”。来源等级和最低分数都要在进入模型前确定。

要点速览
  • 先用 source_level 区分正式文档、业务资料和临时备注,再做排序。
  • 上下文同时保留 source_url、chunk_id 与原始标题,回答才能回指证据。
  • 过滤后为空时走 no_evidence 分支,禁止把空上下文交给模型自由发挥。
  • 最终验收看“引用是否来自入选片段”,而不只看回答是否通顺。

为什么检索命中后还要再做一次来源判断

向量相似度只回答“这段文字像不像问题”,没有回答“这段文字能不能作为依据”。例如用户问“退款窗口是多少天”,旧 FAQ 可能和新政策具有很高相似度,但业务上应该优先采用带版本号和生效日期的正式文档。

因此可以把每个检索片段看成一个带证据属性的对象,而不是一串纯文本:

retrieved = [
    {
        "chunk_id": "policy-2026-04-17",
        "source_level": "official",
        "title": "退款规则",
        "source_url": "https://kb.example.test/policy/refund",
        "text": "自签收次日起七日内……",
        "score": 0.86
    }
]

这里的 source_level 不是模型猜出来的标签,而是入库时由采集流程写入的字段。来源标签缺失时宁可降低优先级,也不要在拼接阶段临时臆测。

RAG 检索结果从 retrieved 经过 source_level 分层后进入 context 的数据流示意图

用 source_level 和 score 形成可解释的入选规则

来源分层不必做成复杂的机器学习模型,先用一个稳定的业务规则即可复查。下面的示例把正式资料、审核后的业务资料和临时备注分成三档;排序时先看来源等级,再看相似度。

LEVEL_WEIGHT = {"official": 3, "reviewed": 2, "note": 1}

def rank_chunk(chunk):
    level = LEVEL_WEIGHT.get(chunk.get("source_level"), 0)
    return (level, chunk.get("score", 0.0))

selected = sorted(retrieved, key=rank_chunk, reverse=True)[:4]

这个排序只解决“谁先进入上下文”,不代表低等级资料永远不能使用。若正式资料没有覆盖用户问题,可以保留一条审核资料,但要把来源等级原样交给后续提示词和引用渲染层。

拼接上下文时把引用元数据一起带进去

常见的错误是只拼 chunk["text"],回答生成后再根据记忆补链接。这样做会让引用和事实脱钩。更稳的方式是在每个片段前放一个短标识,并把相同对象保存到 evidence 列表。

def build_context(selected):
    blocks = []
    evidence = []
    for chunk in selected:
        ref = f"[{chunk['chunk_id']}]"
        blocks.append(f"{ref} {chunk['title']}\n{chunk['text']}")
        evidence.append({
            "chunk_id": chunk["chunk_id"],
            "source_url": chunk["source_url"],
            "source_level": chunk["source_level"]
        })
    return "\n\n".join(blocks), evidence

模型看到的是带标识的上下文,应用层保存的是同一批 evidence。最终输出只能引用 evidence 中存在的 chunk_id,这条约束比“请务必引用来源”更容易自动检查。

RAG 上下文拼接保留 chunk_id 与 evidence,并在空证据时转入 no_evidence 的控制流示意图

空结果和低质量结果要走 no_evidence 分支

过滤后没有合格片段,是一个业务状态,不是异常字符串。可以把阈值判断放在上下文拼接之前:如果 selected 为空,返回固定的 no_evidence 状态;如果只有低等级资料,则降低回答范围并要求带引用。

def prepare_query(retrieved):
    selected = [
        chunk for chunk in retrieved
        if chunk.get("source_level") in LEVEL_WEIGHT
        and chunk.get("score", 0.0) >= 0.72
    ]
    if not selected:
        return {"state": "no_evidence", "context": "", "evidence": []}

    context, evidence = build_context(sorted(
        selected, key=rank_chunk, reverse=True
    )[:4])
    return {"state": "ready", "context": context, "evidence": evidence}

调用方只在 state == "ready" 时请求模型;no_evidence 可以提示用户补充关键词、转人工检索,或返回明确的证据不足说明。这里别急着把阈值调得很低,先抽样检查被过滤的片段是否真的能回答问题。

用三组检查验收一条 RAG 回答链路

检查点核对内容不通过时的动作
来源层级每个入选片段都有合法的 source_level降级或移出上下文
引用一致回答引用的 chunk_id 存在于 evidence拦截回答并重新渲染
空证据过滤后为空时状态为 no_evidence不调用模型,走兜底文案

线上日志至少记录查询文本的脱敏摘要、入选 chunk_id、来源等级、阈值和最终状态。不要只记录模型回答;出了争议时,真正需要复盘的是“哪些证据被送进去了”。

常见问题:来源分层和上下文拼接怎么取舍

来源等级越高,是否就一定应该排在最前面?

不一定。来源等级是可信度优先级,score 是语义相关度;正式资料完全不覆盖问题时,硬排第一只会稀释有效证据。可以先设最低相关度,再在合格集合内按等级排序。

为什么不能让模型自己判断 source_level?

模型可以辅助分类,但最终等级应来自采集、审核或发布系统。把权限和生效状态交给生成模型,会让同一来源在不同问题下出现不稳定判断。

空结果时返回“我不知道”就够了吗?

还不够。应用需要返回机器可读的 no_evidence 状态,并保留过滤原因,前端才能提示用户改写问题或转人工,而不是把一次检索失败伪装成普通回答。

把证据边界固定在进入模型之前

RAG 的可靠性来自一条可回放的证据链:检索片段先带着 source_level 和 score 接受筛选,再把 chunk_id、source_url 和正文一起进入上下文;过滤为空则明确结束在 no_evidence。这几个状态都能在日志和测试里复现,后续更换向量库或模型时,验收标准也不会跟着漂移。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go io.Pipe 写入端提前关闭怎么排查:Reader 读到 EOF 与 CloseWithError 的区别Go io.Pipe 写入端提前关闭怎么排查:Reader 读到 EOF 与 CloseWithError 的区别
上一篇
Go io.Pipe 写入端提前关闭怎么排查:Reader 读到 EOF 与 CloseWithError 的区别
Photopea 如何批量调整图片尺寸:动作面板与导出核对
下一篇
Photopea 如何批量调整图片尺寸:动作面板与导出核对
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    465次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    527次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    545次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    495次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    314次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码