当前位置:首页 > 文章列表 > 科技周边 > 人工智能 > RAG 检索怎样用元数据过滤租户内容

RAG 检索怎样用元数据过滤租户内容

来源:17golang原创 2026-10-17 23:31:14 0浏览 收藏

我在把 RAG 接到多租户知识库时,最先遇到的不是向量模型效果,而是“相似”的结果可能来自错误租户。可靠的做法只有一个核心:把 tenant_id 作为服务端生成的硬过滤条件,放进向量检索请求;不要先召回一大批结果,再在应用层删除跨租户内容。

要点速览
  • 租户字段要和每个 chunk 一起入库,不能只放在文档表或会话变量里。
  • tenant_id 来自认证上下文,用户问题和模型输出都不能改写它。
  • 过滤字段建立对应索引,空结果时宁可返回“没有可访问内容”,也不要取消过滤重试。

先把租户边界写进每个向量片段

一份文档通常会被切成多个 chunk。如果只在原始文档表上记录租户,向量库里的片段就缺少独立的授权边界,后续很容易出现“文档归属正确、片段过滤失效”。入库时建议把下面几类字段作为最小元数据合同:

字段用途写入规则
tenant_id硬隔离由服务端会话确定,禁止从正文或模型输出读取
access_scope团队、项目或角色范围使用枚举或规范化 ID,避免自由文本
document_status撤回、归档、草稿控制检索时只允许可见状态
source_id引用和审计指向业务系统中的稳定文档标识
RAG 文档切片与 tenant_id、access_scope、document_status 元数据进入向量索引的关系说明图
图1:RAG 元数据结构说明图,展示租户字段如何随向量片段进入检索索引。

字段类型也要固定。例如 tenant_id 是精确匹配的关键词,不要把它当全文字段分词;时间、状态和数值范围则分别使用向量库支持的对应类型。这样既能减少误匹配,也便于索引优化。

把过滤器放进向量检索请求

检索接口可以按下面的适配层组织。这里不绑定某一家向量数据库,vector_store.search 代表你对实际 SDK 的封装;不同产品可能把参数叫 filter、where 或 query_filter,但安全责任不变。

from dataclasses import dataclass

@dataclass(frozen=True)
class AuthContext:
    tenant_id: str
    allowed_scopes: tuple[str, ...]

def retrieve_for_tenant(vector_store, encoder, auth: AuthContext, question: str):
    # 租户身份来自已验证的会话,不从 question 或模型输出中解析
    if not auth.tenant_id:
        raise PermissionError("缺少租户身份")

    # 过滤条件由服务端固定,调用方只能提供业务范围而不能替换 tenant_id
    metadata_filter = {
        "and": [
            {"field": "tenant_id", "eq": auth.tenant_id},
            {"field": "document_status", "eq": "published"},
            {"field": "access_scope", "in": list(auth.allowed_scopes)},
        ]
    }

    # 先构造过滤器,再执行向量查询;不要先取全库结果再删除
    query_vector = encoder.embed(question)
    hits = vector_store.search(
        vector=query_vector,
        filter=metadata_filter,
        limit=8,
        include_metadata=True,
    )

    # 结果复核是第二道防线,不是替代检索过滤
    safe_hits = [item for item in hits if item.metadata.get("tenant_id") == auth.tenant_id]
    if not safe_hits:
        return {"answer": "当前租户没有可访问的相关内容", "sources": []}
    return {"answer_context": safe_hits, "sources": [item.metadata["source_id"] for item in safe_hits]}

代码里最重要的不是字典长什么样,而是数据流向:tenant_id 从认证上下文进入过滤器,问题文本只负责生成向量。若把过滤器交给大模型,让模型自行决定“查哪个租户”,那就把访问控制变成了提示词约束,不能接受。

RAG 认证上下文生成固定租户过滤器并约束向量查询与结果复核的边界说明图
图2:RAG 租户过滤查询说明图,展示服务端租户条件与相似度查询的组合边界。

性能和空结果要分开处理

元数据过滤不是只为安全服务,也会改变检索性能。对经常参与条件判断的字段建立匹配类型正确的索引;字段已经入库后再补索引,通常还要观察构建期间的查询负载。过滤很严时,limit=8 不一定能拿到 8 条结果,应用层不要用“取消过滤再补满”来掩盖数据问题。

我更愿意把空结果分成三类记录:租户确实没有资料、资料存在但状态不可见、过滤字段缺失或类型错误。前两类可以给用户明确的无结果提示,第三类应进入数据修复队列,并在检索层拒绝不完整片段。

上线前检查这四个隔离边界

  • 身份边界:反向代理、应用会话和检索服务对 tenant_id 的来源是否一致?
  • 写入边界:批量导入、重切片和补偿任务是否都会写入相同的租户字段?
  • 查询边界:所有检索入口,包括问答、引用补全和后台搜索,是否复用同一个过滤适配层?
  • 输出边界:生成提示词、引用列表和缓存键是否可能泄露别的租户内容?

如果业务需要跨租户管理员检索,应单独设计受控的审计角色和范围列表,不要给普通检索接口增加一个“跳过过滤”的布尔参数。这个开关一旦进入通用链路,后续很难证明每个调用者都使用正确。

相关问题

只在召回后过滤,为什么不够安全?

向量库已经把跨租户片段返回给应用,日志、缓存、重排和提示词组装都可能先接触到它们。后过滤只能减少最终展示,不能撤回已经发生的数据暴露。

租户 ID 应该放在向量文本里吗?

不建议把它当普通正文拼进 embedding 文本。租户身份是精确授权条件,应放在可过滤元数据中;否则语义相似度会把权限字段当成语言内容。

过滤后没有结果,能否自动放宽条件?

可以放宽非安全条件,例如时间范围或可选标签,但 tenant_id 和授权范围不能放宽。任何降级都必须保留硬租户过滤,并留下可审计的原因。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
RAG 文档切片怎样设置重叠区避免语义断裂RAG 文档切片怎样设置重叠区避免语义断裂
上一篇
RAG 文档切片怎样设置重叠区避免语义断裂
Embedding 结果怎样保留文本分块位置方便回溯
下一篇
Embedding 结果怎样保留文本分块位置方便回溯
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    510次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    570次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    594次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    547次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    364次使用