当前位置:首页 > 文章列表 > 科技周边 > 人工智能 > 向量检索怎么按租户和文档类型过滤结果

向量检索怎么按租户和文档类型过滤结果

来源:17golang原创 2026-09-06 08:53:55 0浏览 收藏
所属专题:Go Qdrant 向量检索与 RAG 工程实践专题 - 从 Go SDK、集合与向量写入到过滤、混合检索和 RAG 评估

向量相似度只能回答“内容像不像”,不能替代“这个租户有没有权限看”。知识库做多租户检索时,建议把租户编号和文档类型写进 Qdrant 的 payload,再在查询的过滤器里用 must 同时限制两个字段。这样,向量负责找相关内容,payload filter 负责守住数据边界。

要点速览
  • 每个向量点至少保存 tenant_id、doc_type 和文档标识。
  • 租户和文档类型是同时成立的条件,使用 must 表达 AND,不要把权限词塞进查询文本。
  • 高频筛选字段建立 payload index,查询后仍要复查返回 payload,空结果也要按正常分支处理。

一、先把租户和文档类型放进 payload

故障通常从一条“相似但不属于当前客户”的结果开始:embedding 找到了语义相近的段落,却不知道它属于哪个租户。写入点时把权限边界做成结构化字段,例如 tenant_id=tenant_a、doc_type=policy、doc_id=refund-2026。字段名称一旦确定,后续写入和查询都要保持同样的类型与层级。

字段用途建议值
tenant_id租户隔离稳定的字符串或整数
doc_type文档类型筛选policy、manual 等枚举值
doc_id结果回溯业务侧唯一标识

二、用 must 组合两个精确条件

Qdrant 的 must 表示列表中的每一个条件都要满足,正好对应“同一租户并且是某种文档”。下面的 Python 片段只展示过滤结构;向量生成仍由你的 embedding 服务负责,不能用自然语言中的“只看某租户”替代结构化过滤。

from qdrant_client import QdrantClient, models

client = QdrantClient(url="http://localhost:6333")

# 语义向量由上游 embedding 服务生成,这里只负责限定检索范围
query_vector = [0.12, -0.08, 0.31, 0.44]

hits = client.query_points(
    collection_name="knowledge_base",
    query=query_vector,
    query_filter=models.Filter(
        must=[
            # 租户条件是权限边界,不能省略
            models.FieldCondition(
                key="tenant_id",
                match=models.MatchValue(value="tenant_a"),
            ),
            # 类型条件把政策文档与 FAQ、产品手册分开
            models.FieldCondition(
                key="doc_type",
                match=models.MatchValue(value="policy"),
            ),
        ]
    ),
    limit=5,
)

# 只打印业务需要的字段,避免把完整正文写入日志
for point in hits.points:
    print(point.id, point.payload.get("doc_id"))

如果一个字段允许多个值,例如允许检索 policy 或 manual,可以把这个字段改成 match any;但租户条件仍应保持单值精确匹配。不要把多个租户放进 OR 列表来“复用”查询,除非调用方本身已经完成了明确的租户授权。

Qdrant 向量检索中 tenant_id 与 doc_type payload 经过 must 过滤后进入结果集合的静态边界关系图
图1:向量相似度负责召回候选,tenant_id 与 doc_type 在 payload filter 中共同收紧结果边界。

三、为高频过滤字段建立 payload index

帮助读者区分 payload 字段、字段索引和过滤查询之间的静态依赖,理解索引不会替代权限字段。
图2:payload 字段先形成索引,再被 must filter 用于缩小向量集合;索引优化路径但不生成权限数据。

过滤逻辑正确,不代表大集合上的代价可以忽略。Qdrant 官方文档建议为经常过滤的 payload 字段建立索引,并尽量在写入数据前完成。租户字段和文档类型通常是高频条件,应该先列为索引候选;不要给每一个偶尔出现的字段都建索引。

from qdrant_client import QdrantClient, models

client = QdrantClient(url="http://localhost:6333")

# 在持续写入前创建高频过滤字段的索引
client.create_payload_index(
    collection_name="knowledge_base",
    field_name="tenant_id",
    field_schema=models.PayloadSchemaType.KEYWORD,
)
client.create_payload_index(
    collection_name="knowledge_base",
    field_name="doc_type",
    field_schema=models.PayloadSchemaType.KEYWORD,
)

如果历史 collection 已经存在,先确认字段值类型一致,再安排索引创建和灰度查询。索引优化的是过滤路径,不会自动修复错误的租户字段,也不会把缺失 payload 的旧点变成合规数据。

四、用结果字段和边界清单复查

复查时不要只看相似度分数。至少抽样确认每个结果的 tenant_id、doc_type 和 doc_id 都存在,并与请求上下文一致;过滤后没有结果时返回“当前范围没有匹配文档”,不要偷偷扩大到其他租户。

  • 字段是否在所有新写入点中存在,且没有把租户编号写成混合类型。
  • 查询是否同时包含租户条件和文档类型条件,是否误用了 should。
  • 索引是否覆盖高频字段,新增字段是否经过小流量检索验证。
  • 空结果、字段缺失和权限拒绝是否走不同的业务分支。

这套边界的核心是职责分离:embedding 解决相关性,payload filter 解决范围,业务服务解决最终授权。三者缺一不可。

常见问题

只把 tenant_id 放进查询文本可以吗?

不可以。查询文本会影响向量相似度,却不能保证结果只来自目标租户;租户必须成为结构化过滤条件。

tenant_id 和 doc_type 都要用 must 吗?

如果要求同时满足两个条件,就应放在同一个 must 列表中。只有同一字段允许多个枚举值时,才考虑 match any。

没有建立 payload index 会查不到结果吗?

通常不会直接改变匹配语义,但大集合上的过滤性能可能变差。先保持字段类型一致,再按实际过滤频率建立索引。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go nil map 可以读取为什么写入就 panicGo nil map 可以读取为什么写入就 panic
上一篇
Go nil map 可以读取为什么写入就 panic
秀秀漫画离线阅读怎么用?每日更新、多端同步与权限核对
下一篇
秀秀漫画离线阅读怎么用?每日更新、多端同步与权限核对
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    578次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    619次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    650次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    613次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    428次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码