当前位置:首页 > 文章列表 > 科技周边 > 人工智能 > Gemini API 的 cachedContent 怎么复用长提示词:缓存创建与请求绑定

Gemini API 的 cachedContent 怎么复用长提示词:缓存创建与请求绑定

来源:17golang原创 2026-08-27 22:38:05 0浏览 收藏

客服知识库每天都会收到很多不同问题,但产品说明书、接口约束和合规规则并没有变化。把整份长文档随每次请求重新发送,成本和延迟都会一起上升。Gemini API 的 Context Caching 可以把稳定上下文先创建成 CachedContent,后续请求只提交新问题,并通过 cache.name 绑定这份缓存。

可复用的内容放进 cachedContents.create,变化的问题仍放在 generateContent 的 contents 中;两者靠返回的 cache.name 连接,而不是把缓存内容再复制一遍。

要点速览
  • contents[]、systemInstruction 和工具配置在创建后属于缓存对象的输入边界。
  • 后续生成请求使用 cached_content=cache.name,动态问题仍作为本次请求的 contents。
  • 缓存只能更新 TTL 或过期时间,不能在原缓存上改换模型或替换内容。
  • 是否值得缓存要看长上下文是否重复、模型是否支持缓存,以及缓存命中是否真实发生。

先把长上下文和用户问题拆成两条路径

Context Caching 解决的不是“把所有历史对话永久保存”,而是让一段会反复使用的输入只准备一次。比如一份产品手册、一个较大的代码仓库摘要,或者一组固定的客服规则,都可以成为缓存内容;“用户这次到底想问什么”则应该留在每一次生成请求里。

这个拆分很重要。缓存对象创建后,缓存的 contents[]、tools[]、systemInstruction 和 toolConfig 都是创建请求的一部分。后续问题不是去修改缓存,而是引用它并追加本轮输入。

cachedContents.create 返回的 cache.name 才是绑定凭据

下面的示例使用新版 Google GenAI SDK。代码中的文档内容是稳定上下文,请找出退款条件 是每次变化的问题。创建缓存和生成回答是两次调用,第二次通过 cached_content 传入第一步得到的 cache.name。

from google import genai
from google.genai import types

client = genai.Client()
cache = client.caches.create(
    model="gemini-3.7-flash",
    config=types.CreateCachedContentConfig(
        contents=["产品手册:退款、换货与保修规则"],
        system_instruction="只根据缓存的产品手册回答问题。",
    ),
)

response = client.models.generate_content(
    model="gemini-3.7-flash",
    contents="请找出退款条件",
    config=types.GenerateContentConfig(
        cached_content=cache.name,
    ),
)
print(response.text)

不要把 cache.name 当成缓存正文。它是类似 cachedContents/... 的资源名,只负责告诉 generateContent 使用哪一个 CachedContent。真正需要变化的用户问题继续放在 contents,这样同一份规则才能服务多个问法。

Gemini API cachedContents.create 返回 cache.name 后绑定 generateContent 的调用链

模型、最小输入和 TTL 是上线前的三个检查点

创建缓存前先确认目标模型支持 createCachedContent。官方接口文档还把缓存内容标成创建时输入、不可变;如果要延长使用时间,应更新 TTL 或 expire_time,而不是重新提交一份看起来相同的缓存。

检查项应该确认什么不通过时怎么处理
模型能力模型列表的 supported actions 包含 createCachedContent换成支持缓存的模型或取消缓存方案
内容边界稳定规则与本轮问题没有混在同一个 contents把用户问题移回 generateContent
生命周期TTL 足够覆盖业务窗口且可被更新重新设置 TTL 或按窗口重建缓存

缓存也不是越大越好。若每个请求的长文本都不同,创建成本和管理复杂度可能抵消收益;若稳定内容很短,直接发送反而更简单。判断时至少观察响应使用信息里的缓存命中 token,而不是只看请求代码里出现了 cached_content。

Gemini API 缓存上下文与动态问题分离,并在 TTL 检查后进入响应核对

常见问题:把缓存当成可编辑会话

缓存创建后能不能追加一段新规则?

不能直接追加。缓存内容和工具相关配置属于创建时输入;新规则应创建新的 CachedContent,或者把短期规则作为本次请求的输入,并重新评估优先级。

每次请求都要再次上传原文吗?

不需要。后续请求只需引用 cache.name 并提交本轮问题,但应用仍要保存资源名、过期策略和失败时的重建路径。

只要绑定 cache.name 就一定省钱吗?

不一定。是否节省取决于重复上下文长度、缓存命中情况、缓存生命周期和调用频率;应结合 usage metadata 与实际账单口径核对。

缓存资源过期后请求会怎样?

不能把过期当成正常回答路径。捕获请求错误后,应按业务窗口重新创建 CachedContent,再用新的资源名发起请求,并避免无限重建。

把缓存接入应用时保留一条可回退路径

实际接入可以把资源名和模型名放在应用配置中,把创建时间、过期时间和最后一次命中核对结果写入可审计的记录。请求失败时先判断是资源过期、模型不匹配还是输入格式问题,再决定重建缓存或退回普通 generateContent 请求。这样缓存只是加速层,业务回答不会被一个短期资源绑死。

最小验收顺序是:创建一次 CachedContent,记录 cache.name;使用同一资源名发送两种不同问题;查看响应使用信息中的缓存命中字段;再更新 TTL 并核对过期时间变化。四步都能解释清楚,才算真正完成了缓存绑定,而不是只把一个参数写进代码。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go 1.25 crypto.MessageSigner 怎么兼容自带哈希与外部签名器:SignMessage 回退路径Go 1.25 crypto.MessageSigner 怎么兼容自带哈希与外部签名器:SignMessage 回退路径
上一篇
Go 1.25 crypto.MessageSigner 怎么兼容自带哈希与外部签名器:SignMessage 回退路径
Go netip.Prefix.Contains 判断网段为什么出错:地址族、掩码长度与规范化
下一篇
Go netip.Prefix.Contains 判断网段为什么出错:地址族、掩码长度与规范化
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    431次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    508次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    521次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    464次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    292次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码