Gemini API 的 cachedContent 怎么复用长提示词:缓存创建与请求绑定
客服知识库每天都会收到很多不同问题,但产品说明书、接口约束和合规规则并没有变化。把整份长文档随每次请求重新发送,成本和延迟都会一起上升。Gemini API 的 Context Caching 可以把稳定上下文先创建成 CachedContent,后续请求只提交新问题,并通过 cache.name 绑定这份缓存。
可复用的内容放进
cachedContents.create,变化的问题仍放在generateContent的contents中;两者靠返回的cache.name连接,而不是把缓存内容再复制一遍。
contents[]、systemInstruction和工具配置在创建后属于缓存对象的输入边界。- 后续生成请求使用
cached_content=cache.name,动态问题仍作为本次请求的contents。 - 缓存只能更新 TTL 或过期时间,不能在原缓存上改换模型或替换内容。
- 是否值得缓存要看长上下文是否重复、模型是否支持缓存,以及缓存命中是否真实发生。
先把长上下文和用户问题拆成两条路径
Context Caching 解决的不是“把所有历史对话永久保存”,而是让一段会反复使用的输入只准备一次。比如一份产品手册、一个较大的代码仓库摘要,或者一组固定的客服规则,都可以成为缓存内容;“用户这次到底想问什么”则应该留在每一次生成请求里。
这个拆分很重要。缓存对象创建后,缓存的 contents[]、tools[]、systemInstruction 和 toolConfig 都是创建请求的一部分。后续问题不是去修改缓存,而是引用它并追加本轮输入。
cachedContents.create 返回的 cache.name 才是绑定凭据
下面的示例使用新版 Google GenAI SDK。代码中的文档内容是稳定上下文,请找出退款条件 是每次变化的问题。创建缓存和生成回答是两次调用,第二次通过 cached_content 传入第一步得到的 cache.name。
from google import genai
from google.genai import types
client = genai.Client()
cache = client.caches.create(
model="gemini-3.7-flash",
config=types.CreateCachedContentConfig(
contents=["产品手册:退款、换货与保修规则"],
system_instruction="只根据缓存的产品手册回答问题。",
),
)
response = client.models.generate_content(
model="gemini-3.7-flash",
contents="请找出退款条件",
config=types.GenerateContentConfig(
cached_content=cache.name,
),
)
print(response.text)
不要把 cache.name 当成缓存正文。它是类似 cachedContents/... 的资源名,只负责告诉 generateContent 使用哪一个 CachedContent。真正需要变化的用户问题继续放在 contents,这样同一份规则才能服务多个问法。

模型、最小输入和 TTL 是上线前的三个检查点
创建缓存前先确认目标模型支持 createCachedContent。官方接口文档还把缓存内容标成创建时输入、不可变;如果要延长使用时间,应更新 TTL 或 expire_time,而不是重新提交一份看起来相同的缓存。
| 检查项 | 应该确认什么 | 不通过时怎么处理 |
|---|---|---|
| 模型能力 | 模型列表的 supported actions 包含 createCachedContent | 换成支持缓存的模型或取消缓存方案 |
| 内容边界 | 稳定规则与本轮问题没有混在同一个 contents | 把用户问题移回 generateContent |
| 生命周期 | TTL 足够覆盖业务窗口且可被更新 | 重新设置 TTL 或按窗口重建缓存 |
缓存也不是越大越好。若每个请求的长文本都不同,创建成本和管理复杂度可能抵消收益;若稳定内容很短,直接发送反而更简单。判断时至少观察响应使用信息里的缓存命中 token,而不是只看请求代码里出现了 cached_content。

常见问题:把缓存当成可编辑会话
缓存创建后能不能追加一段新规则?
不能直接追加。缓存内容和工具相关配置属于创建时输入;新规则应创建新的 CachedContent,或者把短期规则作为本次请求的输入,并重新评估优先级。
每次请求都要再次上传原文吗?
不需要。后续请求只需引用 cache.name 并提交本轮问题,但应用仍要保存资源名、过期策略和失败时的重建路径。
只要绑定 cache.name 就一定省钱吗?
不一定。是否节省取决于重复上下文长度、缓存命中情况、缓存生命周期和调用频率;应结合 usage metadata 与实际账单口径核对。
缓存资源过期后请求会怎样?
不能把过期当成正常回答路径。捕获请求错误后,应按业务窗口重新创建 CachedContent,再用新的资源名发起请求,并避免无限重建。
把缓存接入应用时保留一条可回退路径
实际接入可以把资源名和模型名放在应用配置中,把创建时间、过期时间和最后一次命中核对结果写入可审计的记录。请求失败时先判断是资源过期、模型不匹配还是输入格式问题,再决定重建缓存或退回普通 generateContent 请求。这样缓存只是加速层,业务回答不会被一个短期资源绑死。
最小验收顺序是:创建一次 CachedContent,记录 cache.name;使用同一资源名发送两种不同问题;查看响应使用信息中的缓存命中字段;再更新 TTL 并核对过期时间变化。四步都能解释清楚,才算真正完成了缓存绑定,而不是只把一个参数写进代码。
Go 1.25 crypto.MessageSigner 怎么兼容自带哈希与外部签名器:SignMessage 回退路径
- 上一篇
- Go 1.25 crypto.MessageSigner 怎么兼容自带哈希与外部签名器:SignMessage 回退路径
- 下一篇
- Go netip.Prefix.Contains 判断网段为什么出错:地址族、掩码长度与规范化
-
- 科技周边 · 人工智能 | 1天前 |
- vLLM 连续批处理下的显存与吞吐取舍
- 209浏览 收藏
-
- 科技周边 · 人工智能 | 1天前 |
- Reranker 接入后如何控制检索延迟预算
- 113浏览 收藏
-
- 科技周边 · 人工智能 | 1天前 |
- Embedding 向量维度变化时的索引迁移方案
- 429浏览 收藏
-
- 科技周边 · 人工智能 | 1天前 |
- Agent 轨迹评测区分工具错误与模型错误
- 239浏览 收藏
-
- 科技周边 · 人工智能 | 1天前 |
- MCP 资源与工具描述的缓存更新策略
- 313浏览 收藏
-
- 科技周边 · 人工智能 | 1天前 |
- MCP 服务端授权范围与会话隔离的配置
- 161浏览 收藏
-
- 科技周边 · 人工智能 | 1天前 |
- MCP 工具结果分页与长列表截断的设计
- 486浏览 收藏
-
- 科技周边 · 人工智能 | 1天前 | 人工智能 · chat template apply_chat_template AI tokenizer 多模型消息格式
- AI tokenizer chat template 统一多模型消息格式
- 154浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 431次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 508次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 521次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 464次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 292次使用
-
- Go 1.24 泛型类型别名实战:重构公共 API 时别把类型体系改乱
- 2026-06-01 339浏览
-
- Go 1.23 iter.Seq 怎么设计遍历 API:何时返回切片,何时返回迭代器
- 2026-07-15 234浏览
-
- Go Client 配置怎么设计:Functional Options 什么时候适合用,什么时候不值得
- 2026-07-16 454浏览
-
- Go 1.24 泛型类型别名怎么落地:迁移旧 API 时的兼容边界
- 2026-07-27 335浏览
-
- Go 泛型函数如何设计可读的约束:类型集、接口方法与调用方推断边界
- 2026-08-25 242浏览

