当前位置:首页 > 文章列表 > 文章 > 软件教程 > 开发工具 BuildKit 构建缓存 怎样处理

开发工具 BuildKit 构建缓存 怎样处理

来源:17golang原创 2026-10-22 06:34:41 0浏览 收藏

BuildKit 构建缓存怎样处理,关键不是把所有缓存都塞进一个位置,而是先分清三层:Dockerfile 指令产生的层缓存、RUN --mount=type=cache 使用的 builder 本地缓存,以及 CI 通过 --cache-to、--cache-from 传递的远端缓存。前两层解决本机重复构建,最后一层解决临时 CI runner 没有持久磁盘的问题。

官方地址:https://docs.docker.com/build/cache/

最稳妥的处理方式是:先把依赖文件和源码分层,再给包管理器/编译器加 cache mount;CI 中使用独立的 registry cache ref 导入和导出,最后用日志与 builder 用量确认到底命中了哪一层。
  • 本地构建:优先检查当前 builder 的内部缓存。
  • 依赖与编译:使用 RUN --mount=type=cache,但不要把它当成最终镜像内容。
  • CI 构建:必须显式配置远端缓存的导入和导出。

先把三层缓存放到正确入口

如果使用 Docker Desktop,先按 Docker Desktop → Builds → Builders → 选择当前 builder → Cache 打开构建器详情。不同版本的面板名称可能略有差异,但要找到的是 builder 详情、缓存占用和构建记录,而不是镜像列表。

命令行可以用下面两条命令做同样的确认。第一条查看当前 builder,第二条查看它实际占用的缓存:

# 查看当前 buildx builder 及其节点状态
docker buildx ls

# 查看 builder 的缓存明细
docker buildx du

图中是操作位置的说明图,不是 Docker Desktop 的真实截图。看到 builder 状态为可用、缓存用量能够列出,才适合继续调整 Dockerfile。

BuildKit builder 与三类缓存入口的界面说明图
图1:BuildKit builder 与缓存入口的界面说明图,先确认当前构建器再配置缓存。

Dockerfile 先分层,再给编译器挂缓存

依赖文件变化频率通常低于业务源码,所以先复制 go.mod、go.sum,再下载依赖;源码变化时,前面的依赖层仍有机会复用。cache mount 存在于 builder 本地存储,不会自动成为最终镜像层,也不会随着远端 --cache-to 一起导出。

# syntax=docker/dockerfile:1
FROM golang:1.25 AS build
WORKDIR /src

# 先复制依赖清单,让源码修改不必重复解析依赖
COPY go.mod go.sum ./
RUN --mount=type=cache,target=/go/pkg/mod \
    --mount=type=cache,target=/root/.cache/go-build \
    go mod download

# 再复制源码,避免业务改动让依赖下载层失效
COPY . .
RUN --mount=type=cache,target=/go/pkg/mod \
    --mount=type=cache,target=/root/.cache/go-build \
    go build -o /out/app ./cmd/app

这里两个目标路径分别对应 Go 模块下载缓存和编译缓存。缓存内容可能被另一次构建覆盖,也可能被 BuildKit 的垃圾回收清空,因此构建必须在空缓存下仍然成功。多个构建同时写入需要独占访问时,再把挂载项设置为 sharing=locked。

把 CI 缓存导入导出写进构建命令

临时 runner 每次都可能换一台机器,本地 cache mount 就会从空目录开始。CI 应该把 Dockerfile 层缓存导出到 registry,并在下一次构建前导入。点击路径可以记成 Builds → 当前构建 → Cache import/Cache export;真正稳定、可复制的配置仍然写在构建命令里:

# 导入主分支已有缓存,并把本次结果回写到当前分支
docker buildx build --push \
  -t registry.example.com/demo/app:ci \
  --cache-from type=registry,ref=registry.example.com/demo/app:buildcache-main \
  --cache-to type=registry,ref=registry.example.com/demo/app:buildcache-feature,mode=max \
  .

--cache-from 负责读,--cache-to 负责写;只写其中一边,缓存链路就不完整。主分支和功能分支最好使用不同的 cache ref,避免并发构建互相覆盖。mode=max 会包含更多中间层,通常更容易让后续构建命中,但导入导出数据也会更多;项目较小时可以先用默认的 min 再比较实际结果。

BuildKit 远端缓存导入导出状态说明图
图2:远端缓存导入导出状态说明图,重点看 cache ref、mode 和 Ready 状态。

用状态和日志判断缓存是否真的生效

验收时不要只看第二次构建变快。按下面路径检查:Builders → 当前 builder → Cache usage 查看本地缓存是否增长;在 CI 构建详情中查看是否出现 cache import/export;构建日志中再确认依赖下载和编译步骤是否被复用。

现象优先检查处理方向
每次都重新下载依赖Dockerfile 是否先复制依赖清单;cache mount 目标路径是否正确拆分 COPY,并确认命令使用相同的挂载目标
本地有效,CI 无效runner 是否每次新建;是否配置 cache-from增加 registry cache,导入主分支或稳定分支 ref
分支之间互相覆盖cache-to 的 ref 是否相同按分支或流水线范围拆分 ref
缓存越来越大docker buildx du 的占用明细确认保留范围后使用 prune 清理旧缓存
# 只清理超过一天未使用的构建缓存
docker buildx prune --filter until=24h

# 清理前先确认当前 builder,避免误操作其他节点
docker buildx ls

最后记住一个边界:cache mount 是性能辅助,不是依赖的唯一来源;registry cache 也不是镜像发布结果。即使两者都失效,干净 builder 仍应能够重新完成构建。

两个常见疑问

为什么配置了 cache-to,cache mount 仍然是空的?

因为 cache mount 保存在 builder 本地,不属于导出的 build cache。CI 换了新 builder 后,它自然从空目录开始;需要在 runner 上复用持久磁盘,或把依赖下载缓存交给 CI 平台的专用缓存机制。

registry cache 应该和镜像使用同一个标签吗?

不建议混用。镜像标签表达可运行产物,cache ref 表达构建中间层;为主分支、功能分支或不同流水线使用清晰独立的 ref,更容易回滚、清理和排查。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
开发工具 Git worktree 并行分支 怎样处理开发工具 Git worktree 并行分支 怎样处理
上一篇
开发工具 Git worktree 并行分支 怎样处理
开发工具 JetBrains 运行环境变量 怎样处理
下一篇
开发工具 JetBrains 运行环境变量 怎样处理
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    586次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    622次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    656次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    622次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    438次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码