当前位置:首页 > 文章列表 > Golang > Go问答 > 在没有自定义 docker 镜像的情况下在 codebuild 中缓存 go 模块

在没有自定义 docker 镜像的情况下在 codebuild 中缓存 go 模块

来源:stackoverflow 2024-04-21 09:36:36 0浏览 收藏

目前golang学习网上已经有很多关于Golang的文章了,自己在初次阅读这些文章中,也见识到了很多学习思路;那么本文《在没有自定义 docker 镜像的情况下在 codebuild 中缓存 go 模块》,也希望能帮助到大家,如果阅读完后真的对你学习Golang有帮助,欢迎动动手指,评论留言并分享~

问题内容

tl;dr

如何使用 aws 提供的映像 (go 1.12) 在代码构建中缓存我的模块?

背景

我正在尝试使用来自 aws 的 go 映像 (1.12) 在 codebuild 中缓存 go 模块。

尝试缓存 /go/pkg/mod

深入挖掘后,我发现该图像中没有 /go/pkg 文件夹。因此,当我尝试缓存 /go/pkg 时,它会抛出错误。

安装 /go/pkg/mod 时出错:符号链接 /codebuild/local-cache/custom//go/pkg/mod /go/pkg/mod:没有这样的文件或目录

即使我运行 go mod download (这将创建 /go/pkg/mod,它也不会缓存该文件夹,因为 codebuild 无法提前安装它)。

这是我的 codebuild.yml

version: 0.2

phases:
  install:
    runtime-versions:
      golang: 1.12
      nodejs: 10
    commands:
      - npm install
  build:
    commands:
      - go build -ldflags="-s -w" -o api/bin/main api/main.go
cache:
  paths:
    - /go/src/**/*
    - /go/pkg/mod/**/*

尝试缓存 ./vendor

我还尝试缓存 ./vendor 文件夹,它不会在代码构建中引发任何错误。但是,我认为它不会缓存任何内容,因为构建时间不会减少。它还说它忽略符号链接。

警告:忽略符号链接 /codebuild/output/src074479210/src/github.com/kkesley/myrepo/vendor 去:寻找 github.com/aws/aws-lambda-go v1.11.1 去:找到 github.com/stretchr/testify v1.2.1 去:寻找 github.com/pmezard/go-difflib v1.0.0 去:寻找 github.com/davecgh/go-spew v1.1.0 去:找到 gopkg.in/urfave/cli.v1 v1.20.0 去:下载 github.com/aws/aws-lambda-go v1.11.1 go:提取 github.com/aws/aws-lambda-go v1.11.1

这是我的此版本的 codebuild.yml:

version: 0.2

phases:
  install:
    runtime-versions:
      golang: 1.12
      nodejs: 10
    commands:
      - npm install
      - go mod vendor
  build:
    commands:
      - go build -mod vendor -ldflags="-s -w" -o api/bin/main api/main.go
cache:
  paths:
    - /go/src/**/*
    - vendor/**/*

问题

如何在不使用自定义 docker 镜像的情况下在代码构建中缓存 go 模块?可能吗?


解决方案


让它与默认的 codebuild ubuntu 构建映像一起工作(我使用的是 v4)

  1. 确保在 codebuild 项目上启用本地缓存。转到编辑然后工件,然后确保勾选自定义缓存

  2. 设置缓存路径为/go/pkg/**.*

cache:
  paths:
    - '/go/pkg/**/*'
  1. 确保您的构建脚本在构建 go mod download 之前包含一个步骤。 在我这样做之前,缓存似乎不起作用,因此这似乎是关键的一步。

这是我的完整 buildspec.yml 供参考

version: 0.2

phases:
  install:
    runtime-versions:
      golang: latest
    commands:
      - "git config --global credential.helper '!aws codecommit credential-helper $@'"
      - "git config --global credential.UseHttpPath true"
  build:
    commands:
      - 'go mod edit -dropreplace git-codecommit.ap-southeast-2.amazonaws.com/v1/repos/xyz'
      - 'go mod download'
      # Use latest from develop for the build (test env only)
      - 'go get git-codecommit.ap-southeast-2.amazonaws.com/v1/repos/xyz@develop'
      - 'rm -rf "dist"'
      - 'cp -r "eb-template" "dist"'
      - 'env GOOS=linux GOARCH=amd64 go build -o "dist/bin/server"'
      - 'go mod edit -replace git-codecommit.ap-southeast-2.amazonaws.com/v1/repos/xyz=../xyz'
      - 'echo -n ${CODEBUILD_RESOLVED_SOURCE_VERSION} > dist/commithash'

artifacts:
  base-directory: dist
  files:
    - '**/*'

cache:
  paths:
    - '/go/pkg/**/*'

以上就是《在没有自定义 docker 镜像的情况下在 codebuild 中缓存 go 模块》的详细内容,更多关于的资料请关注golang学习网公众号!

版本声明
本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
战略、品牌完美统一,荣耀启用顶级域名“honor.com”战略、品牌完美统一,荣耀启用顶级域名“honor.com”
上一篇
战略、品牌完美统一,荣耀启用顶级域名“honor.com”
高合汽车直播带货“自救”:推销各种食品,声称收入将用于售后服务
下一篇
高合汽车直播带货“自救”:推销各种食品,声称收入将用于售后服务
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    402次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    478次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    487次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    433次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    260次使用