从存储桶将多个文件传递给 exec.Command 调用
来源:stackoverflow
2024-04-02 16:54:34
0浏览
收藏
亲爱的编程学习爱好者,如果你点开了这篇文章,说明你对《从存储桶将多个文件传递给 exec.Command 调用》很感兴趣。本篇文章就来给大家详细解析一下,主要介绍一下,希望所有认真读完的童鞋们,都有实质性的提高。
问题内容
我正在尝试构建一个用 go 编写的云函数,它将使用 google cloud functions 基础架构中可用的 imagemagick 库来将多个图像合成和操作为最终的输出图像。
问题的根源是我想使用的 imagemagick 函数可用,但它需要多个不同的输入才能工作。我的输入是存储桶中的对象。
os/exec cmd 结构允许您通过使用“extrafiles”数组来执行此操作,并且我知道如何向我的 imagemagick 命令提供这些额外文件。
但是,“extrafiles”数组只想存储 os.file 的实例,而 gcp 存储客户端在您打开文件时会为您提供一个“reader”实例。
backgroundBlob := storageClient.Bucket(inputBucket).Object(background)
backgroundImg, err := backgroundBlob.NewReader(ctx)
if err != nil {
return "", fmt.Errorf("backgroundImg: %v", err)
}
foregroundBlob := storageClient.Bucket(inputBucket).Object(foreground)
foregroundImg, err := foregroundBlob.NewReader(ctx)
if err != nil {
return "", fmt.Errorf("foregroundImg: %v", err)
}
outputBlob := storageClient.Bucket(outputBucket).Object(output)
outputImg := outputBlob.NewWriter(ctx)
defer outputImg.Close()
// Set up some additional file handles since we're dealing with more inputs than STDIN Can cope with
cmd := exec.Command("convert", "fd:3", "fd:4", "-composite", "fd:5")
cmd.ExtraFiles = append(cmd.ExtraFiles,backgroundImg)
cmd.ExtraFiles = append(cmd.ExtraFiles,foregroundImg)
cmd.ExtraFiles = append(cmd.ExtraFiles,outputImg)
if err := cmd.Run(); err != nil {
return "", fmt.Errorf("cmd.Run: %v", err)
}
log.Printf("Blurred image has been uploaded to %s", outputBlob.ObjectName())
return outputBlob.ObjectName(), nil
}```
So, from where I am at the moment, I need to do one of the following two things:
1. Figure out how to get Google's storage API to treat/use objects in their storage buckets as "os.File"s
OR
2. Figure out how to execute my "convert" command using multiple Readers as input, rather than leveraging the ExtraFiles array.
If anybody out there has any ideas on how to achieve either of the above, or has alternate ways of solving this problem, I would be very grateful to hear them!解决方案
对于将来遇到这个问题的任何人 - 我找到了一个解决方法。我对它并不满意,但它很实用。
本质上,我能够获取存储读取器的内容,然后在 cloud functions 上下文中创建我自己的 os.file 对象。然后,将该 os.file 传递给 exec.cmd 调用。这绝对不理想,但代码如下:
func Overlay(ctx context.Context, inputBucket, outputBucket, background string, foreground string, output string) (string, error) {
// Retrieve the Background Image from the storage API
backgroundBlob := storageClient.Bucket(inputBucket).Object(background)
backgroundImg, err := backgroundBlob.NewReader(ctx)
if err != nil {
return "", fmt.Errorf("backgroundImg: %v", err)
}
// Read the contents of the file into a variable
backgroundSlurp, err := ioutil.ReadAll(backgroundImg)
if err != nil {
return "", fmt.Errorf("readFile: unable to read data from bucket %q, file %q: %v", inputBucket, background, err)
}
// Write the contents of Background Image to an os.File instance
err = ioutil.WriteFile(fmt.Sprintf("/tmp/%s",background), backgroundSlurp, 0644)
if err != nil {
return "", fmt.Errorf("backgroundImg: %v", err)
}
// Open the os.File instance to pass it on to os.exec later
backgroundFile, err := os.Open(fmt.Sprintf("/tmp/%s",background))
if err != nil {
return "", fmt.Errorf("backgroundFile: %v", err)
}
foregroundBlob := storageClient.Bucket(inputBucket).Object(foreground)
foregroundImg, err := foregroundBlob.NewReader(ctx)
if err != nil {
return "", fmt.Errorf("foregroundImg: %v", err)
}
// Read the contents of the file into a variable
foreroundSlurp, err := ioutil.ReadAll(foregroundImg)
if err != nil {
return "", fmt.Errorf("readFile: unable to read data from bucket %q, file %q: %v", inputBucket, foreground, err)
}
// Write the contents of Foreground Image to an os.File instance
err = ioutil.WriteFile(fmt.Sprintf("/tmp/%s",foreground), foreroundSlurp, 0644)
if err != nil {
return "", fmt.Errorf("foregroundImg: %v", err)
}
// Open the os.File instance to pass it on to os.exec later
foregroundFile, err := os.Open(fmt.Sprintf("/tmp/%s",foreground))
if err != nil {
return "", fmt.Errorf("foregroundFile: %v", err)
}
outputBlob := storageClient.Bucket(outputBucket).Object(output)
outputImg := outputBlob.NewWriter(ctx)
defer outputImg.Close()
// Set up some additional file handles since we're delaqing with more inputs than STDIN Can cope with
cmd := exec.Command("convert", "fd:3", "fd:4", "-composite", "-")
cmd.Stdout = outputImg
cmd.ExtraFiles = append(cmd.ExtraFiles,backgroundFile)
cmd.ExtraFiles = append(cmd.ExtraFiles,foregroundFile)
if err := cmd.Run(); err != nil {
return "", fmt.Errorf("cmd.Run: %v", err)
}
log.Printf("Blurred image has been uploaded to %s", outputBlob.ObjectName())
return outputBlob.ObjectName(), nil
}以上就是《从存储桶将多个文件传递给 exec.Command 调用》的详细内容,更多关于的资料请关注golang学习网公众号!
版本声明
本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
为什么 `go env` 命令不反映环境变量的变化?
- 上一篇
- 为什么 `go env` 命令不反映环境变量的变化?
- 下一篇
- 如何处理服务器上客户端断开连接的情况
查看更多
最新文章
-
- Golang · Go问答 | 1天前 | 并发 · go · 初始化 · Go 初始化错误 sync.OnceValue 并发排障
- OnceValue 初始化错误缓存后的恢复策略
- 500浏览 收藏
-
- Golang · Go问答 | 1天前 | 并发 · go · Go sync.RWMutex 并发排障 读锁升级
- RWMutex 写锁升级导致阻塞时的改造方案
- 395浏览 收藏
-
- Golang · Go问答 | 1天前 | 并发 · go · Go sync.Mutex 指针接收者 copylocks 并发排障
- sync.Mutex 复制后出现异常解锁的结构体设计
- 448浏览 收藏
-
- Golang · Go问答 | 1天前 | 并发 · go · Go wait add sync.WaitGroup Done 并发收尾 WaitGroup.Go
- WaitGroup Go 方法调用顺序的并发收尾
- 455浏览 收藏
-
- Golang · Go问答 | 1天前 | 并发 · go · Context · Go context Context.Value WithValue
- context.WithValue 键类型冲突导致字段覆盖的规避
- 277浏览 收藏
-
- Golang · Go问答 | 1天前 |
- context.Cause 区分主动取消与超时取消
- 485浏览 收藏
-
- Golang · Go问答 | 1天前 | go ·
- context.AfterFunc 回调未执行时的取消时序
- 342浏览 收藏
-
- Golang · Go问答 | 1天前 |
- HTTP Trailer 读取为空时的响应头声明顺序
- 448浏览 收藏
-
- Golang · Go问答 | 1天前 |
- HTTP 服务器读取请求体超时的连接处理
- 290浏览 收藏
-
- Golang · Go问答 | 1天前 |
- net/http 客户端关闭连接后请求体重用的限制
- 497浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
查看更多
AI推荐
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 427次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 506次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 518次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 461次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 291次使用
查看更多
相关文章
-
- 用Nginx反向代理部署go写的网站。
- 2023-01-17 502浏览
-
- GoLand调式动态执行代码
- 2023-01-13 502浏览
-
- Go crypto/rand.Text 的长度为什么不是固定字符数
- 2026-10-04 501浏览
-
- Go strings.ToValidUTF8 清洗日志内容的边界
- 2026-10-03 501浏览
-
- Go tls.GetCertificate 为什么收不到空 ServerName 请求
- 2026-09-27 501浏览

