当前位置:首页 > 文章列表 > Golang > Go问答 > Go 命令行工具怎么同时读标准输入和文件:参数设计、流式解析与错误退出码

Go 命令行工具怎么同时读标准输入和文件:参数设计、流式解析与错误退出码

来源:17golang原创 2026-07-21 10:26:51 0浏览 收藏

不少用Go写的命令行小工具,一开始只支持接收单个文件参数,碰到管道场景就会卡壳:上游程序已经把数据顺着管道传过来,工具还在等着用户输入文件名。我们直接写一个可跑通的Go日志筛选器,约定“有文件参数就读文件,没有参数就读标准输入”,逐行检查状态字段,只输出包含 status=error 的记录。

把文件和管道都看成同一个 io.Reader,入口只负责选择数据源,后面的解析、校验和输出逻辑就能共用同一条路径;输入错误返回2,业务筛选流程正常完成返回0。

要点速览

  • 文件参数和标准输入都可以收敛为 io.Reader,不用写两套解析逻辑。
  • bufio.Reader 适合逐行读取,长日志行不会受 Scanner 默认 token 长度限制影响。
  • 输入来源、字段格式校验和业务结果处理要分开实现,错误退出码才能被上层脚本正确识别。
  • 先用本地文件、管道输入、空输入三组场景做验证,再把工具接入定时任务或流水线。

先把命令行的使用场景定下来

这个小工具叫 logpick,输入是单行一条的文本日志:

time=10:00 level=info service=pay status=ok
time=10:01 level=error service=pay status=error request=7f31
time=10:02 level=warn service=stock status=retry

使用方式贴合Unix工具的通用使用习惯:

go run . app.log
cat app.log | go run .
go run . --service=pay app.log

传一个文件名就直接打开对应文件;不传文件名就读取 os.Stdin。文件和管道不同时作为输入源,入口规则越简单,后续的解析逻辑越容易做单元测试。

环境准备:只用标准库搭出最小项目

新建文件夹并初始化Go模块:

mkdir logpick
cd logpick
go mod init example.com/logpick

项目暂时只留一个 main.go。先把入口逻辑和错误边界理清楚,后续有需求再考虑扩展功能。

logpick 输入来源分层:文件参数和标准输入进入同一个逐行读取层,再流向字段解析和结果输出

核心代码:来源选择和解析共用一条路径

flag 负责接收可选的服务名参数,文件名保留为位置参数。文件和标准输入最终都返回 io.Reader,所以筛选函数不需要感知数据到底来自哪里。

package main

import (
    "bufio"
    "errors"
    "flag"
    "fmt"
    "io"
    "os"
    "strings"
)

func main() {
    service := flag.String("service", "", "only keep one service")
    flag.Parse()

    input, closeInput, err := openInput(flag.Args())
    if err != nil {
        fmt.Fprintln(os.Stderr, err)
        os.Exit(2)
    }
    defer closeInput()

    if err := filterLogs(input, os.Stdout, *service); err != nil {
        fmt.Fprintln(os.Stderr, err)
        os.Exit(2)
    }
}

func openInput(args []string) (io.Reader, func(), error) {
    if len(args) == 0 {
        return os.Stdin, func() {}, nil
    }
    if len(args) > 1 {
        return nil, func() {}, fmt.Errorf("only one input file is supported")
    }
    file, err := os.Open(args[0])
    if err != nil {
        return nil, func() {}, fmt.Errorf("open %s: %w", args[0], err)
    }
    return file, func() { _ = file.Close() }, nil
}

func filterLogs(input io.Reader, output io.Writer, service string) error {
    reader := bufio.NewReader(input)
    for {
        line, err := reader.ReadString('\n')
        if strings.TrimSpace(line) != "" && strings.Contains(line, "status=error") {
            if service == "" || strings.Contains(line, "service="+service) {
                if _, writeErr := io.WriteString(output, line); writeErr != nil {
                    return fmt.Errorf("write output: %w", writeErr)
                }
            }
        }
        if err != nil {
            if errors.Is(err, io.EOF) {
                return nil
            }
            return fmt.Errorf("read input: %w", err)
        }
    }
}

ReadString('\n') 在最后一行没有换行符时,可能同时返回内容和 io.EOF,所以要先处理读到的非空内容,再判断返回的错误。文件只在成功打开后才注册关闭动作,打开失败不会触发无效的关闭调用。

本地运行:三组输入就能覆盖核心边界

准备 app.log:

time=10:00 level=info service=pay status=ok
time=10:01 level=error service=pay status=error request=7f31
time=10:02 level=error service=stock status=error request=8a20

直接传入本地文件路径时,只会输出符合条件的两条错误记录:

go run . app.log
# time=10:01 level=error service=pay status=error request=7f31
# time=10:02 level=error service=stock status=error request=8a20

接入管道后,内部读取路径完全没有变化:

cat app.log | go run . --service=pay
# time=10:01 level=error service=pay status=error request=7f31

指定不存在的文件时,程序会往标准错误输出打印打开失败的提示,并且返回退出码 2:

go run . missing.log >/tmp/logpick.out
echo $?
# 2

不要只盯着终端有没有打印内容看。对调用这个工具的上层脚本来说,进程返回的退出码比一行文字提示更可靠。

logpick 验收路径:文件和管道经过同一解析层,错误输入进入退出码 2,筛选成功输出错误日志

接入脚本时,先约定空结果和坏输入的边界

当前实现里,“没有匹配到任何记录”属于正常处理完成,退出码仍是 0;“文件不存在、传入参数过多、读取数据失败”这类场景才返回 2。这种区分逻辑很适合做定时巡检场景:上层脚本可以把空结果当成没有异常,把输入类错误当成任务执行失败。

如果业务需要把“发现指定错误日志”也改成非零退出码,不要直接改写底层的读取函数。让筛选函数返回匹配到的记录总数,再由 main 统一决定输出内容和最终退出码,后续维护成本会低很多。读取、筛选、命令行策略各自只负责一块逻辑,后面新增JSON输出或者时间范围过滤这类功能时,不同模块的改动不会互相干扰。

常见问题

为什么不用 bufio.Scanner?

Scanner 写短行代码更简洁,但它自带默认的token大小上限。日志里经常会出现很长的堆栈或者完整请求体,用 Reader.ReadString 可以更灵活地控制读取行为。

文件参数和标准输入能同时读取吗?

可以自行设计规则,但第一版实现最好只允许单一输入源。单一来源的实现逻辑能让数据顺序、错误归属和资源关闭时机都更清晰,真的需要拼接多个输入时再补充明确的参数定义就好。

为什么错误信息要写到标准错误?

标准输出专门留着输出筛选后的结果,标准错误用来打印诊断类信息。这样调用方可以把结果重定向到文件,同时还能在终端看到文件打开或者数据读取失败的具体原因。

退出码一定要用 2 吗?

不一定。核心是团队内部先约定好不同退出码的含义,后续保持统一就行。示例里用0表示处理流程全部完成、2表示输入或读取类错误,上层脚本可以直接按这个约定做下一步判断。

验收清单

  • 传本地文件时能正确筛出 status=error,并且正常关闭文件句柄。
  • 不传文件参数时能从管道读取数据,就算最后一行没有换行符也不会丢内容。
  • 指定 --service 后只会输出对应服务的目标日志。
  • 文件不存在、参数过多、读取失败这类场景,都有标准错误提示和稳定的退出码。
  • 空输入场景属于正常完成还是异常报错,已经提前写进调用约定。

这类小工具的核心从来不是功能有多复杂,而是入口边界的处理是否稳定。把所有输入源统一成 io.Reader,再把筛选逻辑和退出码策略拆开实现,后续要接入压缩日志、定时任务或者流水线时,需要改动的代码量会少很多。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
PHP 文件下载接口如何防越权:资源归属校验、短时签名与审计日志PHP 文件下载接口如何防越权:资源归属校验、短时签名与审计日志
上一篇
PHP 文件下载接口如何防越权:资源归属校验、短时签名与审计日志
Go 请求 ID 中间件实战:从 HTTP 入口传到 context 和结构化日志
下一篇
Go 请求 ID 中间件实战:从 HTTP 入口传到 context 和结构化日志
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    584次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    622次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    655次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    622次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    436次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码