Golang并发日志轮转与监控实战教程
golang学习网今天将给大家带来《Golang并发日志轮转与监控实战示例》,感兴趣的朋友请继续看下去吧!以下内容将会涉及到等等知识点,如果你是正在学习Golang或者已经是大佬级别了,都非常欢迎也希望大家都能给我建议评论哈~希望能帮助到大家!
答案:文章介绍了Go高并发场景下的日志管理方案,通过sync.Mutex实现并发安全写入,结合按大小轮转与异步写入避免性能瓶颈,并扩展SafeLogger加入日志计数器以采集监控指标,最后使用zap实现结构化日志输出,整体方案兼顾性能、安全与可观测性。

在高并发的 Go 应用中,日志是排查问题和监控系统状态的重要工具。但若不加以管理,日志文件可能迅速膨胀,影响性能和磁盘使用。同时,缺乏监控会导致异常无法及时发现。本文提供一个结合 并发安全日志记录、按大小轮转、异步写入 以及 基础监控指标采集 的实用示例。
1. 并发安全的日志写入器
使用 sync.Mutex 保护文件写入操作,确保多个 goroutine 同时调用不会导致日志错乱或损坏。
type SafeLogger struct {
mu sync.Mutex
file *os.File
path string
size int64
maxLen int64
}
<p>func NewSafeLogger(logPath string, maxSize int64) *SafeLogger {
file, err := os.OpenFile(logPath, os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0644)
if err != nil {
log.Fatalf("无法打开日志文件: %v", err)
}</p><pre class="brush:php;toolbar:false;">fi, _ := file.Stat()
return &SafeLogger{
file: file,
path: logPath,
size: fi.Size(),
maxLen: maxSize,
}}
func (l *SafeLogger) Write(p []byte) (n int, err error) { l.mu.Lock() defer l.mu.Unlock()
// 检查是否需要轮转
if l.size+int64(len(p)) > l.maxLen {
l.rotate()
}
n, err = l.file.Write(p)
l.size += int64(n)
return}
func (l *SafeLogger) rotate() error { l.file.Close()
// 重命名旧文件
backup := l.path + "." + time.Now().Format("20060102_150405")
os.Rename(l.path, backup)
// 创建新文件
newFile, err := os.Create(l.path)
if err != nil {
log.Printf("创建新日志文件失败: %v", err)
return err
}
l.file = newFile
l.size = 0
log.Printf("日志已轮转: %s -> %s", l.path, backup)
return nil}
func (l *SafeLogger) Close() { l.mu.Lock() defer l.mu.Unlock() l.file.Close() }
2. 使用 zap 实现高性能结构化日志
uber-go/zap 是 Go 中性能极高的日志库,支持结构化输出。我们将它与自定义的 WriteSyncer 结合,实现带轮转的异步日志。
import "go.uber.org/zap"
import "go.uber.org/zap/zapcore"
<p>func setupZapLogger(logger <em>SafeLogger) </em>zap.Logger {
writeSyncer := zapcore.AddSync(logger)
encoder := zapcore.NewJSONEncoder(zap.NewProductionEncoderConfig())</p><pre class="brush:php;toolbar:false;">core := zapcore.NewCore(encoder, writeSyncer, zap.InfoLevel)
return zap.New(core)}
这样,所有通过 zap 记录的日志都会经过我们的 SafeLogger,自动处理并发和轮转。
3. 添加基础监控:日志量统计
我们可以扩展 SafeLogger,加入简单的计数器,用于监控单位时间内的日志写入量。
type SafeLogger struct {
mu sync.Mutex
file *os.File
path string
size int64
maxLen int64
logCounter int64 // 新增:日志条数
}
<p>// 在 Write 方法中增加:
atomic.AddInt64(&l.logCounter, 1)</p><p>// 提供获取统计信息的方法
func (l *SafeLogger) Stats() map[string]interface{} {
return map[string]interface{}{
"current_size": l.size,
"log_count": atomic.LoadInt64(&l.logCounter),
"file_path": l.path,
}
}</p>你可以通过 HTTP 接口定期暴露这些指标,接入 Prometheus 或其他监控系统。
4. 完整使用示例
启动多个 goroutine 写日志,并模拟监控采集。
func main() {
logger := NewSafeLogger("app.log", 1<<20) // 1MB 轮转
defer logger.Close()
<pre class="brush:php;toolbar:false;">zapLogger := setupZapLogger(logger)
defer zapLogger.Sync()
// 并发写日志
for i := 0; i < 10; i++ {
go func(id int) {
for j := 0; j < 100; j++ {
zapLogger.Info("处理请求",
zap.Int("worker", id),
zap.Int("req_id", j),
zap.String("endpoint", "/api/data"))
time.Sleep(10 * time.Millisecond)
}
}(i)
}
// 监控协程
go func() {
ticker := time.NewTicker(5 * time.Second)
for range ticker.C {
stats := logger.Stats()
fmt.Printf("监控: %+v\n", stats)
}
}()
time.Sleep(30 * time.Second)}
基本上就这些。这个示例展示了如何在并发场景下安全地写日志,自动轮转防止文件过大,并加入简单监控能力。实际项目中可进一步集成告警、远程日志推送等功能。
本篇关于《Golang并发日志轮转与监控实战教程》的介绍就到此结束啦,但是学无止境,想要了解学习更多关于Golang的相关知识,请关注golang学习网公众号!
PHP调用远程文件同步服务方法
- 上一篇
- PHP调用远程文件同步服务方法
- 下一篇
- 网易邮箱大师AI整理功能使用教程
-
- Golang · Go教程 | 7小时前 |
- Go语言实现与外部程序持续通信技巧
- 229浏览 收藏
-
- Golang · Go教程 | 7小时前 |
- GolangWeb错误处理技巧分享
- 190浏览 收藏
-
- Golang · Go教程 | 7小时前 |
- Go语言error接口错误返回实例解析
- 324浏览 收藏
-
- Golang · Go教程 | 7小时前 |
- Golang模板方法模式实战解析
- 180浏览 收藏
-
- Golang · Go教程 | 7小时前 | golang dockercompose 健康检查 多阶段构建 启动优化
- Golang优化Docker多容器启动技巧
- 228浏览 收藏
-
- Golang · Go教程 | 7小时前 |
- 优化Golang模块缓存,提升构建效率技巧
- 483浏览 收藏
-
- Golang · Go教程 | 7小时前 |
- Go递归函数返回值处理方法
- 353浏览 收藏
-
- Golang · Go教程 | 8小时前 |
- Golang微服务容器化部署指南
- 226浏览 收藏
-
- Golang · Go教程 | 8小时前 |
- Golang静态资源管理实战指南
- 186浏览 收藏
-
- Golang · Go教程 | 8小时前 | golang 自定义函数 模板渲染 html/template 模板语法
- Golang模板渲染教程与使用详解
- 104浏览 收藏
-
- Golang · Go教程 | 8小时前 |
- Go模块版本管理全攻略
- 268浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- ChatExcel酷表
- ChatExcel酷表是由北京大学团队打造的Excel聊天机器人,用自然语言操控表格,简化数据处理,告别繁琐操作,提升工作效率!适用于学生、上班族及政府人员。
- 3182次使用
-
- Any绘本
- 探索Any绘本(anypicturebook.com/zh),一款开源免费的AI绘本创作工具,基于Google Gemini与Flux AI模型,让您轻松创作个性化绘本。适用于家庭、教育、创作等多种场景,零门槛,高自由度,技术透明,本地可控。
- 3393次使用
-
- 可赞AI
- 可赞AI,AI驱动的办公可视化智能工具,助您轻松实现文本与可视化元素高效转化。无论是智能文档生成、多格式文本解析,还是一键生成专业图表、脑图、知识卡片,可赞AI都能让信息处理更清晰高效。覆盖数据汇报、会议纪要、内容营销等全场景,大幅提升办公效率,降低专业门槛,是您提升工作效率的得力助手。
- 3425次使用
-
- 星月写作
- 星月写作是国内首款聚焦中文网络小说创作的AI辅助工具,解决网文作者从构思到变现的全流程痛点。AI扫榜、专属模板、全链路适配,助力新人快速上手,资深作者效率倍增。
- 4529次使用
-
- MagicLight
- MagicLight.ai是全球首款叙事驱动型AI动画视频创作平台,专注于解决从故事想法到完整动画的全流程痛点。它通过自研AI模型,保障角色、风格、场景高度一致性,让零动画经验者也能高效产出专业级叙事内容。广泛适用于独立创作者、动画工作室、教育机构及企业营销,助您轻松实现创意落地与商业化。
- 3802次使用
-
- Golangmap实践及实现原理解析
- 2022-12-28 505浏览
-
- go和golang的区别解析:帮你选择合适的编程语言
- 2023-12-29 503浏览
-
- 试了下Golang实现try catch的方法
- 2022-12-27 502浏览
-
- 如何在go语言中实现高并发的服务器架构
- 2023-08-27 502浏览
-
- 提升工作效率的Go语言项目开发经验分享
- 2023-11-03 502浏览

