解决使用Go语言时阅读缓存DIY书籍时可能遇到的线程安全问题
来源:stackoverflow
2024-03-02 17:03:24
0浏览
收藏
学习Golang要努力,但是不要急!今天的这篇文章《解决使用Go语言时阅读缓存DIY书籍时可能遇到的线程安全问题》将会介绍到等等知识点,如果你想深入学习Golang,可以关注我!我会持续更新相关文章的,希望对大家都能有所帮助!
问题内容
我正在读一本教我如何编写像 redis 这样的简单缓存的书。
为了实现分布式哈希,项目必须进行密钥迁移,这需要迭代器。我认为可能存在一些问题。
他的书上讲了迭代一个map,但是迭代时,读锁的持有不是连续的。原因是试图不影响主缓存进程。我相信一定存在线程安全问题,因为主缓存线程仍在写入map。我写了一个演示,但不确定。
//book code type inMemoryScanner struct { pair pair Chan *pair closeCh chan struct{} } func (c *inMemoryCache) NewScanner() Scanner { pairCh := make(chan *pair) closeCh := make(chan struct{}) go func() { defer close(pairCh) c.mutex.RLock() //the c.c is book's map for k, v := range c.c { c.mutex.RUnlock() select { case <-closeCh: return case pairCh <- &pair{k, v}: } c.mutex.RLock() } c.mutex.RUnLock() } return &inMemoryScanner{pair{}, pairCh, closeCh} } //my demo func main() { testMap := make(map[string]string) mutex := sync.RWMutex{} for i := 0; i < 64; i ++ { mutex.Lock() testMap[uuid.New().String()] = uuid.New().String() mutex.Unlock() fmt.Println("Write") } go func() { for { mutex.Lock() testMap[uuid.New().String()] = uuid.New().String() time.Sleep(100 * time.Millisecond) mutex.Unlock() fmt.Println("Write") } } () for k, v := range testMap { mutex.RLock() fmt.Println("k" + k + "v" + v) mutex.RUnlock() time.Sleep(100 * time.Millisecond) } }
在我的演示中,“写入”和地图的结果数量不相等!而且我相信,在现实项目中,重新平衡不可能是一次,必须有持续的后台工作,不是吗?
解决方案
您正在进行数据竞赛。您的结果未定义。
简化代码以便其编译和运行,
package main import ( "sync" "time" ) func main() { testmap := make(map[string]string) mutex := sync.rwmutex{} for i := 0; i < 64; i++ { mutex.lock() now := time.now().string() testmap[now] = now mutex.unlock() } go func() { for { mutex.lock() now := time.now().string() testmap[now] = now time.sleep(100 * time.millisecond) mutex.unlock() } }() for k, v := range testmap { mutex.rlock() _, _ = k, v mutex.runlock() time.sleep(100 * time.millisecond) } }
输出:
$ go run -race racer.go ================== warning: data race read at 0x00c00008c060 by main goroutine: runtime.mapiternext() /home/peter/go/src/runtime/map.go:844 +0x0 main.main() /home/peter/gopath/src/racer.go:26 +0x217 previous write at 0x00c00008c060 by goroutine 5: runtime.mapassign_faststr() /home/peter/go/src/runtime/map_faststr.go:202 +0x0 main.main.func1() /home/peter/gopath/src/racer.go:21 +0x9b goroutine 5 (running) created at: main.main() /home/peter/gopath/src/racer.go:17 +0x17b ================== ================== warning: data race read at 0x00c0000a6638 by main goroutine: main.main() /home/peter/gopath/src/racer.go:26 +0x1d0 previous write at 0x00c0000a6638 by goroutine 5: main.main.func1() /home/peter/gopath/src/racer.go:21 +0xb0 goroutine 5 (running) created at: main.main() /home/peter/gopath/src/racer.go:17 +0x17b ================== fatal error: concurrent map iteration and map write goroutine 1 [running]: runtime.throw(0x4b1eb7, 0x26) /home/peter/go/src/runtime/panic.go:617 +0x72 fp=0xc000059e48 sp=0xc000059e18 pc=0x44d722 runtime.mapiternext(0xc000059f28) /home/peter/go/src/runtime/map.go:851 +0x55e fp=0xc000059ed0 sp=0xc000059e48 pc=0x434c2e main.main() /home/peter/gopath/src/racer.go:26 +0x218 fp=0xc000059f98 sp=0xc000059ed0 pc=0x48a1f8 runtime.main() /home/peter/go/src/runtime/proc.go:200 +0x20c fp=0xc000059fe0 sp=0xc000059f98 pc=0x44f06c runtime.goexit() /home/peter/go/src/runtime/asm_amd64.s:1337 +0x1 fp=0xc000059fe8 sp=0xc000059fe0 pc=0x475751 goroutine 4 [sleep]: runtime.goparkunlock(...) /home/peter/go/src/runtime/proc.go:307 time.sleep(0x5f5e100) /home/peter/go/src/runtime/time.go:105 +0x159 main.main.func1(0xc00001c280, 0xc00008c060) /home/peter/gopath/src/racer.go:22 +0x3e created by main.main /home/peter/gopath/src/racer.go:17 +0x17c exit status 2 $
您没有锁定地图读取,
for k, v := range testmap { mutex.rlock() _, _ = k, v mutex.runlock() time.sleep(100 * time.millisecond) }
for k, v := range testmap { ... }
读取地图。 k、v
是局部变量。
您需要锁定地图读取,
mutex.RLock() for k, v := range testMap { _, _ = k, v time.Sleep(100 * time.Millisecond) } mutex.RUnlock()
The Go Blog: Introducing the Go Race Detector
GopherCon 2016: Keith Randall - Inside the Map Implementation
今天关于《解决使用Go语言时阅读缓存DIY书籍时可能遇到的线程安全问题》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!
版本声明
本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除

- 上一篇
- 探究 Golang 架构的主要组成部分

- 下一篇
- Go 二进制文件应该放在哪个位置?
查看更多
最新文章
-
- Golang · Go问答 | 1年前 |
- 在读取缓冲通道中的内容之前退出
- 139浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 戈兰岛的全球 GOPRIVATE 设置
- 204浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何将结构作为参数传递给 xml-rpc
- 325浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何用golang获得小数点以下两位长度?
- 477浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何通过 client-go 和 golang 检索 Kubernetes 指标
- 486浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 将多个“参数”映射到单个可变参数的习惯用法
- 439浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 将 HTTP 响应正文写入文件后出现 EOF 错误
- 357浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 结构中映射的匿名列表的“复合文字中缺少类型”
- 352浏览 收藏
-
- Golang · Go问答 | 1年前 |
- NATS Jetstream 的性能
- 101浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何将复杂的字符串输入转换为mapstring?
- 440浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 相当于GoLang中Java将Object作为方法参数传递
- 212浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何确保所有 goroutine 在没有 time.Sleep 的情况下终止?
- 143浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 484次学习
查看更多
AI推荐
-
- 互联网信息服务算法备案系统
- 了解互联网信息服务算法备案系统,掌握如何进行算法备案的详细步骤和要求,确保您的互联网服务合规运营。
- 54次使用
-
- 魔匠AI
- SEO摘要魔匠AI专注于高质量AI学术写作,已稳定运行6年。提供无限改稿、选题优化、大纲生成、多语言支持、真实参考文献、数据图表生成、查重降重等全流程服务,确保论文质量与隐私安全。适用于专科、本科、硕士学生及研究者,满足多语言学术需求。
- 99次使用
-
- PPTFake答辩PPT生成器
- PPTFake答辩PPT生成器,专为答辩准备设计,极致高效生成PPT与自述稿。智能解析内容,提供多样模板,数据可视化,贴心配套服务,灵活自主编辑,降低制作门槛,适用于各类答辩场景。
- 123次使用
-
- Lovart
- SEO摘要探索Lovart AI,这款专注于设计领域的AI智能体,通过多模态模型集成和智能任务拆解,实现全链路设计自动化。无论是品牌全案设计、广告与视频制作,还是文创内容创作,Lovart AI都能满足您的需求,提升设计效率,降低成本。
- 226次使用
-
- 美图AI抠图
- 美图AI抠图,依托CVPR 2024竞赛亚军技术,提供顶尖的图像处理解决方案。适用于证件照、商品、毛发等多场景,支持批量处理,3秒出图,零PS基础也能轻松操作,满足个人与商业需求。
- 118次使用
查看更多
相关文章
-
- GoLand调式动态执行代码
- 2023-01-13 502浏览
-
- 用Nginx反向代理部署go写的网站。
- 2023-01-17 502浏览
-
- Golang取得代码运行时间的问题
- 2023-02-24 501浏览
-
- 请问 go 代码如何实现在代码改动后不需要Ctrl+c,然后重新 go run *.go 文件?
- 2023-01-08 501浏览
-
- 如何从同一个 io.Reader 读取多次
- 2023-04-11 501浏览