解决使用Go语言时阅读缓存DIY书籍时可能遇到的线程安全问题
来源:stackoverflow
2024-03-02 17:03:24
0浏览
收藏
学习Golang要努力,但是不要急!今天的这篇文章《解决使用Go语言时阅读缓存DIY书籍时可能遇到的线程安全问题》将会介绍到等等知识点,如果你想深入学习Golang,可以关注我!我会持续更新相关文章的,希望对大家都能有所帮助!
问题内容
我正在读一本教我如何编写像 redis 这样的简单缓存的书。
为了实现分布式哈希,项目必须进行密钥迁移,这需要迭代器。我认为可能存在一些问题。
他的书上讲了迭代一个map,但是迭代时,读锁的持有不是连续的。原因是试图不影响主缓存进程。我相信一定存在线程安全问题,因为主缓存线程仍在写入map。我写了一个演示,但不确定。
//book code type inMemoryScanner struct { pair pair Chan *pair closeCh chan struct{} } func (c *inMemoryCache) NewScanner() Scanner { pairCh := make(chan *pair) closeCh := make(chan struct{}) go func() { defer close(pairCh) c.mutex.RLock() //the c.c is book's map for k, v := range c.c { c.mutex.RUnlock() select { case <-closeCh: return case pairCh <- &pair{k, v}: } c.mutex.RLock() } c.mutex.RUnLock() } return &inMemoryScanner{pair{}, pairCh, closeCh} } //my demo func main() { testMap := make(map[string]string) mutex := sync.RWMutex{} for i := 0; i < 64; i ++ { mutex.Lock() testMap[uuid.New().String()] = uuid.New().String() mutex.Unlock() fmt.Println("Write") } go func() { for { mutex.Lock() testMap[uuid.New().String()] = uuid.New().String() time.Sleep(100 * time.Millisecond) mutex.Unlock() fmt.Println("Write") } } () for k, v := range testMap { mutex.RLock() fmt.Println("k" + k + "v" + v) mutex.RUnlock() time.Sleep(100 * time.Millisecond) } }
在我的演示中,“写入”和地图的结果数量不相等!而且我相信,在现实项目中,重新平衡不可能是一次,必须有持续的后台工作,不是吗?
解决方案
您正在进行数据竞赛。您的结果未定义。
简化代码以便其编译和运行,
package main import ( "sync" "time" ) func main() { testmap := make(map[string]string) mutex := sync.rwmutex{} for i := 0; i < 64; i++ { mutex.lock() now := time.now().string() testmap[now] = now mutex.unlock() } go func() { for { mutex.lock() now := time.now().string() testmap[now] = now time.sleep(100 * time.millisecond) mutex.unlock() } }() for k, v := range testmap { mutex.rlock() _, _ = k, v mutex.runlock() time.sleep(100 * time.millisecond) } }
输出:
$ go run -race racer.go ================== warning: data race read at 0x00c00008c060 by main goroutine: runtime.mapiternext() /home/peter/go/src/runtime/map.go:844 +0x0 main.main() /home/peter/gopath/src/racer.go:26 +0x217 previous write at 0x00c00008c060 by goroutine 5: runtime.mapassign_faststr() /home/peter/go/src/runtime/map_faststr.go:202 +0x0 main.main.func1() /home/peter/gopath/src/racer.go:21 +0x9b goroutine 5 (running) created at: main.main() /home/peter/gopath/src/racer.go:17 +0x17b ================== ================== warning: data race read at 0x00c0000a6638 by main goroutine: main.main() /home/peter/gopath/src/racer.go:26 +0x1d0 previous write at 0x00c0000a6638 by goroutine 5: main.main.func1() /home/peter/gopath/src/racer.go:21 +0xb0 goroutine 5 (running) created at: main.main() /home/peter/gopath/src/racer.go:17 +0x17b ================== fatal error: concurrent map iteration and map write goroutine 1 [running]: runtime.throw(0x4b1eb7, 0x26) /home/peter/go/src/runtime/panic.go:617 +0x72 fp=0xc000059e48 sp=0xc000059e18 pc=0x44d722 runtime.mapiternext(0xc000059f28) /home/peter/go/src/runtime/map.go:851 +0x55e fp=0xc000059ed0 sp=0xc000059e48 pc=0x434c2e main.main() /home/peter/gopath/src/racer.go:26 +0x218 fp=0xc000059f98 sp=0xc000059ed0 pc=0x48a1f8 runtime.main() /home/peter/go/src/runtime/proc.go:200 +0x20c fp=0xc000059fe0 sp=0xc000059f98 pc=0x44f06c runtime.goexit() /home/peter/go/src/runtime/asm_amd64.s:1337 +0x1 fp=0xc000059fe8 sp=0xc000059fe0 pc=0x475751 goroutine 4 [sleep]: runtime.goparkunlock(...) /home/peter/go/src/runtime/proc.go:307 time.sleep(0x5f5e100) /home/peter/go/src/runtime/time.go:105 +0x159 main.main.func1(0xc00001c280, 0xc00008c060) /home/peter/gopath/src/racer.go:22 +0x3e created by main.main /home/peter/gopath/src/racer.go:17 +0x17c exit status 2 $
您没有锁定地图读取,
for k, v := range testmap { mutex.rlock() _, _ = k, v mutex.runlock() time.sleep(100 * time.millisecond) }
for k, v := range testmap { ... }
读取地图。 k、v
是局部变量。
您需要锁定地图读取,
mutex.RLock() for k, v := range testMap { _, _ = k, v time.Sleep(100 * time.Millisecond) } mutex.RUnlock()
The Go Blog: Introducing the Go Race Detector
GopherCon 2016: Keith Randall - Inside the Map Implementation
今天关于《解决使用Go语言时阅读缓存DIY书籍时可能遇到的线程安全问题》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!
版本声明
本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除

- 上一篇
- 探究 Golang 架构的主要组成部分

- 下一篇
- Go 二进制文件应该放在哪个位置?
查看更多
最新文章
-
- Golang · Go问答 | 1年前 |
- 在读取缓冲通道中的内容之前退出
- 139浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 戈兰岛的全球 GOPRIVATE 设置
- 204浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何将结构作为参数传递给 xml-rpc
- 325浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何用golang获得小数点以下两位长度?
- 477浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何通过 client-go 和 golang 检索 Kubernetes 指标
- 486浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 将多个“参数”映射到单个可变参数的习惯用法
- 439浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 将 HTTP 响应正文写入文件后出现 EOF 错误
- 357浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 结构中映射的匿名列表的“复合文字中缺少类型”
- 352浏览 收藏
-
- Golang · Go问答 | 1年前 |
- NATS Jetstream 的性能
- 101浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何将复杂的字符串输入转换为mapstring?
- 440浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 相当于GoLang中Java将Object作为方法参数传递
- 212浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何确保所有 goroutine 在没有 time.Sleep 的情况下终止?
- 143浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 484次学习
查看更多
AI推荐
-
- 茅茅虫AIGC检测
- 茅茅虫AIGC检测,湖南茅茅虫科技有限公司倾力打造,运用NLP技术精准识别AI生成文本,提供论文、专著等学术文本的AIGC检测服务。支持多种格式,生成可视化报告,保障您的学术诚信和内容质量。
- 42次使用
-
- 赛林匹克平台(Challympics)
- 探索赛林匹克平台Challympics,一个聚焦人工智能、算力算法、量子计算等前沿技术的赛事聚合平台。连接产学研用,助力科技创新与产业升级。
- 62次使用
-
- 笔格AIPPT
- SEO 笔格AIPPT是135编辑器推出的AI智能PPT制作平台,依托DeepSeek大模型,实现智能大纲生成、一键PPT生成、AI文字优化、图像生成等功能。免费试用,提升PPT制作效率,适用于商务演示、教育培训等多种场景。
- 72次使用
-
- 稿定PPT
- 告别PPT制作难题!稿定PPT提供海量模板、AI智能生成、在线协作,助您轻松制作专业演示文稿。职场办公、教育学习、企业服务全覆盖,降本增效,释放创意!
- 67次使用
-
- Suno苏诺中文版
- 探索Suno苏诺中文版,一款颠覆传统音乐创作的AI平台。无需专业技能,轻松创作个性化音乐。智能词曲生成、风格迁移、海量音效,释放您的音乐灵感!
- 70次使用
查看更多
相关文章
-
- GoLand调式动态执行代码
- 2023-01-13 502浏览
-
- 用Nginx反向代理部署go写的网站。
- 2023-01-17 502浏览
-
- Golang取得代码运行时间的问题
- 2023-02-24 501浏览
-
- 请问 go 代码如何实现在代码改动后不需要Ctrl+c,然后重新 go run *.go 文件?
- 2023-01-08 501浏览
-
- 如何从同一个 io.Reader 读取多次
- 2023-04-11 501浏览