比较Node.js带有集群模块的EventLoop与Golang的Scheduler
小伙伴们有没有觉得学习Golang很有意思?有意思就对了!今天就给大家带来《比较Node.js带有集群模块的EventLoop与Golang的Scheduler》,以下内容将会涉及到,若是在学习中对其中部分知识点有疑问,或许看了本文就能帮到你!
在 nodejs 中,主要的批评是基于其单线程事件循环模型。
nodejs 的最大缺点是无法在应用程序中执行 cpu 密集型任务。为了演示目的,我们以 while 循环为例(这可能类似于返回数十万条记录的 db 函数,然后在 nodejs 中处理这些记录。)
while(1){ x++ }
此类代码将阻塞主堆栈,因此事件队列中等待的所有其他任务将永远没有机会执行。 (并且在网络应用程序中,新用户将无法连接到该应用程序)。
但是,人们可以使用像 cluster
这样的模块来利用多核系统并部分解决上述问题。 cluster 模块允许创建一个由独立进程组成的小型网络,这些进程可以共享服务器端口,从而使 node.js 应用程序能够访问服务器的全部功能。 (但是,使用 cluster 的最大缺点之一是无法在应用程序代码中维护状态)。
但是,如果服务器负载过多,我们很可能会再次陷入相同的情况(如上所述)。
当我开始学习go语言并了解它的架构和goroutine时,我认为它可能会解决由于nodejs的单线程事件循环模型而出现的问题。而且它可能会避免上述 cpu 密集型任务的场景,直到我遇到了这段有趣的代码,它阻止了所有 go 应用程序并且没有任何反应,就像 nodejs 中的 while 循环一样。
func main() { var x int threads := runtime.GOMAXPROCS(0) for i := 0; i < threads; i++ { go func() { for { x++ } }() } time.Sleep(time.Second) fmt.Println("x =", x) } //or perhaps even if we use some number that is just greater than the threads.
所以,问题是,如果我有一个负载密集型应用程序,并且还有很多 cpu 密集型任务,我可能会陷入上述场景。 (其中数据库返回大量行,然后应用程序需要处理和修改这些行中的某些内容)。难道传入的用户不会被阻止,所有其他任务也会被阻止吗?
那么,如何解决上述问题呢?
附注
或者也许,我提到的用例没有多大意义? :)
解决方案
目前(Go 1.11 及更早版本)您所谓的 紧循环确实会堵塞代码。 发生这种情况的原因很简单,因为目前 Go 编译器 插入执行“抢占检查”的代码(«我应该让出 到调度程序,以便它运行另一个 goroutine?»)仅在 它编译的函数的序言(几乎,但我们不要离题)。 如果您的循环不调用任何函数,则不会进行抢占检查 将被制作。
Go 开发者很清楚这一点 和are working on eventually alleviating this issue。
不过,请注意,您所声称的问题在 最真实的场景:执行时间较长的代码 运行 CPU 密集型工作而不调用任何函数 非常罕见,而且介于两者之间。
在这种情况下,你确实有这样的代码并且你有 检测到它确实让其他 goroutine 挨饿 (让我强调一下:您已经通过分析发现了这一点——如 与仅仅想象“它一定很慢”不同),你可以 应用多种技术来解决这个问题:
- 在某些关键点插入拨打
runtime.Gosched()
的电话 长时间运行的 CPU 密集型代码。 这将强制将控制权交给另一个 goroutine 虽然实际上并没有挂起调用者 goroutine (所以它会 一旦再次安排就运行)。 - 为运行的 goroutine 提供专用的操作系统线程
那些CPU占用者:
- 将此类 CPU 占用集合绑定到
N
“worker goroutine”; - 在他们面前放置一个调度员(称为 "fan-out");
- 确保
N
明显小于runtime.GOMAXPROCS
或提高后者,以便您拥有这些N
额外线程。 - 通过调度程序将工作单元铲到那些专用的 goroutine 中。
- 将此类 CPU 占用集合绑定到
以上就是《比较Node.js带有集群模块的EventLoop与Golang的Scheduler》的详细内容,更多关于的资料请关注golang学习网公众号!

- 上一篇
- 匿名函数返回结果有什么意义?

- 下一篇
- 将二进制转换为十六进制
-
- Golang · Go问答 | 1年前 |
- 在读取缓冲通道中的内容之前退出
- 139浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 戈兰岛的全球 GOPRIVATE 设置
- 204浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何将结构作为参数传递给 xml-rpc
- 325浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何用golang获得小数点以下两位长度?
- 477浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何通过 client-go 和 golang 检索 Kubernetes 指标
- 486浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 将多个“参数”映射到单个可变参数的习惯用法
- 439浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 将 HTTP 响应正文写入文件后出现 EOF 错误
- 357浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 结构中映射的匿名列表的“复合文字中缺少类型”
- 352浏览 收藏
-
- Golang · Go问答 | 1年前 |
- NATS Jetstream 的性能
- 101浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何将复杂的字符串输入转换为mapstring?
- 440浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 相当于GoLang中Java将Object作为方法参数传递
- 212浏览 收藏
-
- Golang · Go问答 | 1年前 |
- 如何确保所有 goroutine 在没有 time.Sleep 的情况下终止?
- 143浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 484次学习
-
- 协启动
- SEO摘要协启动(XieQiDong Chatbot)是由深圳协启动传媒有限公司运营的AI智能服务平台,提供多模型支持的对话服务、文档处理和图像生成工具,旨在提升用户内容创作与信息处理效率。平台支持订阅制付费,适合个人及企业用户,满足日常聊天、文案生成、学习辅助等需求。
- 9次使用
-
- Brev AI
- 探索Brev AI,一个无需注册即可免费使用的AI音乐创作平台,提供多功能工具如音乐生成、去人声、歌词创作等,适用于内容创作、商业配乐和个人创作,满足您的音乐需求。
- 9次使用
-
- AI音乐实验室
- AI音乐实验室(https://www.aimusiclab.cn/)是一款专注于AI音乐创作的平台,提供从作曲到分轨的全流程工具,降低音乐创作门槛。免费与付费结合,适用于音乐爱好者、独立音乐人及内容创作者,助力提升创作效率。
- 9次使用
-
- PixPro
- SEO摘要PixPro是一款专注于网页端AI图像处理的平台,提供高效、多功能的图像处理解决方案。通过AI擦除、扩图、抠图、裁切和压缩等功能,PixPro帮助开发者和企业实现“上传即处理”的智能化升级,适用于电商、社交媒体等高频图像处理场景。了解更多PixPro的核心功能和应用案例,提升您的图像处理效率。
- 9次使用
-
- EasyMusic
- EasyMusic.ai是一款面向全场景音乐创作需求的AI音乐生成平台,提供“零门槛创作 专业级输出”的服务。无论你是内容创作者、音乐人、游戏开发者还是教育工作者,都能通过EasyMusic.ai快速生成高品质音乐,满足短视频、游戏、广告、教育等多元需求。平台支持一键生成与深度定制,积累了超10万创作者,生成超100万首音乐作品,用户满意度达99%。
- 12次使用
-
- GoLand调式动态执行代码
- 2023-01-13 502浏览
-
- 用Nginx反向代理部署go写的网站。
- 2023-01-17 502浏览
-
- Golang取得代码运行时间的问题
- 2023-02-24 501浏览
-
- 请问 go 代码如何实现在代码改动后不需要Ctrl+c,然后重新 go run *.go 文件?
- 2023-01-08 501浏览
-
- 如何从同一个 io.Reader 读取多次
- 2023-04-11 501浏览