比较Node.js带有集群模块的EventLoop与Golang的Scheduler
小伙伴们有没有觉得学习Golang很有意思?有意思就对了!今天就给大家带来《比较Node.js带有集群模块的EventLoop与Golang的Scheduler》,以下内容将会涉及到,若是在学习中对其中部分知识点有疑问,或许看了本文就能帮到你!
在 nodejs 中,主要的批评是基于其单线程事件循环模型。
nodejs 的最大缺点是无法在应用程序中执行 cpu 密集型任务。为了演示目的,我们以 while 循环为例(这可能类似于返回数十万条记录的 db 函数,然后在 nodejs 中处理这些记录。)
while(1){
x++
}
此类代码将阻塞主堆栈,因此事件队列中等待的所有其他任务将永远没有机会执行。 (并且在网络应用程序中,新用户将无法连接到该应用程序)。
但是,人们可以使用像 cluster 这样的模块来利用多核系统并部分解决上述问题。 cluster 模块允许创建一个由独立进程组成的小型网络,这些进程可以共享服务器端口,从而使 node.js 应用程序能够访问服务器的全部功能。 (但是,使用 cluster 的最大缺点之一是无法在应用程序代码中维护状态)。
但是,如果服务器负载过多,我们很可能会再次陷入相同的情况(如上所述)。
当我开始学习go语言并了解它的架构和goroutine时,我认为它可能会解决由于nodejs的单线程事件循环模型而出现的问题。而且它可能会避免上述 cpu 密集型任务的场景,直到我遇到了这段有趣的代码,它阻止了所有 go 应用程序并且没有任何反应,就像 nodejs 中的 while 循环一样。
func main() {
var x int
threads := runtime.GOMAXPROCS(0)
for i := 0; i < threads; i++ {
go func() {
for { x++ }
}()
}
time.Sleep(time.Second)
fmt.Println("x =", x)
}
//or perhaps even if we use some number that is just greater than the threads.
所以,问题是,如果我有一个负载密集型应用程序,并且还有很多 cpu 密集型任务,我可能会陷入上述场景。 (其中数据库返回大量行,然后应用程序需要处理和修改这些行中的某些内容)。难道传入的用户不会被阻止,所有其他任务也会被阻止吗?
那么,如何解决上述问题呢?
附注
或者也许,我提到的用例没有多大意义? :)
解决方案
目前(Go 1.11 及更早版本)您所谓的 紧循环确实会堵塞代码。 发生这种情况的原因很简单,因为目前 Go 编译器 插入执行“抢占检查”的代码(«我应该让出 到调度程序,以便它运行另一个 goroutine?»)仅在 它编译的函数的序言(几乎,但我们不要离题)。 如果您的循环不调用任何函数,则不会进行抢占检查 将被制作。
Go 开发者很清楚这一点 和are working on eventually alleviating this issue。
不过,请注意,您所声称的问题在 最真实的场景:执行时间较长的代码 运行 CPU 密集型工作而不调用任何函数 非常罕见,而且介于两者之间。
在这种情况下,你确实有这样的代码并且你有 检测到它确实让其他 goroutine 挨饿 (让我强调一下:您已经通过分析发现了这一点——如 与仅仅想象“它一定很慢”不同),你可以 应用多种技术来解决这个问题:
- 在某些关键点插入拨打
runtime.Gosched()的电话 长时间运行的 CPU 密集型代码。 这将强制将控制权交给另一个 goroutine 虽然实际上并没有挂起调用者 goroutine (所以它会 一旦再次安排就运行)。 - 为运行的 goroutine 提供专用的操作系统线程
那些CPU占用者:
- 将此类 CPU 占用集合绑定到
N“worker goroutine”; - 在他们面前放置一个调度员(称为 "fan-out");
- 确保
N明显小于runtime.GOMAXPROCS或提高后者,以便您拥有这些N额外线程。 - 通过调度程序将工作单元铲到那些专用的 goroutine 中。
- 将此类 CPU 占用集合绑定到
以上就是《比较Node.js带有集群模块的EventLoop与Golang的Scheduler》的详细内容,更多关于的资料请关注golang学习网公众号!
匿名函数返回结果有什么意义?
- 上一篇
- 匿名函数返回结果有什么意义?
- 下一篇
- 将二进制转换为十六进制
-
- Golang · Go问答 | 28分钟前 |
- Go ResponseController Flush 为什么可能返回 ErrNotSupported
- 197浏览 收藏
-
- Golang · Go问答 | 47分钟前 |
- Go multipart.FileHeader Filename 为什么不能直接拼接本地路径
- 412浏览 收藏
-
- Golang · Go问答 | 1小时前 |
- Go multipart ReadForm 为什么仍会在内存保留字段值
- 202浏览 收藏
-
- Golang · Go问答 | 1小时前 | go · Go multipart/form-data mime/multipart SetBoundary
- Go multipart.SetBoundary 为什么必须在创建 Part 前调用
- 284浏览 收藏
-
- Golang · Go问答 | 1小时前 |
- Go multipart NextPart 为什么会自动解码 quoted-printable
- 474浏览 收藏
-
- Golang · Go问答 | 2小时前 |
- Go slog.WithGroup 空组名为什么只做内联分组
- 260浏览 收藏
-
- Golang · Go问答 | 2小时前 |
- Go slog LevelVar 修改后为什么旧 Handler 也会生效
- 193浏览 收藏
-
- Golang · Go问答 | 2小时前 |
- Go slog LogValuer 递归引用为什么会被替换成错误值
- 158浏览 收藏
-
- Golang · Go问答 | 3小时前 | slog · Go问答 · Go 结构化日志 ReplaceAttr log/slog
- Go slog ReplaceAttr 为什么会收到空分组属性
- 405浏览 收藏
-
- Golang · Go问答 | 3小时前 | go · 文件系统 ·
- Go fs.Glob 为什么会忽略目录读取错误
- 427浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 248次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 294次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 262次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 246次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 52次使用
-
- 用Nginx反向代理部署go写的网站。
- 2023-01-17 502浏览
-
- GoLand调式动态执行代码
- 2023-01-13 502浏览
-
- Go tls.GetCertificate 为什么收不到空 ServerName 请求
- 2026-09-27 501浏览
-
- Go sql.Tx提交成功前读取结果导致事务边界混乱的修复方法
- 2026-09-20 501浏览
-
- Go select 用 time.After 做超时有什么资源代价
- 2026-09-10 501浏览
