当前位置:首页 > 文章列表 > Golang > Go教程 > Go语言中的协程调度器详解

Go语言中的协程调度器详解

2023-06-07 14:14:12 0浏览 收藏

在Golang实战开发的过程中,我们经常会遇到一些这样那样的问题,然后要卡好半天,等问题解决了才发现原来一些细节知识点还是没有掌握好。今天golang学习网就整理分享《Go语言中的协程调度器详解》,聊聊,希望可以帮助到正在努力赚钱的你。

Go语言自带了一个高效的协程调度器,可以轻松地处理并发任务,实现高性能的程序。在本文中,我们将深入了解Go语言中的协程调度器,并探讨其实现、操作以及优化。

协程简介

协程是一种轻量级的线程或者称之为用户态线程。它由程序员调度,而不是由操作系统调度。协程的特点是非抢占式,即只有在显式调用yield()函数时才会切换上下文。因此,协程的切换开销非常小,可以轻松地创建和销毁,而且可同时运行非常多的协程,以实现并发执行程序。

Go语言协程模型

Go语言采用的是M:N 协程模型,也就是多个用户态线程 M,对应多个系统级线程 N 的关系。这种模型充分发挥了多核CPU的优势,同时减少了上下文的切换开销,提高了调度性能。

M表示操作系统线程,即物理线程,是操作系统调度的最小单位。而N则表示Go语言运行时系统(runtime)中的虚拟线程(goroutine),是实现并发的最小单位。N个goroutine 会映射到M个线程上,在运行时由调度器调度。

协程调度器

协程调度器是Go语言运行时系统中的核心组件,负责管理并调度多个协程执行任务。它是一个高级别的调度器,可以控制协程的运行和切换,实现协程的级别调度。在Go语言中,协程调度器额外使用了一种成为Goroutine的运行实体,可以更加高效地在协程中切换执行任务。

协程调度器实现原理

协程调度器实现的原理可以分为两个层次:操作系统层面和Go语言运行时系统层面。

操作系统层面

操作系统层面上,协程调度器会在运行时映射多个用户线程到多个操作系统线程上,利用多核CPU的并行计算能力。

Go语言协程模型中的M:N架构,即M表示操作系统线程(Machine),N表示Go语言的虚拟线程(N,代表Goroutine),在运行时由调度器管理调度。调度器的主要作用就是在每个操作系统线程上维护一个调度任务队列,根据任务队列中任务的优先级和调度算法动态调度各个线程上的任务的执行,并管理线程资源。

Go语言运行时系统层面

在Go语言运行时系统层面上,协程调度器使用了三种机制:调度器、调度器队列和P。

调度器

Go语言的协程调度器由一个全局的调度器控制,它会维护调度器队列、P队列、自旋次数、调度算法等。调度器会动态管理每个线程上的任务执行,以实现优化协程的执行效率。

调度器队列

调度器队列是调度器用来记录所有等待调度的 Goroutine 的地方。在调度器将 Goroutine 分配到 P 上时,它会首先从队列中寻找等待调度的 Goroutine,如果找到了,则立即把它们放入 P 的本地队列,如果没有找到,则新创建一个Goroutine并放到P的本地队列中。

P

P 是一个处理器,用来执行 Goroutine,它所拥有的队列就是本地队列。P 的数量由 GOMAXPROCS 环境变量所控制,如果不设置,Go程序默认使用机器的核心数。

Go调度器的优化

Go调度器有许多优化策略,以下是其中几个:

  1. Work Stealing

当某个P队列内的 Goroutine中都被阻塞时,Go调度器会查找其它P队列中的 Goroutine然后偷走一些放到自己队列去运行。这种策略保证了所有P的稳定负载和均负载。

  1. Preemption

Goroutine可以在执行的时候给自己设置一个定时器,当时间到了之后调用 runtime.Goexit,告诉 runtime 这个 Goroutine 可以主动调度了。如果 goroutine 没有主动地调用 Goexit,Go调度器也有一种预抢占策略。在 Go 1.13 之前,只有在 GOMAXPROCS 为 1 的时候才能实现预抢占。现在已经升级支持更多情况下。

  1. Local Runqueue

为了减少不同线程之间任务的争抢,每个线程都会有一个自己的本地队列,每个线程优先从本地队列中取任务执行,只有本地队列为空时才会去全局队列中获取任务。

总结

协程调度器是Go语言高性能并发的关键组件之一。它负责管理并调度多个协程执行任务,采用的是M:N协程模型,在操作系统层面和Go语言运行时系统层面使用不同的机制和算法来保证协程的高效执行和调度。同时,Go调度器还有许多优化策略,比如协程抢占、局部运行队列以及任务窃取等,可以帮助程序更加高效地运行,提高程序性能和吞吐量。

今天带大家了解了的相关知识,希望对你有所帮助;关于Golang的技术知识我们会一点点深入介绍,欢迎大家关注golang学习网公众号,一起学习编程~

360杀毒怎么暂时关闭360杀毒怎么暂时关闭
上一篇
360杀毒怎么暂时关闭
打造智能传动工业机器人
下一篇
打造智能传动工业机器人
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    483次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    541次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    563次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    515次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    332次使用