当前位置:首页 > 文章列表 > 文章 > java教程 > 非阻塞算法解析:ConcurrentLinkedQueue原理

非阻塞算法解析:ConcurrentLinkedQueue原理

2026-04-16 23:33:46 0浏览 收藏
ConcurrentLinkedQueue 是基于 Michael-Scott 非阻塞算法实现的无界线程安全队列,其核心设计精妙而务实:head 指向哑节点、tail 允许滞后,既规避了锁竞争又保障了 CAS 操作的安全性;通过一次性节点彻底绕过 ABA 问题,无需复杂内存管理;offer 性能显著优于 poll,体现算法对高吞吐入队的优先权衡;但它不提供容量控制、精确 size、等待语义或强一致性保证——这意味着它并非万能解药,而是为特定场景(如日志缓冲、秒杀任务分发)量身定制的高性能工具,用错场景反而会引发 OOM、CPU 空转或逻辑漏洞。真正读懂它,不在于理解那些 volatile 和 UNSAFE 调用,而在于领悟其背后在正确性、性能与实现简洁性之间所做的每一个克制而深刻的设计取舍。

如何通过 ConcurrentLinkedQueue 的 Michael-Scott 非阻塞算法理解高并发队列

ConcurrentLinkedQueue 的 head/tail 指针为什么不是直接指向首尾元素?

因为 Michael-Scott 算法要求 head 始终指向一个“哑节点”(dummy node),而不是实际数据节点;tail 则可能指向最后一个节点,也可能指向倒数第二个节点。这种设计不是偷懒,而是为了在无锁前提下安全地完成出队(poll)和入队(offer)——避免 CAS 失败后无法判断当前结构是否已变更。

关键点在于:出队时先用 CAS 尝试把 head 从哑节点推进到下一个节点,再取该节点的 item;如果失败,说明其他线程刚完成了这步,那就重试读取新的 head。整个过程不依赖锁,也不阻塞。

  • head 和 tail 都是 volatile 字段,确保多核 CPU 上的可见性
  • 每次 CAS 前都重新读取一次最新值,构成“读-改-写”循环,这是非阻塞算法的典型模式
  • 不保证实时一致性:迭代器创建后看到的是快照,后续的 offer/poll 不会影响它

为什么 ConcurrentLinkedQueue 不怕 ABA 问题,而自己手写容易翻车?

ABA 问题本质是:某个线程读到地址 A,另一线程把 A 改成 B 再改回 A,第一个线程的 CAS 误判为“没变”,导致逻辑错误。ConcurrentLinkedQueue 用的是指针地址比较,不是值比较 —— 即使新节点的 item 和旧节点一样,只要内存地址不同,CAS 就不会成功。

但它真正绕过 ABA 的关键是:所有节点一旦被出队,就不再复用(不回收、不 reset、不放回对象池)。也就是说,Node 实例是“一次性”的,地址永远只用一次。这比用版本号或 epoch 更轻量,也避免了复杂内存回收机制。

  • 手写无锁队列时若尝试复用节点(比如用对象池),就必须引入 Hazard Pointer 或 EBR,否则大概率崩溃
  • ConcurrentLinkedQueue 的 Node 构造器是私有的,且内部不暴露引用,防止外部篡改或复用
  • 它的 CAS 调用全部基于 UNSAFE.compareAndSwapObject,操作目标是字段偏移量,不是值本身

offer() 和 poll() 的性能差异为什么比想象中大?

offer() 在绝大多数情况下是单次 CAS:更新 tail.next,再尝试推进 tail;而 poll() 可能触发两次 CAS:先推进 head,再清空原 head.next.item。更关键的是,poll() 还要处理 head == tail 的边界情况(比如队列只剩一个真实节点),这时需要额外校验并重置 tail。

实测表明,在高争用(大量线程同时 poll)场景下,poll() 的失败重试概率明显高于 offer()。这不是 bug,而是 Michael-Scott 算法对“出队优先级”更低的权衡结果 —— 它优先保障入队吞吐,出队则接受一定延迟。

  • 当队列长期为空又高频 poll(),会频繁触发 head == tail 分支,性能下降更明显
  • 没有 size() 的精确实现,是因为遍历链表算长度会破坏无锁性;isEmpty() 也只是检查 head == tail 是否成立,不保证绝对准确
  • 如果你的应用里消费速率远高于生产速率,得小心 poll() 成为瓶颈,考虑换用 LinkedBlockingQueue 配合合理阻塞策略

什么时候不该用 ConcurrentLinkedQueue?

它不适合需要强一致语义或容量控制的场景。比如你希望队列最多存 1000 个任务,满了就拒绝新任务 —— ConcurrentLinkedQueue 是无界的,offer() 永远返回 true,不会拒绝。这时候必须靠上层加限流(如 Semaphore)或换用 ArrayBlockingQueue。

另一个常被忽略的点:它不提供任何等待能力。如果业务逻辑依赖“队列空时等新任务来”,你就得自己包装一层轮询 + Thread.sleep(),或者干脆用阻塞队列。别试图用 while (queue.isEmpty()) {} 自旋,那只会吃满 CPU。

  • 秒杀系统里用它做任务缓冲没问题,但订单去重、库存扣减这类需原子事务的操作,不能只靠它保证一致性
  • 日志收集场景常用它,但要注意:如果下游写磁盘慢,队列会无限增长,最终 OOM —— 必须配监控+告警+降级开关
  • 它和 ConcurrentLinkedDeque 共享同一套底层逻辑,但后者支持双端操作,代价是更复杂的 CAS 序列,别为了“看起来更通用”而误选
真正难的不是看懂 CAS 循环,而是理解 Michael-Scott 算法在“正确性”“性能”“实现复杂度”三者之间的取舍点 —— 比如为什么宁可让 tail 滞后两步,也不用额外锁同步;为什么宁愿放弃 size() 精确值,也要保住 wait-free 特性。这些设计选择,往往比代码本身更值得细读。

以上就是本文的全部内容了,是否有顺利帮助你解决问题?若是能给你带来学习上的帮助,请大家多多支持golang学习网!更多关于文章的相关知识,也可关注golang学习网公众号。

Win10如何查看硬盘分区?Win10如何查看硬盘分区?
上一篇
Win10如何查看硬盘分区?
闲鱼租房实名认证步骤详解
下一篇
闲鱼租房实名认证步骤详解
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    292次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    344次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    348次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    311次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    133次使用