0

0

C++如何实现一个无锁队列?C++高并发数据结构实战【性能调优】

尼克

尼克

发布时间:2025-12-14 15:24:07

|

162人浏览过

|

来源于php中文网

原创

真正安全高性能的无锁队列需依赖原子操作、内存序与状态管理;SPSC场景推荐Michael-Scott环形缓冲区实现,MPMC则须用Hazard Pointer或EBR解决ABA与内存回收问题,优先选用moodycamel::ConcurrentQueue等成熟库。

c++如何实现一个无锁队列?c++高并发数据结构实战【性能调优】

实现一个真正安全、高性能的无锁队列(lock-free queue)在 C++ 中并不简单,它依赖于原子操作、内存序(memory order)和精细的状态管理。标准库没有提供 lock-free queue,std::queue 本身不是线程安全的,而 std::atomic 也不能直接用于复杂对象的无锁操作。下面讲清楚核心思路、关键陷阱和可落地的实现方式。

用 Michael-Scott 算法实现单生产者单消费者(SPSC)无锁队列

这是最实用、最容易正确实现的无锁队列场景。SPSC 避开了 ABA 问题和复杂的内存回收难题,适合高性能日志、网络收发缓冲等场景。

  • 底层用环形缓冲区(circular buffer),两个原子整数分别记录 head(消费位置)和 tail(生产位置)
  • 生产者只改 tail,消费者只改 head,无竞争;判断是否满/空时用取模比较,注意处理 wrap-around
  • 关键:读写都用 memory_order_acquire / memory_order_release,避免指令重排破坏逻辑
  • 示例片段:
    tail.load(memory_order_acquire) - head.load(memory_order_acquire) 判断是否可入队

多生产者多消费者(MPMC)需解决 ABA 和内存回收问题

MPMC 是难点所在。当一个节点被出队后又被新节点复用,可能因指针重用导致 CAS 失败或崩溃(ABA 问题)。同时,谁来 delete 节点?多个线程可能同时访问同一节点。

  • 常用方案:Hazard Pointer(危险指针)或 Epoch-based Reclamation(EBR)——不依赖引用计数,低开销且可预测
  • 避免裸指针:用 std::atomic 管理 next 指针,所有 CAS 操作必须带 memory_order_acq_rel
  • Michael-Scott 的 MPMC 变种需要为 head/tail 引入 dummy node,并对 tail 进行“两阶段”CAS(先占位再写值),防止丢失插入
  • 不要自己手写 EBR;推荐使用成熟的无锁库如 moodycamel::ConcurrentQueue(工业级、经过大量压测)

别踩这些性能与正确性陷阱

很多“看起来像无锁”的实现,实际卡在锁、伪共享或内存序错误上,反而比加锁更慢、更难 debug。

Axiom
Axiom

Axiom是一个浏览器扩展,用于自动化重复任务和web抓取。

下载

立即学习C++免费学习笔记(深入)”;

  • 伪共享(False Sharing):head 和 tail 放在同一个 cache line,频繁更新会让 CPU 不断同步缓存——把它们用 alignas(64) 隔开
  • 滥用 memory_order_seq_cst:全局顺序一致性代价高;SPSC 场景中,relaxed + 单次 acquire/release 就够了
  • 忘记构造/析构语义:无锁结构里不能直接 new T() 后 CAS 指针——T 的构造必须在指针发布前完成;建议用 placement new + 手动调用 destructor
  • 误判“无锁”=“无等待”:lock-free 只保证系统整体进展,单个线程仍可能被饿死;wait-free 更强但极少实用

实战建议:优先用成熟库,而非从零造轮子

除非你有特殊硬件约束、极致延迟要求,或正在学习并发原理,否则不建议手写 MPMC 无锁队列。

  • moodycamel::ConcurrentQueue:C++11,支持异常安全、可定制内存模型,SPSC 模式下接近原子变量性能
  • Folly::MPMCQueue(Facebook):更激进优化,但依赖 Folly 生态,编译稍重
  • 自研前务必做 perf record -e cache-misses,instructions,cycles 对比测试,关注 L3 miss 和 CAS 失败率
  • 上线前用 ThreadSanitizer + Helgrind 做数据竞争检测,无锁代码一旦出错往往静默崩溃

基本上就这些。无锁队列不是银弹,它解决的是特定瓶颈;多数业务场景下,一个带细粒度锁(如分段锁)的队列 + 合理批处理,反而更稳更快。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
treenode的用法
treenode的用法

​在计算机编程领域,TreeNode是一种常见的数据结构,通常用于构建树形结构。在不同的编程语言中,TreeNode可能有不同的实现方式和用法,通常用于表示树的节点信息。更多关于treenode相关问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

536

2023.12.01

C++ 高效算法与数据结构
C++ 高效算法与数据结构

本专题讲解 C++ 中常用算法与数据结构的实现与优化,涵盖排序算法(快速排序、归并排序)、查找算法、图算法、动态规划、贪心算法等,并结合实际案例分析如何选择最优算法来提高程序效率。通过深入理解数据结构(链表、树、堆、哈希表等),帮助开发者提升 在复杂应用中的算法设计与性能优化能力。

17

2025.12.22

深入理解算法:高效算法与数据结构专题
深入理解算法:高效算法与数据结构专题

本专题专注于算法与数据结构的核心概念,适合想深入理解并提升编程能力的开发者。专题内容包括常见数据结构的实现与应用,如数组、链表、栈、队列、哈希表、树、图等;以及高效的排序算法、搜索算法、动态规划等经典算法。通过详细的讲解与复杂度分析,帮助开发者不仅能熟练运用这些基础知识,还能在实际编程中优化性能,提高代码的执行效率。本专题适合准备面试的开发者,也适合希望提高算法思维的编程爱好者。

22

2026.01.06

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

482

2023.08.10

数据库Delete用法
数据库Delete用法

数据库Delete用法:1、删除单条记录;2、删除多条记录;3、删除所有记录;4、删除特定条件的记录。更多关于数据库Delete的内容,大家可以访问下面的文章。

274

2023.11.13

drop和delete的区别
drop和delete的区别

drop和delete的区别:1、功能与用途;2、操作对象;3、可逆性;4、空间释放;5、执行速度与效率;6、与其他命令的交互;7、影响的持久性;8、语法和执行;9、触发器与约束;10、事务处理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

211

2023.12.29

页面置换算法
页面置换算法

页面置换算法是操作系统中用来决定在内存中哪些页面应该被换出以便为新的页面提供空间的算法。本专题为大家提供页面置换算法的相关文章,大家可以免费体验。

404

2023.08.14

Golang 性能分析与pprof调优实战
Golang 性能分析与pprof调优实战

本专题系统讲解 Golang 应用的性能分析与调优方法,重点覆盖 pprof 的使用方式,包括 CPU、内存、阻塞与 goroutine 分析,火焰图解读,常见性能瓶颈定位思路,以及在真实项目中进行针对性优化的实践技巧。通过案例讲解,帮助开发者掌握 用数据驱动的方式持续提升 Go 程序性能与稳定性。

9

2026.01.22

html编辑相关教程合集
html编辑相关教程合集

本专题整合了html编辑相关教程合集,阅读专题下面的文章了解更多详细内容。

53

2026.01.21

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
HTML5/CSS3/JavaScript/ES6入门课程
HTML5/CSS3/JavaScript/ES6入门课程

共102课时 | 6.8万人学习

前端基础到实战(HTML5+CSS3+ES6+NPM)
前端基础到实战(HTML5+CSS3+ES6+NPM)

共162课时 | 19万人学习

第二十二期_前端开发
第二十二期_前端开发

共119课时 | 12.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号