0

0

C++如何实现一个线程安全的双端队列?(并发数据结构设计)

尼克

尼克

发布时间:2026-03-11 19:11:32

|

445人浏览过

|

来源于php中文网

原创

std::deque 本身不是线程安全的,多线程同时读写会引发数据竞争;必须用互斥锁(如 std::mutex)保护,或选用 boost::lockfree::deque 等无锁结构,但后者限制多、难度高。

c++如何实现一个线程安全的双端队列?(并发数据结构设计)

std::deque 本身不是线程安全的,别直接裸用

几乎所有标准容器(包括 std::deque)都只保证「单线程内多次调用成员函数是安全的」,但不保证「多线程同时读写同一对象」。一旦两个线程分别调用 push_front()pop_back(),就可能踩到数据竞争——没有定义行为,崩溃、丢数据、内存损坏都可能发生。

常见错误现象:Segmentation faultdeque::_M_check_len__deque_buf_size 内部触发;调试时发现 size() 返回负值或极大值;Valgrind 报 Invalid read/write

  • 不要给多个线程共享一个未加锁的 std::deque 实例
  • 即使只读+只写分离(比如 A 线程只 push,B 线程只 pop),仍需同步:因为 push_front()pop_back() 都会修改内部指针和 size,底层缓冲区管理不是原子的
  • std::deque 的迭代器失效规则复杂,竞态下迭代器可能指向已释放的 buffer,导致静默错误

用 std::mutex + std::deque 是最稳妥的起步方案

对绝大多数业务场景,封装一层互斥锁比手写无锁结构更可靠、更易维护。关键不是“快”,而是“正确”和“可验证”。

使用场景:吞吐量中等(比如每秒几千次操作)、延迟不极端敏感(微秒级不关键)、需要快速上线且后续可替换优化。

立即学习C++免费学习笔记(深入)”;

皮卡智能
皮卡智能

AI驱动高效视觉设计平台

下载
  • std::mutexstd::deque 封在一个类里,所有 public 方法都先 lock,操作完再 unlock
  • 避免在锁内做耗时操作(比如 I/O、长循环、调用用户回调),否则会卡住其他线程
  • std::lock_guard<:mutex></:mutex> 自动管理,别手写 unlock —— 异常路径下容易漏掉
  • 如果要支持超时弹出,用 std::timed_mutextry_lock_for(),但注意 std::deque::empty() 也得在锁内判断,不能先检查再锁
class ThreadSafeDeque {
    std::deque<int> data_;
    mutable std::mutex mtx_;
public:
    void push_front(int x) {
        std::lock_guard<std::mutex> lk(mtx_);
        data_.push_front(x);
    }
    bool try_pop_back(int& out) {
        std::lock_guard<std::mutex> lk(mtx_);
        if (data_.empty()) return false;
        out = data_.back();
        data_.pop_back();
        return true;
    }
};

无锁 deque(如 boost::lockfree::deque)性能高但限制极多

boost::lockfree::deque 是少数真正无锁的双端队列实现,但它不是 std::deque 的 drop-in 替代品。它的设计目标是确定性低延迟,代价是灵活性大幅降低。

参数差异和兼容性影响:

  • 必须指定最大容量(编译期或运行期固定),超出则 push_* 失败返回 false —— 无法动态扩容
  • 元素类型必须是 trivially copyable,不能含虚函数、非平凡构造/析构函数
  • 不提供 size()empty() 的精确值(只能近似或遍历计数),因为无锁下 size 统计本身就是竞态点
  • 内存模型依赖 std::atomic 的顺序约束,默认用 memory_order_relaxed,某些场景需手动加强(比如生产者-消费者配对时用 acquire/release
  • Boost 版本需 ≥ 1.58,且开启 C++11 支持;Clang/GCC 对原子指令生成有差异,x86 上较稳,ARM 上需额外 fence

自研无锁 deque 极度危险,除非你已读过 Herlihy & Shavit

双端队列的无锁实现是公认的高危区域。它比无锁栈、无锁队列难得多,核心难点在于:两端都可增删,意味着 head/tail 指针都要原子更新,且中间节点的内存生命周期管理极易出错(ABA 问题、提前释放、悬空指针)。

容易踩的坑:

  • std::atomic<node></node> 做头尾指针,但没处理好节点回收 —— hazard pointerRCU 不到位,导致读线程访问已释放内存
  • 认为 CAS 成功就等于操作完成,忽略了中间状态(比如 push_front 正在修改 head 指针但 next 指针还没连好)
  • 测试只跑单线程 or 两线程轻负载,上线后在 16 核机器上稳定复现 crash —— 无锁 bug 具有强硬件依赖性
  • 没考虑内存序组合:store 用 relaxed,load 用 acquire,但漏掉某处 release 语义,导致重排序破坏逻辑

真要动手,先确认是否真的被锁争用卡死(perf record -e cache-misses,cpu-cycles 看 mutex 争用率),再评估是否值得投入数月去验证一个可能只快 20% 的结构。多数时候,瓶颈根本不在 deque 本身。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
treenode的用法
treenode的用法

​在计算机编程领域,TreeNode是一种常见的数据结构,通常用于构建树形结构。在不同的编程语言中,TreeNode可能有不同的实现方式和用法,通常用于表示树的节点信息。更多关于treenode相关问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

548

2023.12.01

C++ 高效算法与数据结构
C++ 高效算法与数据结构

本专题讲解 C++ 中常用算法与数据结构的实现与优化,涵盖排序算法(快速排序、归并排序)、查找算法、图算法、动态规划、贪心算法等,并结合实际案例分析如何选择最优算法来提高程序效率。通过深入理解数据结构(链表、树、堆、哈希表等),帮助开发者提升 在复杂应用中的算法设计与性能优化能力。

30

2025.12.22

深入理解算法:高效算法与数据结构专题
深入理解算法:高效算法与数据结构专题

本专题专注于算法与数据结构的核心概念,适合想深入理解并提升编程能力的开发者。专题内容包括常见数据结构的实现与应用,如数组、链表、栈、队列、哈希表、树、图等;以及高效的排序算法、搜索算法、动态规划等经典算法。通过详细的讲解与复杂度分析,帮助开发者不仅能熟练运用这些基础知识,还能在实际编程中优化性能,提高代码的执行效率。本专题适合准备面试的开发者,也适合希望提高算法思维的编程爱好者。

44

2026.01.06

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

443

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

605

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

765

2023.08.10

Python 多线程与异步编程实战
Python 多线程与异步编程实战

本专题系统讲解 Python 多线程与异步编程的核心概念与实战技巧,包括 threading 模块基础、线程同步机制、GIL 原理、asyncio 异步任务管理、协程与事件循环、任务调度与异常处理。通过实战示例,帮助学习者掌握 如何构建高性能、多任务并发的 Python 应用。

376

2025.12.24

java多线程相关教程合集
java多线程相关教程合集

本专题整合了java多线程相关教程,阅读专题下面的文章了解更多详细内容。

31

2026.01.21

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C# 教程
C# 教程

共94课时 | 11.1万人学习

C 教程
C 教程

共75课时 | 5.3万人学习

C++教程
C++教程

共115课时 | 21.4万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号