0

0

【Linux线程】Linux多线程实践:深入生产者消费者模型

爱谁谁

爱谁谁

发布时间:2025-06-20 08:50:16

|

367人浏览过

|

来源于php中文网

原创

?前言:在当今的软件开发领域,多线程编程已经成为了一种不可或缺的技术。特别是在linux操作系统下,多线程编程的应用更是广泛而深入。而在多线程编程中,生产者消费者模型无疑是一个经典且重要的并发编程模式

本文旨在为读者提供一个全面而深入的Linux多线程中生产者消费者模型的学习指南。我们将从模型的基本概念出发,逐步深入到Linux多线程编程的实战技巧。通过详细的代码示例和深入的解析,我们将帮助读者掌握如何在Linux多线程环境下实现高效且稳定的生产者消费者模型


?1. 生产者消费者模型

作用:

【Linux线程】Linux多线程实践:深入生产者消费者模型

生产者和消费者之间的关系:

【Linux线程】Linux多线程实践:深入生产者消费者模型

生产者消费者模型遵守 “321原则”:

【Linux线程】Linux多线程实践:深入生产者消费者模型

生产者消费者模型优点:

解耦支持并发支持忙闲不均
【Linux线程】Linux多线程实践:深入生产者消费者模型
?2. 基于BlockingQueue的生产者消费者模型
【Linux线程】Linux多线程实践:深入生产者消费者模型

代码示例:(LockGuard.hpp)

代码语言:javascript代码运行次数:0运行复制
#pragma once#include #include #include #include #include #include using namespace std;class Mutex // //封装pthread库的锁{public:    Mutex(pthread_mutex_t *lock)        :_lock(lock)    {}    void lock()    {        pthread_mutex_lock(_lock);    }    void unlock()    {        pthread_mutex_unlock(_lock);    }    ~Mutex()    {}private:    pthread_mutex_t *_lock;};class LockGuard // 封装了锁后,出了作用域会自动调用析构函数,用来自动解锁{public:    LockGuard(pthread_mutex_t *lock)        :_mutex(lock)    {        _mutex.lock();    }    ~LockGuard()    {        _mutex.unlock();    }private:    Mutex _mutex;};

代码示例:(BlockQueue.hpp)

代码语言:javascript代码运行次数:0运行复制
#include #include #include #include #include #include #include "LockGuard.hpp"using namespace std;const int defaultcap = 5;  // for test 最大容量template class BlockQueue{public:    BlockQueue(int cap = defaultcap)        :_capacity(cap)    {        pthread_mutex_init(&_mutex, nullptr);        pthread_cond_init(&_p_cond, nullptr);        pthread_cond_init(&_c_cond, nullptr);    }    bool IsFull()    {        return _q.size() == _capacity;    }    bool IsEmpty()    {        return _q.size() == 0;    }    bool Push(const T &in) // 生产者    {        LockGuard lockguard(&_mutex);        // pthread_mutex_lock(&_mutex);        // if(IsFull())        while(IsFull())        {            // 阻塞等待            pthread_cond_wait(&_p_cond, &_mutex);        }        _q.push(in);        // if(_q.size() > _productor_water_line) pthread_cond_signal(&_c_cond);        pthread_cond_signal(&_c_cond);        // pthread_mutex_unlock(&_mutex);        return true;    }    bool Pop(T *out) // 消费者    {        LockGuard lockguard(&_mutex);        // pthread_mutex_lock(&_mutex);        // if(IsEmpty())        while(IsEmpty())        {            // 阻塞等待            pthread_cond_wait(&_c_cond, &_mutex);        }        *out = _q.front();        _q.pop();        pthread_cond_signal(&_p_cond);        // pthread_mutex_unlock(&_mutex);        return true;    }    ~BlockQueue()    {        pthread_mutex_destroy(&_mutex);        pthread_cond_destroy(&_p_cond);        pthread_cond_destroy(&_c_cond);    }private:    queue _q;    int _capacity; // 列表的容量,满了就不能生存,空了就不能消费    pthread_mutex_t _mutex; // 生产者消费者共用的一把锁    pthread_cond_t _p_cond; // 生产者    pthread_cond_t _c_cond; // 消费者    int _productor_water_line; // _productor_water_line == _capacity / 3 * 2;    int _consumer_water_line; // _consumer_water_line == _capacity / 3;};

关于BlockQueue.hpp的代码,还是比较好理解的,我们唯一要注意的是我们生产者和消费者在进行阻塞等待时,在检测临界资源时,我们要尽可能使用while,而不是if,当我们唤醒资源时,可能会被唤醒多个等待的资源,而对应条件的判断,但是当锁被申请时,其他资源又将继续申请锁,此时的条件很都可能是不满足的,所以这可能会导致代码出错,我们也把这种情况称为:伪唤醒

阻塞式的任务队列

【Linux线程】Linux多线程实践:深入生产者消费者模型
?3. POSIX信号量信号量本质是一把计数器申请信号本质就是预定资源POSIX信号量的相关函数

初始化信号量:

【Linux线程】Linux多线程实践:深入生产者消费者模型
代码语言:javascript代码运行次数:0运行复制
int sem_init(sem_t *sem, int pshared, unsigned int value);

参数:

造次
造次

Liblib打造的AI原创IP视频创作社区

下载
sem:指向要初始化的信号量对象的指针pshared:指示信号量是否可以在进程间共享。如果 pshared 为 0,信号量将仅在当前进程内的线程间共享。如果 pshared 非零,信号量可以在进程间共享(这通常需要特定的权限和配置)value:信号量的初始值。这个值必须大于或等于 0

销毁信号量:

【Linux线程】Linux多线程实践:深入生产者消费者模型
代码语言:javascript代码运行次数:0运行复制
int sem_destroy(sem_t *sem);

等待信号量:

【Linux线程】Linux多线程实践:深入生产者消费者模型
代码语言:javascript代码运行次数:0运行复制
int sem_wait(sem_t *sem);

sem_wait 是 POSIX 信号量(semaphore)API 中的一个函数,用于对信号量进行“等待”操作,也就是尝试对信号量进行“减1”操作。如果信号量的当前值大于0,sem_wait 会成功地将信号量的值减1,并立即返回。然而,如果信号量的当前值为0,sem_wait 会阻塞调用线程,直到信号量的值变为大于0(通常是通过另一个线程调用 sem_post 来实现的)

发布信号量:

【Linux线程】Linux多线程实践:深入生产者消费者模型
代码语言:javascript代码运行次数:0运行复制
int sem_post(sem_t *sem);

sem_post 是 POSIX 信号量(semaphore)API 中的一个函数,用于对信号量进行“发布”或“增加”操作。具体来说,sem_post 会将信号量的值加1,并可能唤醒一个或多个正在等待该信号量的线程(如果它们因为调用 sem_wait 而被阻塞)

?4. 基于环形队列的生产消费模型环形队列
【Linux线程】Linux多线程实践:深入生产者消费者模型

环形结构起始状态和结束状态都是一样的,不好判断为空或者为满,所以可以通过加计数器或者标记位来判断满或者空。另外也可以预留一个空的位置,作为满的状态

【Linux线程】Linux多线程实践:深入生产者消费者模型
实现原理与条件生产者不能将消费者套圈:即生产者不能超越消费者太多,否则会导致数据被覆盖。这可以通过信号量或条件变量来控制生产者的生产速度消费者不能超过生产者:消费者消费的数据量必须小于等于生产者生产的数据量。这可以通过信号量或条件变量来控制消费者的消费速度为空时生产者先运行:当队列为空时,消费者无法从队列中获取数据,因此生产者应该先运行并生产数据为满时消费者先运行:当队列为满时,生产者无法向队列中添加数据,因此消费者应该先运行并消费数据以腾出空间

代码示例:(RingQueue.hpp)

代码语言:javascript代码运行次数:0运行复制
#pragma once#include #include #include #include #include #include #include using namespace std;const int defaultsize = 5;template class RingQueue{private:    void P(sem_t &sem)    {        sem_wait(&sem);    }    void V(sem_t &sem)    {        sem_post(&sem);    }public:    RingQueue(int size = defaultsize)        :_ringqueue(size)        ,_size(size)        ,_p_step(0)        ,_c_step(0)    {        sem_init(&_space_sem, 0, size);        sem_init(&_data_sem, 0, 0);    }    void Push(const T &in)    {        P(_space_sem);        // pthread_mutex_lock(&_p_mutex);        _ringqueue[_p_step] = in;        _p_step++;        _p_step %= _size;        // pthread_mutex_unlock(&_p_mutex);        V(_data_sem);    }    void Pop(T *out)    {        P(_data_sem);        // pthread_mutex_lock(&_c_mutex);        *out = _ringqueue[_c_step];        _c_step++;        _c_step %= _size;        // pthread_mutex_unlock(&_c_mutex);        V(_space_sem);    }    ~RingQueue()    {        sem_destroy(&_space_sem);        sem_destroy(&_data_sem);    }private:    vector _ringqueue;    int _size;    int _p_step;    int _c_step;pthread_mutex_t _p_mutex;pthread_mutex_t _c_mutex;    sem_t _space_sem; // 空间信号    sem_t _data_sem; // 数据信号};

环形式的任务队列

【Linux线程】Linux多线程实践:深入生产者消费者模型
?5. 总结

通过本文的学习,我们深入了解了Linux多线程中生产者消费者模型的基本原理、实现方法和优化技巧。从模型的基本概念出发,我们逐步掌握了线程同步机制、以及并发问题处理等关键知识点

在未来的软件开发中,愿你能够灵活运用生产者消费者模型等并发编程技术,构建出更加高效、稳定、可扩展的系统,为推动信息技术的发展贡献自己的力量

相关专题

更多
js获取数组长度的方法
js获取数组长度的方法

在js中,可以利用array对象的length属性来获取数组长度,该属性可设置或返回数组中元素的数目,只需要使用“array.length”语句即可返回表示数组对象的元素个数的数值,也就是长度值。php中文网还提供JavaScript数组的相关下载、相关课程等内容,供大家免费下载使用。

556

2023.06.20

js刷新当前页面
js刷新当前页面

js刷新当前页面的方法:1、reload方法,该方法强迫浏览器刷新当前页面,语法为“location.reload([bForceGet]) ”;2、replace方法,该方法通过指定URL替换当前缓存在历史里(客户端)的项目,因此当使用replace方法之后,不能通过“前进”和“后退”来访问已经被替换的URL,语法为“location.replace(URL) ”。php中文网为大家带来了js刷新当前页面的相关知识、以及相关文章等内容

374

2023.07.04

js四舍五入
js四舍五入

js四舍五入的方法:1、tofixed方法,可把 Number 四舍五入为指定小数位数的数字;2、round() 方法,可把一个数字舍入为最接近的整数。php中文网为大家带来了js四舍五入的相关知识、以及相关文章等内容

732

2023.07.04

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

477

2023.09.01

JavaScript转义字符
JavaScript转义字符

JavaScript中的转义字符是反斜杠和引号,可以在字符串中表示特殊字符或改变字符的含义。本专题为大家提供转义字符相关的文章、下载、课程内容,供大家免费下载体验。

414

2023.09.04

js生成随机数的方法
js生成随机数的方法

js生成随机数的方法有:1、使用random函数生成0-1之间的随机数;2、使用random函数和特定范围来生成随机整数;3、使用random函数和round函数生成0-99之间的随机整数;4、使用random函数和其他函数生成更复杂的随机数;5、使用random函数和其他函数生成范围内的随机小数;6、使用random函数和其他函数生成范围内的随机整数或小数。

991

2023.09.04

如何启用JavaScript
如何启用JavaScript

JavaScript启用方法有内联脚本、内部脚本、外部脚本和异步加载。详细介绍:1、内联脚本是将JavaScript代码直接嵌入到HTML标签中;2、内部脚本是将JavaScript代码放置在HTML文件的`<script>`标签中;3、外部脚本是将JavaScript代码放置在一个独立的文件;4、外部脚本是将JavaScript代码放置在一个独立的文件。

658

2023.09.12

Js中Symbol类详解
Js中Symbol类详解

javascript中的Symbol数据类型是一种基本数据类型,用于表示独一无二的值。Symbol的特点:1、独一无二,每个Symbol值都是唯一的,不会与其他任何值相等;2、不可变性,Symbol值一旦创建,就不能修改或者重新赋值;3、隐藏性,Symbol值不会被隐式转换为其他类型;4、无法枚举,Symbol值作为对象的属性名时,默认是不可枚举的。

553

2023.09.20

高德地图升级方法汇总
高德地图升级方法汇总

本专题整合了高德地图升级相关教程,阅读专题下面的文章了解更多详细内容。

72

2026.01.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.4万人学习

Git 教程
Git 教程

共21课时 | 2.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号