0

0

【Linux】线程池项目详解

看不見的法師

看不見的法師

发布时间:2025-07-19 11:24:01

|

596人浏览过

|

来源于php中文网

原创

线程池项目1 线程基础

线程我们已经学习的差不多了,从线程的概念:

虚拟内存和物理内存的映射是通过一个二维数组进行的映射,每个元素指向物理内存的 4KB内存块。在通过虚拟地址的后12位来进行4096字节的对应!类型 + 起始地址就能从内存中找到对应的数据!

了解的虚拟内存和物理内存,我们就能知道虚拟内存本质是一种资源可以进行分配。 线程:在进程内部运行,是CPU调度的基本单位。 Linux中是直接套用的进程模块,实现的一种轻量级进程,与主线程共享地址空间!调用成本比多进程低很多!!!

线程 = 线程库里的属性集 + LWP(轻量级进程)线程的本质是代码块!只使用函数的对应代码,即拿页表的一部分来执行!!!

对于线程创建的接口我们也足够熟悉了!不再赘述

线程的管理是在共享区完成的,编译时,动态链接线程库,映射在地址空间的共享区中。在这个共享区中储存着线程的属性内存块(包含线程单独的栈结构),通过tid我们可以找到线程的所有属性。每个线程都对应一个LWP的pid,这是系统层线程调度的单位!

需要特别注意的是线程互斥的场景,在多线程的场景下,对于全局资源的处理有且只能用一个线程进行操作,否则就会出现意想不到的后果!对于多线程的场景使用互斥锁来对全局资源进行保护,可以通过RAII规则的锁守卫完成只能加减锁!

2 什么是线程池

之前我们实现过进程池: 进程池就是通过预先创建若干个进程与管道,在需要进行任务时,选择一个进程,通过管道发送信息,让其完成工作。不同的进程因为不能共享地址空间,所以想要协同工作就需要进行进程间通信,这里使用管道来实现进程 间的通信。而对于线程池来说,多线程之间是共享地址空间的,所以不需要进行额外的通信,直接调用线程来执行任务就可以!

线程池完成的工作就是在程序运行时,自动创建出若干个线程等待主线程发送任务进行执行,这样不再需要每次再创建线程来完成一个任务,只需要向任务队列中压入任务,线程池就会自动唤醒一个线程来执行任务,执行完就会继续等待任务的到来!

【Linux】线程池项目详解

线程池的应用场景:

需要大量的线程来完成任务,且完成任务的时间比较短。 WEB服务器完成网页请求这样的任务,使用线程池技术是非常合适的。因为单个任务小,而任务数量巨大,你可以想象一个热门网站的点击次数。 但对于长时间的任务,比如一个Telnet连接请求,线程池的优点就不明显了。因为Telnet会话时间比线程的创建时间大多了。对性能要求苛刻的应用,比如要求服务器迅速响应客户请求。接受突发性的大量请求,但不至于使服务器因此产生大量线程的应用。突发性大量客户请求,在没有线程池情况下,将产生大量线程,虽然理论上大部分操作系统线程数目最大值不是问题,短时间内产生大量线程可能使内存到达极限,出现错误3 线程池工作原理

线程池的关键部分可以分为:

线程容器:用来管理创建的线程,方便统一初始化。任务队列:用来储存任务消息,需要支持压入与取出的操作。线程函数:线程都需要执行这个函数模块,在这个函数模块中进行任务的等待和执行。线程唤醒机制:需要一个线程换取机制,通过条件变量个互斥锁完成对线程的保护与唤醒。单例模式:线程池不需要创建多个,一个程序只需要一个线程池,通过单例模式进行优化。

这样,通过主线程对线程池中进行的入队列操作就可以传入任务,然后线程池中会自动检测队列中是否有任务,有任务就调用休眠的线程来执行任务。

4 构建线程池4.1 框架搭建

首先针对线程池的关键组件进行一个框架的构建:

线程池的成员变量:

线程计数 int _thread_num内部容器 vector _threads任务队列 queue _tast_queue 这个任务队列会被多线程访问时临界资源!需要所保护运行判断 bool _isrunning; 判断是否结束互斥锁 pthread_mutex_t _mtx条件变量 pthread_cond_t _cond 条件不满足(任务队列无任务)时线程阻塞休眠线程计数器:_sleep_num 用来判断是否需要唤醒阻塞的线程(判断方法自定义)

为了使用线程方便,我们直接使用之前实现的线程类!

然后我们还需要一下功能函数来支持主线程传入任务,主线程停止工作,线程池读取任务,线程池删除旧任务:

功能函数:

初始化Init:构建线程,并储存在容器中。线程进入线程等待函数 void work()开始运行Start:遍历进入线程运行 , _isrunning = true停止运行Stop: _isrunning = false! 一切的功能只有true时才可以运行加入任务Equeue:对临界资源进行操作,先上锁,在插入数据,插入之后可以唤醒休眠的线程来执行任务,如果没有就不需要处理,只有运行状态才可以进行插入!

为了方便进行加减锁的操作,我们可以完成一些线程池内部函数:

内部函数

智慧车行预约小程序
智慧车行预约小程序

智慧车行小程序,是一个专门为洗车/4S/车辆维修行业打造的小程序,前后端完整代码包括车行动态,养车常识,保养预约,维修预约,洗车美容预约,汽车检测预约等功能。采用腾讯提供的小程序云开发解决方案,无须服务器和域名预约管理:开始/截止时间/人数均可灵活设置,可以自定义客户预约填写的数据项预约凭证:支持线下到场后校验签到/核销/二维码自助签到等多种方式详尽的预约数据:支持预约名单数据导出Excel,打印

下载
加锁 LockQueue()解锁 UnlockQueue()唤醒线程 WakeUp() : 通过条件变量来唤醒一个线程 — WakeUpAll:唤醒全部队列是否为空 IsEmpty()线程休眠 Sleep() 等待条件变量响应线程任务 HandlerTask(): 启动时所有线程都来执行该函数,有任务就执行任务,没有就阻塞等待,需要注意的是,该函数时成员函数,存在隐藏参数this,不满足条件,可以使用bind绑定来解决,有任务就执行任务

主要框架

代码语言:javascript代码运行次数:0运行复制
#pragma once#include "Thread.hpp"#include #include #include #include "Log.hpp"using namespace ThreadMouble;using namespace log_ns;const int default_num = 5;// 测试代码void test(){    std::cout << "这是一个测试程序!" << std::endl;}template class ThreadPool{private:    // 加锁 解锁    void LockQueue()    {        pthread_mutex_lock(&_mtx);    }    void UnlockQueue()    {        pthread_mutex_unlock(&_mtx);    }    // 休眠等待    void Sleep()    {        pthread_cond_wait(&_cond, &_mtx);    }    // 唤醒一个线程    void WakeUp()    {        pthread_cond_signal(&_cond);    }    // 全部唤醒    void WakeUpAll()    {        pthread_cond_broadcast(&_cond);    }    // 队列为空    bool IsEmpty()    {        return _tasks.empty();    }    void HandlerTask(std::string &name)    {    }public:    ThreadPool(int num = default_num) : _thread_num(num), _sleep_num(0), _isrunning(false)    {        pthread_mutex_init(&_mtx, nullptr);        pthread_cond_init(&_cond, nullptr);    }public:    static ThreadPool *GetInstance()    {     }    // 初始化    void Init()     {    }    // 开始运行    void Start()     {    }    // 停止运行    void Stop()    {     }    // 加入任务    void Equeue(T &in)    {          }    ~ThreadPool()    {        pthread_mutex_destroy(&_mtx);        pthread_cond_destroy(&_cond);    }private:    // 线程容器    std::vector _threads;    // 任务队列    std::queue _tasks;    // 线程数量    int _thread_num;    // 休眠数量    int _sleep_num;    // 运行判断    bool _isrunning;    // 加锁保护队列    pthread_mutex_t _mtx;    // 条件变量    pthread_cond_t _cond;};
4.3 HandlerTask函数

我们首先先来完成每个线程创建的新线程都会进行的函数:

首先这个函数需要不断的执行,所以使用while(true)使其不断地轮询然后就是对队列任务的读取,如果队列为空并且线程池还在运行,那么就进入进行等待条件变量唤醒,需要注意的是休眠数需要进行处理如果队列为空了,并且停止运行了,就直接退出!退出前进行解锁!如果队列不为空,并且还在运行,那么就从队列中取出一个任务进行执行!代码语言:javascript代码运行次数:0运行复制
void HandlerTask(std::string &name)    {        // 运行任务        while (true)        {            LockQueue();            // 队列为空并且正在运行            while (IsEmpty() && _isrunning)            {                // 进行阻塞                _sleep_num++;                LOG(INFO, "%s sleep begin!\n", name.c_str());                Sleep();                LOG(INFO, "%s wakeup!\n", name.c_str());                _sleep_num--;            }            // 如果队列为空 停止运行了            if (IsEmpty() && !_isrunning)            {                // 直接解锁退出                UnlockQueue();                // std::cout << name << " stop 退出!" << std::endl;                LOG(INFO, "%s quit !\n", name.c_str());                break;            }            // 取出一个任务            T t = _tasks.front();            _tasks.pop();            // 解锁            UnlockQueue();            // 临界区之外执行任务             t();            // std::cout << name << " " << t.result() << std::endl;            LOG(DEBUG, "HandlerTask Done, task is : %s\n", t.result().c_str());        }    }

完成!

4.3 基础函数

我们先来实现初始化init , 开始运行 start ,停止运行stop,加入任务

初始化:首先就是创建若干个线程,再将创建的线程存入线程容器中。

代码语言:javascript代码运行次数:0运行复制
// 初始化void Init() {    // 进行绑定    func_t func = std::bind(&ThreadPool::HandlerTask, this, std::placeholders::_1);    for (int i = 0; i < _thread_num; i++)    {        std::string name = "thread-" + std::to_string(i + 1);        // std::cout << name << " init!" << std::endl;        //_threads.emplace_back(name, test); //测试        _threads.emplace_back(name, func);        LOG(DEBUG, "construct thread : %s done , init success\n", name.c_str());    }}

开始运行:直接遍历一遍进行开始运行即可!每个线程都来执行HandlerTask

代码语言:javascript代码运行次数:0运行复制
// 开始运行    void Start()     {        _isrunning = true;        for (auto &e : _threads)        {            // std::cout << e.getname() << " start!" << std::endl;            LOG(DEBUG, "start thread %s done\n", e.Name().c_str());            e.Start();        }

停止运行:唤醒所有休眠的线程,并将判断符设置为false

代码语言:javascript代码运行次数:0运行复制
   // 停止运行   void Stop()   {       LockQueue();       // std::cout << "void stop()" << std::endl;       WakeUpAll();       _isrunning = false;       UnlockQueue();       LOG(INFO, "ThreadPool Stop success\n");   }

加入任务: 这里会对全局变量进行操作,所以先上锁。在线程池还在运行时才可以进程任务的插入,插入后,如果有休眠的线程就唤醒一个休眠的线程来执行任务!

代码语言:javascript代码运行次数:0运行复制
// 加入任务void Equeue(T &in){    // 临界区操作需要加锁    LockQueue();    // 只有线程池运行才可以进行插入    if (_isrunning)    {        _tasks.push(in);        // std::cout << "加入任务 : " << in.debug() << std::endl;        LOG(INFO, "push task : %s\n", in.debug().c_str());        // 唤醒一个线程        if (_sleep_num > 0)            WakeUp();    }    UnlockQueue();}
4.4 单例模式改造

单例模式之前的文章有介绍过:设计模式 — 单例模式

接下来我们通过懒汉模式进行优化:

首先我们要做的就是将构造函数私有化,让类外部不能够创建对象,并且封锁赋值重载和拷贝构造!然后类内需要一个静态类对象指针,并且使用单独一个全局锁进行保护完成一个获取唯一类对象指针的函数方法getinstance代码语言:javascript代码运行次数:0运行复制
static ThreadPool *GetInstance()    {        if (_tp == nullptr)        {            LockGuard lock(&_sig_mtx);            if (_tp == nullptr)            {                LOG(INFO, "create threadpool\n");                // thread-1 thread-2 thread-3....                _tp = new ThreadPool();                _tp->Init();                _tp->Start();                            }            else            {                LOG(INFO, "get threadpool\n");            }        }        return _tp;    }
代码语言:javascript代码运行次数:0运行复制
// 单例模式template class ThreadPool{//...    static ThreadPool *_tp;    static pthread_mutex_t _sig_mtx;    //...};//类外初始化template ThreadPool *ThreadPool::_tp = nullptr;template pthread_mutex_t ThreadPool::_sig_mtx = PTHREAD_MUTEX_INITIALIZER;

这样单例模式就完成了!

4.5 测试运行代码语言:javascript代码运行次数:0运行复制
#include "ThreadPool.hpp"#include #include "Task.hpp"#include #include #include #include "Log.hpp"int main(){    srand(time(nullptr) ^ getpid());    // ThreadPool *tp = new ThreadPool();    // tp->Init();    // tp->Start();    ThreadPool *tp = ThreadPool::GetInstance();    int cnt = 5;    while (--cnt)    {        int num1 = rand() % 10;        usleep(1000);        int num2 = rand() % 10;        Task t(num1, num2);        tp->Equeue(t);        LOG(INFO , "Equeue a task , %s\n" , t.debug().c_str());        sleep(1);    }    tp->Stop();    LOG(INFO , "ThreadPool stop! \n");    return 0;}

我们来进行测试:

【Linux】线程池项目详解

很好的完成测试代码!!!

5 总结

线程的学习就告一段落,接下来我将会完成一个高并发内存池项目,来巩固C++的知识,并为简历增添一笔重要颜色!完成项目之后开启全新篇章 — 计算机网络,欢迎大家支持!!!

接下来还会持续更新算法相关内容,欢迎大家支持!!!

相关专题

更多
js获取数组长度的方法
js获取数组长度的方法

在js中,可以利用array对象的length属性来获取数组长度,该属性可设置或返回数组中元素的数目,只需要使用“array.length”语句即可返回表示数组对象的元素个数的数值,也就是长度值。php中文网还提供JavaScript数组的相关下载、相关课程等内容,供大家免费下载使用。

556

2023.06.20

js刷新当前页面
js刷新当前页面

js刷新当前页面的方法:1、reload方法,该方法强迫浏览器刷新当前页面,语法为“location.reload([bForceGet]) ”;2、replace方法,该方法通过指定URL替换当前缓存在历史里(客户端)的项目,因此当使用replace方法之后,不能通过“前进”和“后退”来访问已经被替换的URL,语法为“location.replace(URL) ”。php中文网为大家带来了js刷新当前页面的相关知识、以及相关文章等内容

374

2023.07.04

js四舍五入
js四舍五入

js四舍五入的方法:1、tofixed方法,可把 Number 四舍五入为指定小数位数的数字;2、round() 方法,可把一个数字舍入为最接近的整数。php中文网为大家带来了js四舍五入的相关知识、以及相关文章等内容

732

2023.07.04

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

477

2023.09.01

JavaScript转义字符
JavaScript转义字符

JavaScript中的转义字符是反斜杠和引号,可以在字符串中表示特殊字符或改变字符的含义。本专题为大家提供转义字符相关的文章、下载、课程内容,供大家免费下载体验。

414

2023.09.04

js生成随机数的方法
js生成随机数的方法

js生成随机数的方法有:1、使用random函数生成0-1之间的随机数;2、使用random函数和特定范围来生成随机整数;3、使用random函数和round函数生成0-99之间的随机整数;4、使用random函数和其他函数生成更复杂的随机数;5、使用random函数和其他函数生成范围内的随机小数;6、使用random函数和其他函数生成范围内的随机整数或小数。

991

2023.09.04

如何启用JavaScript
如何启用JavaScript

JavaScript启用方法有内联脚本、内部脚本、外部脚本和异步加载。详细介绍:1、内联脚本是将JavaScript代码直接嵌入到HTML标签中;2、内部脚本是将JavaScript代码放置在HTML文件的`<script>`标签中;3、外部脚本是将JavaScript代码放置在一个独立的文件;4、外部脚本是将JavaScript代码放置在一个独立的文件。

658

2023.09.12

Js中Symbol类详解
Js中Symbol类详解

javascript中的Symbol数据类型是一种基本数据类型,用于表示独一无二的值。Symbol的特点:1、独一无二,每个Symbol值都是唯一的,不会与其他任何值相等;2、不可变性,Symbol值一旦创建,就不能修改或者重新赋值;3、隐藏性,Symbol值不会被隐式转换为其他类型;4、无法枚举,Symbol值作为对象的属性名时,默认是不可枚举的。

552

2023.09.20

高德地图升级方法汇总
高德地图升级方法汇总

本专题整合了高德地图升级相关教程,阅读专题下面的文章了解更多详细内容。

72

2026.01.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.4万人学习

Git 教程
Git 教程

共21课时 | 2.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号