0

0

C++如何构建一个支持大规模并发连接的Epoll网络模型?(Linux后端开发)

裘德小鎮的故事

裘德小鎮的故事

发布时间:2026-03-02 09:25:03

|

549人浏览过

|

来源于php中文网

原创

必须用epoll_cloexec避免子进程继承无效epoll fd导致静默失败和资源泄漏;et模式需循环读写至eagain/ewouldblock;epoll_wait事件数组须动态扩容防截断和栈溢出;accept须非阻塞循环直至eagain,并立即设client fd为非阻塞。

c++如何构建一个支持大规模并发连接的epoll网络模型?(linux后端开发)

epoll_create1() 为什么要用 EPOLL_CLOEXEC

不加 EPOLL_CLOEXEC,fork 子进程后,子进程会继承 epoll fd,但通常不打算在子进程里用它——结果是父进程 close 掉 epoll fd 后,子进程还拿着一个无效句柄,后续 epoll_ctlepoll_wait 可能静默失败或触发 EBADF。更隐蔽的问题是:子进程 exit 时没显式 close,内核资源泄漏(尤其长周期守护进程反复 fork)。

  • 始终用 epoll_create1(EPOLL_CLOEXEC),别用过时的 epoll_create
  • 如果必须用 epoll_create(老内核),手动调 fcntl(epoll_fd, F_SETFD, FD_CLOEXEC)
  • EPOLL_CLOEXEC 不影响当前进程行为,只控制 fork 行为,零成本

ET 模式下必须循环读写直到 EAGAINEWOULDBLOCK

ET(Edge Triggered)不是“通知一次就完事”,而是“状态变化才通知”。比如 socket 缓冲区从空变非空,epoll 才唤醒;但如果你只 read 一次就停,剩下数据还在内核缓冲区里,而状态没再变,下次 epoll_wait 就不会再次提醒你——连接就卡死在半读状态。

  • read 场景:循环 recv(fd, buf, len, MSG_DONTWAIT),直到返回 -1errno == EAGAINEWOULDBLOCK
  • write 场景同理:循环 send(fd, buf, len, MSG_DONTWAIT),直到全发完或遇到 EAGAIN
  • 千万别在 ET 模式下用阻塞 socket,否则一次 read/send 就卡住整个 event loop
  • 注意 MSG_DONTWAIT 是 per-call 标志,比全局设 O_NONBLOCK 更安全(避免其他库误用)

fd 数量暴涨时,epoll_wait 返回数组大小不能硬写 1024

很多人直接开个 struct epoll_event events[1024],觉得够用。但单机百万连接下,一次 epoll_wait 可能就活跃几千事件——栈上分配 1024 个 epoll_event(每个 12 字节)才 12KB,看似安全,但实际容易踩两个坑:

  • 内核返回事件数超过数组长度,epoll_wait 截断,丢事件(不报错!)
  • 高并发下频繁栈分配大数组,可能触发栈溢出(尤其协程栈小或嵌套深时)
  • 更糟的是:有人把 events 数组 malloc 在堆上但复用不清理,导致旧事件残留干扰逻辑

正确做法:用 std::vector<epoll_event></epoll_event> 动态扩容,初始 reserve 1024,每次调用前 clear,size() 传给 epoll_wait;或者用 mmap 分配固定大页(如 64KB),自己管理 offset。

通义灵码
通义灵码

阿里云出品的一款基于通义大模型的智能编码辅助工具,提供代码智能生成、研发智能问答能力

下载

立即学习C++免费学习笔记(深入)”;

accept() 必须非阻塞 + 循环收完所有新连接

监听 socket 设了 O_NONBLOCK 后,accept() 可能返回 -1errno == EAGAIN,表示“这次没有新连接可取”。但很多人只 accept 一次就回去等下一轮 epoll_wait,结果漏掉同一时刻到达的多个 SYN —— Linux 的 listen backlog 队列可能积压多个已完成三次握手的连接,一次 accept 只取一个。

  • 只要 accept() 成功,就继续 while 循环,直到返回 -1errno == EAGAIN
  • 新 accept 出来的 client fd 必须立刻设 O_NONBLOCK,否则后续 ET 模式下 read/write 会阻塞
  • 记得检查 accept() 返回的 fd 是否超出 RLIMIT_NOFILE,超限要关连接并打日志,否则 fd 耗尽后整个服务假死

大规模连接真正难的不是 epoll 本身,而是每个细节都得和内核行为对齐:ET 模式、非阻塞、边缘触发语义、fd 生命周期、错误码分支覆盖——少一个,流量高峰时就变成随机丢连接或 CPU 空转。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
edge是什么浏览器
edge是什么浏览器

Edge是一款由Microsoft开发的网页浏览器,是Windows 10操作系统中默认的浏览器,其目标是提供更快、更安全、更现代化的浏览器体验。本专题为大家提供edge浏览器相关的文章、下载、课程内容,供大家免费下载体验。

1637

2023.08.21

IE浏览器自动跳转EDGE如何恢复
IE浏览器自动跳转EDGE如何恢复

ie浏览器自动跳转edge的解决办法:1、更改默认浏览器设置;2、阻止edge浏览器的自动跳转;3、更改超链接的默认打开方式;4、禁用“快速网页查看器”;5、卸载edge浏览器;6、检查第三方插件或应用程序等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

394

2024.03.05

如何解决Edge打开但没有标题的问题
如何解决Edge打开但没有标题的问题

若 Microsoft Edge 浏览器打开后无标题(窗口空白或标题栏缺失),可尝试以下方法解决: 重启 Edge:关闭所有窗口,重新启动浏览器。 重置窗口布局:右击任务栏 Edge 图标 → 选择「最大化」或「还原」。 禁用扩展:进入 edge://extensions 临时关闭插件测试。 重置浏览器设置:前往 edge://settings/reset 恢复默认配置。 更新或重装 Edge:检查最新版本,或通过控制面板修复

1017

2025.04.24

while的用法
while的用法

while的用法是“while 条件: 代码块”,条件是一个表达式,当条件为真时,执行代码块,然后再次判断条件是否为真,如果为真则继续执行代码块,直到条件为假为止。本专题为大家提供while相关的文章、下载、课程内容,供大家免费下载体验。

104

2023.09.25

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

429

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

599

2023.08.10

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

429

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

599

2023.08.10

Golang 测试体系与代码质量保障:工程级可靠性建设
Golang 测试体系与代码质量保障:工程级可靠性建设

Go语言测试体系与代码质量保障聚焦于构建工程级可靠性系统。本专题深入解析Go的测试工具链(如go test)、单元测试、集成测试及端到端测试实践,结合代码覆盖率分析、静态代码扫描(如go vet)和动态分析工具,建立全链路质量监控机制。通过自动化测试框架、持续集成(CI)流水线配置及代码审查规范,实现测试用例管理、缺陷追踪与质量门禁控制,确保代码健壮性与可维护性,为高可靠性工程系统提供质量保障。

24

2026.02.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 10万人学习

Git 教程
Git 教程

共21课时 | 3.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号