0

0

SQL队列结构设计方案_SQL模拟消息队列的方式

舞夢輝影

舞夢輝影

发布时间:2025-12-17 22:41:34

|

449人浏览过

|

来源于php中文网

原创

MySQL模拟消息队列本质是用关系型数据库替代专业MQ实现异步解耦,适合中小项目;核心为message_queue表,含qid、topic、status、data等字段,配合索引与事务保障基本可靠性。

sql队列结构设计方案_sql模拟消息队列的方式

用 MySQL 模拟消息队列,本质是用关系型数据库替代专业 MQ(如 Kafka、RocketMQ)来实现“生产-存储-消费”的异步解耦。它不追求高吞吐或强一致性,但胜在简单、可控、无需额外运维,适合中小项目、内部工具、低频事件通知或教学演示。

核心表结构设计

一张轻量、可扩展的 message_queue 表即可承载基本能力:

  • qid:主键,自增,唯一标识每条消息
  • topic:tinyint 或 varchar(32),标记业务类别(如 'order', 'log', 'notify')
  • status:tinyint,默认 0(未消费),1(已消费),支持幂等重试
  • data:text 或 json 类型,存序列化后的消息体(推荐 JSON 格式,便于解析)
  • priority:tinyint,可选字段,用于简单优先级调度(如 1=高,3=低)
  • create_time:datetime,精确到毫秒,用于超时判断和顺序参考
  • retry_count:tinyint,默认 0,失败后递增,防死循环
  • next_retry_at:datetime,可选,支持延迟重试(如失败后 5 分钟再试)

索引建议:PRIMARY KEY(qid) + INDEX idx_topic_status (topic, status) + INDEX idx_next_retry (next_retry_at)。避免全表扫描,尤其在定时轮询场景下。

生产者写入逻辑

写入就是普通 INSERT,关键在于轻量和可靠:

陌言AI
陌言AI

陌言AI是一个一站式AI创作平台,支持在线AI写作,AI对话,AI绘画等功能

下载
  • 业务代码组装好消息对象,JSON 序列化后写入 data 字段
  • 显式指定 topic 和初始 status=0
  • 建议用事务包裹:INSERT + 相关业务状态更新(如“订单创建成功”后发通知),保证原子性
  • 避免大字段直塞:若消息体超 1MB,建议只存 ID 或 URL,实际内容落对象存储或另一张 detail 表

消费者拉取与处理流程

消费者不是长连接监听,而是周期性查询+乐观锁更新,模拟“拉模式”:

  • SELECT … FOR UPDATE SKIP LOCKED(MySQL 8.0+)查出一条待处理消息,加行锁防并发重复消费
  • 处理业务逻辑;成功则 UPDATE status=1;失败则 UPDATE status=0, retry_count+1, next_retry_at=NOW()+INTERVAL 5 MINUTE
  • 为防卡死,加超时机制:WHERE status=0 AND (next_retry_at IS NULL OR next_retry_at
  • 建议用独立 worker 进程,每秒最多拉 1–5 条,避免 DB 压力过大

注意事项与边界提醒

这不是替代 Kafka 的方案,而是务实妥协:

  • 不支持广播、主题订阅、死信队列等高级语义,需业务层补足
  • 无原生消息确认机制,靠 status + retry_count + 时间戳模拟
  • 大量消息堆积时,表体积增长快,建议按月分表或定期归档(如 status=1 且 create_time
  • 若需顺序性,仅靠 create_time 不够可靠;应在 data 中带序号,业务层校验
  • 高并发写入下,AUTO_INCREMENT 可能成瓶颈;可考虑 UUID_SHORT() 或雪花 ID 替代 qid

基本上就这些。够用、易懂、易维护,是它的核心价值。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

683

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

323

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

348

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

1096

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

358

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

697

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

577

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

419

2024.04.29

html编辑相关教程合集
html编辑相关教程合集

本专题整合了html编辑相关教程合集,阅读专题下面的文章了解更多详细内容。

16

2026.01.21

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 1.9万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 805人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号