0

0

mysql如何优化大表的分区查询_mysql分区剪枝技术解析

P粉602998670

P粉602998670

发布时间:2026-03-10 00:49:32

|

539人浏览过

|

来源于php中文网

原创

分区剪枝生效需满足:查询条件必须直接使用分区键且无函数包裹、无隐式转换、符合分区类型限制(如range支持between,list仅支持in);否则将全分区扫描。

mysql如何优化大表的分区查询_mysql分区剪枝技术解析

分区剪枝没生效?先确认查询条件是否能被优化器识别

MySQL 的分区剪枝(Partition Pruning)不是自动“开箱即用”的魔法,它依赖查询条件中出现的 PARTITION BY 列,且该列必须以**确定性、非函数包裹、非隐式转换**的方式出现在 WHERE 子句中。否则优化器会扫描所有分区,性能和不分区无异。

  • WHERE create_time = '2024-01-01' ✅(假设按 create_time RANGE 分区)
  • WHERE DATE(create_time) = '2024-01-01' ❌(函数包裹,剪枝失效)
  • WHERE create_time = STR_TO_DATE('2024-01-01', '%Y-%m-%d') ❌(表达式右值不可推导)
  • WHERE create_time >= '2024-01-01' AND create_time ✅(范围可精确映射到分区)

为什么 EXPLAIN 显示 type=ALL 却仍只查了 1 个分区?

EXPLAIN 中的 type=ALL 容易误读为“全表扫描”,其实它只表示“对每个匹配分区做全分区扫描”,不等于扫全部分区。关键看 partitions 列——这才是剪枝是否成功的直接证据。

  • 执行 EXPLAIN PARTITIONS SELECT * FROM orders WHERE order_date = '2023-10-15';
  • 检查输出中 partitions 字段:若显示 p202310,说明只访问该分区;若显示 p202301,p202302,...,p202312,说明剪枝失败
  • key 列为空 ≠ 剪枝失败,分区键本身不依赖二级索引也能剪枝

RANGE 分区 vs LIST 分区:查询写法差异直接影响剪枝能力

RANGE 和 LIST 对查询条件的“可推导性”要求不同。RANGE 更宽容(支持 >、>=、BETWEEN),LIST 更严格(只认明确枚举值或 IN 列表)。

  • RANGE 分区(按 id):WHERE id BETWEEN 1000 AND 2000 ✅ 可剪枝
  • LIST 分区(按 region_id):WHERE region_id IN (1,2,5) ✅ 可剪枝;WHERE region_id > 3 ❌ 无法剪枝(优化器不知道哪些分区含 >3 的值)
  • LIST 分区慎用 NOT IN:MySQL 8.0+ 才支持部分剪枝,5.7 基本失效
  • 哈希/KEY 分区只支持 =IN 等价查询,其他一律全扫

ALTER TABLE … REORGANIZE PARTITION 导致慢查询?别在高峰期干这事

分区 DDL 操作(如合并、拆分、重组织)在 MySQL 中是**锁表 + 复制数据**行为,即使只是元数据变更,也可能触发隐式全量重建。线上大表执行时,不仅阻塞写入,还会让后续查询因元数据锁(metadata_lock)卡住。

  • 避免在业务高峰执行 REORGANIZE PARTITIONADD PARTITION
  • 提前用 SHOW PROCESSLIST 观察是否有长时间 Waiting for table metadata lock 的线程
  • 对超大表(>100GB),优先考虑 pt-online-schema-change 配合手动分区迁移,而非原地 DDL
  • 注意:MySQL 8.0 的 ALGORITHM=INSTANT 不适用于分区变更,仅限普通列增删

分区剪枝真正起效的前提,是分区键参与查询且写法干净——没有函数、没有类型隐式转换、没有跨分区逻辑判断。很多人调了半天发现没加速,最后发现只是 WHERE FROM_UNIXTIME(ts) 这样一个括号毁所有。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

686

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

493

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

287

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

519

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

266

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

392

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

542

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

666

2023.08.14

JavaScript浏览器渲染机制与前端性能优化实践
JavaScript浏览器渲染机制与前端性能优化实践

本专题围绕 JavaScript 在浏览器中的执行与渲染机制展开,系统讲解 DOM 构建、CSSOM 解析、重排与重绘原理,以及关键渲染路径优化方法。内容涵盖事件循环机制、异步任务调度、资源加载优化、代码拆分与懒加载等性能优化策略。通过真实前端项目案例,帮助开发者理解浏览器底层工作原理,并掌握提升网页加载速度与交互体验的实用技巧。

59

2026.03.06

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 2.5万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 845人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号