0

0

SQL 分区表设计与性能提升

冷漠man

冷漠man

发布时间:2026-02-19 10:58:04

|

353人浏览过

|

来源于php中文网

原创

分区键选错会导致全表扫描,需用高频过滤字段;新增分区不迁移旧数据;join时分区键须对齐;ddl和备份需特殊处理。

sql 分区表设计与性能提升

分区键选错导致查询变慢甚至全表扫描

分区表不是加了就快,核心是让查询能精准落到某个分区。如果 WHERE 条件里没用到分区键,MySQL 或 PostgreSQL 通常会扫描所有分区——性能反而比普通表更差。

常见错误现象:EXPLAIN 显示 partitions: all,或执行时间明显增长;业务查某天数据却触发跨十几个分区扫描。

  • 选分区键优先考虑高频过滤字段,比如日志表用 create_time(按天/月分区),订单表用 shop_id(按商户分片)
  • 避免用 UUIDid 这类无序主键做 RANGE 分区,会导致数据倾斜和写入热点
  • PostgreSQL 的 LIST 分区要求 VALUES IN 必须覆盖所有可能值,漏掉会导致 INSERT 报错:no partition for partitioning key
  • MySQL 5.7+ 支持 TO_DAYS() 函数做日期分区,但注意它不支持 NULL 值,需提前 COALESCE(create_time, '1970-01-01')

新增分区后老数据没自动迁移

分区是逻辑结构,创建新分区不会移动已有数据。很多团队以为“加个 ALTER TABLE ... ADD PARTITION 就能立刻生效”,结果发现新分区空空如也,老数据还在旧分区里躺着。

使用场景:按月分区的表到了下个月,需要把新数据写进新区分,同时保证历史查询不受影响。

  • MySQL 中,RANGE/LIST 分区新增分区后,必须手动用 ALTER TABLE ... REORGANIZE PARTITION 拆分或合并才能重分布数据(但代价高,慎用)
  • 更稳妥的做法是提前建好未来 3–6 个月的空分区,用 ALTER TABLE ... DROP PARTITION 定期清理过期分区
  • PostgreSQL 12+ 支持 ATTACH PARTITION,但只挂载空分区;若要迁移数据,得用 INSERT INTO ... SELECT + DELETE 配合事务,且注意锁表时间
  • 别在高峰期执行 REORGANIZE 或大批量 INSERT ... SELECT,容易阻塞 DML

JOIN 分区表时关联字段没对齐分区键

两张都分区的表做 JOIN,如果连接字段和各自分区键不一致,优化器无法做分区裁剪,很可能退化成嵌套循环+全分区扫描。

magento(麦进斗)
magento(麦进斗)

Magento是一套专业开源的PHP电子商务系统。Magento设计得非常灵活,具有模块化架构体系和丰富的功能。易于与第三方应用系统无缝集成。Magento开源网店系统的特点主要分以下几大类,网站管理促销和工具国际化支持SEO搜索引擎优化结账方式运输快递支付方式客户服务用户帐户目录管理目录浏览产品展示分析和报表Magento 1.6 主要包含以下新特性:•持久性购物 - 为不同的

下载

典型例子:订单表按 order_date 分区,用户表按 user_id 分区,两者 JOIN 时用 user_id 关联——订单表完全无法裁剪分区。

  • 强关联场景(如订单+订单项),尽量让两张表用相同字段分区,例如都用 order_id % 16 做 HASH 分区
  • MySQL 8.0+ 支持 PRUNE 提示,但仅限单表,对 JOIN 无效;别依赖 /*+ USE_PARTITION(...) */ 这类伪提示
  • 如果必须跨分区键 JOIN,考虑冗余字段:在订单项表里存一份 order_date,并给它建二级分区或索引
  • 分区表和非分区表 JOIN 一般没问题,优化器会先裁剪分区表,再用结果集驱动另一张表

备份与 DDL 操作卡住或失败

分区表的 ALTER TABLE 不是原子操作,尤其在大表上容易卡住或触发超时。mysqldump 默认导出所有分区,遇到千万级分区可能直接 OOM。

常见错误现象:ALTER TABLE ... DROP PARTITION 执行数小时没反应;mysqldump 报错 Got timeout reading communication packets;pt-online-schema-change 检测到分区表后拒绝操作。

  • MySQL 中,DROP PARTITION 是即时的(只删元数据),但 TRUNCATE PARTITION 会重建分区,实际是删除+重建,IO 压力大
  • 备份建议用 mysqldump --skip-triggers --no-create-info --where="create_time >= '2024-01-01'" 分批导出,别全量 dump 分区表
  • PostgreSQL 的 VACUUM 对分区表需单独执行到每个子分区,主表上运行只清理主表元数据
  • 不要在从库上直接 ALTER TABLE 分区结构,GTID 或 binlog 格式不兼容可能导致复制中断

分区不是银弹,真正难的是让业务查询习惯匹配分区设计——比如强制带时间范围、避免 SELECT *、警惕隐式类型转换让分区键失效。这些细节没对齐,加再多分区也没用。

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

985

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

334

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

377

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

1738

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

374

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

1292

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

585

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

436

2024.04.29

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

561

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号