0

0

如何通过结构视图识别宽表_过多的列对性能的影响分析及垂直拆分评估建议

P粉602998670

P粉602998670

发布时间:2026-03-18 08:46:03

|

855人浏览过

|

来源于php中文网

原创

列数超过100且含多个TEXT/JSON字段时会明显拖慢查询;单行超4KB易致页分裂,超8KB触发MySQL外存溢出,PostgreSQL中TOAST字段名存在即影响索引选择。

宽表列数超过多少会明显拖慢查询?

实际业务中,select * 扫描 50+ 列的宽表,在 mysql 8.0 或 postgresql 14 上,单行数据体积超 4kb 就可能触发页分裂或缓存失效;当列数 > 100 且含多个 text/json 字段时,即使只查 2–3 列,全表扫描的 i/o 和内存开销也会陡增。这不是理论阈值,而是从慢查询日志里反复出现的 using temporary; using filesort 和高 handler_read_next 值反推出来的临界点。

常见错误现象:
• 同一条 WHERE id = ? 查询,加了 SELECT * 后响应时间从 5ms 跳到 120ms
EXPLAIN 显示 key_len 很小,但 rows 预估准确,实际执行却严重超时
• 应用层 GC 频率上升,尤其在批量导出接口里

  • 别只看列数量,重点检查是否混入了大字段:一个 body TEXT + 三个 metadata JSON 就能让逻辑行膨胀到 16KB+
  • PostgreSQL 中,TOAST 表虽能延迟加载大字段,但只要查询语句里写了这些字段名(哪怕没用到),优化器仍可能放弃索引只扫堆表
  • MySQL 的 row_format=COMPACT 下,单行超 8KB 会强制外存溢出,导致每次访问都要多一次磁盘寻道

如何用结构视图快速定位“伪宽表”?

所谓“伪宽表”,是指表定义里列很多,但真正高频访问的只有 10% 左右——比如用户表有 87 列,但登录、鉴权、展示头像只依赖其中 6 列。这时候结构视图(information_schema.COLUMNSpg_attribute)不是用来数列,而是找“沉默列”。

实操建议:

  • information_schema.COLUMNS 时加过滤:WHERE table_name = 'user_profile' AND column_default IS NULL AND is_nullable = 'YES',这类列大概率长期为空,属于可拆候选
  • 对比 pg_stat_all_columns(PG)或慢查日志中的 used_columns(需开启 performance_schema),找出半年内从未出现在 WHERE/JOIN/ORDER BY 中的列
  • 警惕带 _backup_old_v2 后缀的列,它们常是迁移残留,但仍在表结构里占位、参与 MVCC 版本链

垂直拆分前必须验证的三个依赖点

拆表不是删列,而是把原表按访问频次/一致性要求切分成多张物理表。如果跳过依赖验证,很容易出现“拆完更慢”或“事务跨表失败”。

关键检查项:

MidReal AI
MidReal AI

MidReal AI是一款革命性的AI小说生成工具,同时也是一个文本互动冒险游戏平台。

下载
  • 应用层 ORM 是否硬编码了 SELECT * 或字段顺序(如 MyBatis 的 resultMap 按 index 映射)——一旦拆分,ResultSet 列数变化直接抛 SQLException
  • 是否存在跨列计算逻辑:比如 CONCAT(first_name, ' ', last_name) 在原表里是表达式,拆到两张表后就得改写成 JOIN,而 JOIN 可能破坏原有索引覆盖
  • Binlog / CDC 工具是否订阅整表:若用 Debezium 订阅 user_profile,拆成 user_coreuser_ext 后,下游消费者会收不到完整变更事件,需同步调整 topic 和 schema registry

拆分后索引和统计信息容易被忽略的细节

垂直拆分后,原表上的复合索引大概率失效,但新表的索引不是简单照搬。更麻烦的是统计信息不会自动重采样,优化器仍按旧分布估算,导致执行计划劣化。

必须手动处理:

  • MySQL 中,拆分后立即执行 ANALYZE TABLE user_core,否则 EXPLAIN 里的 rows 还是按 87 列时的基数估算
  • PostgreSQL 中,VACUUM ANALYZE user_core 不够,要确认 pg_statsn_distinctmost_common_vals 是否已更新,特别是拆出的 user_settings 表,其 theme 列可能从“几乎唯一”变成“90% 是 dark”
  • 不要给新表盲目加索引:比如原表有 (status, created_at) 索引,拆后 statususer_corecreated_atuser_meta,这个索引就彻底无意义了

最常被跳过的一步:检查外键约束是否还指向原表。拆分后若保留 user_profile.id → order.user_id,但 user_profile 已不存在,某些 ORM 会在启动时报错,而有些则静默降级为无约束关联——后者更危险,数据不一致很难回溯。

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

690

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

554

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

287

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

520

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

267

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

392

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

543

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

668

2023.08.14

抖漫入口地址合集
抖漫入口地址合集

本专题整合了抖漫入口地址相关合集,阅读专题下面的文章了解更多详细地址。

17

2026.03.17

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号