0

0

SQL 正规化与反规范化实践案例

冷漠man

冷漠man

发布时间:2026-02-21 18:50:03

|

254人浏览过

|

来源于php中文网

原创

反规范化适用于读多写少、join导致i/o或连接数瓶颈的场景,如报表导出;需先用explain analyze确认扫描问题,再通过触发器或cdc同步冗余数据,避免应用层双写。

sql 正规化与反规范化实践案例

什么时候该用反规范化,而不是硬扛 JOIN 性能?

数据库查得慢,第一反应不是加索引,而是看 SQL 里嵌了多少层 JOIN。尤其在报表、宽表导出、实时看板这类场景,SELECT * 拉 5 张表,每张都带 WHEREGROUP BY,响应时间从 200ms 跳到 2s,这时候反规范化不是“偷懒”,是权衡。

  • 真实瓶颈在磁盘 I/O 或连接数耗尽,而非 CPU,说明查询计划已经反复扫表
  • 数据变更频率低(比如用户基础信息每天同步一次),但读取频次极高(每秒数百次)
  • 应用层做缓存成本高、一致性难维护,不如在 DB 层预计算好字段
  • JSON 字段或冗余列能避免跨库关联(比如订单表里存 user_name 而非只存 user_id

别一上来就加冗余字段。先用 EXPLAIN ANALYZE 确认是不是 Nested Loop 在拖慢速度;如果执行计划里出现多次 Seq ScanBitmap Heap Scan 扫全表,再考虑反规范化。

冗余字段怎么同步才不丢数据?

最常见错误是靠应用层“写两次”:先插订单,再手动更新用户积分表。网络抖动、事务中断、代码分支遗漏,都会导致两边不一致。

  • 用数据库原生机制:PostgreSQL 的 TRIGGER + FUNCTION,MySQL 的 BEFORE INSERT/UPDATE 触发器,确保同一事务内完成
  • 避免在触发器里调远程 API 或写日志文件——这些操作失败会导致主 SQL 失败
  • 如果涉及多表聚合(比如把用户所有订单金额 sum 存进 user.total_spent),触发器里必须检查 OLDNEW 值,只对变化字段做 delta 更新,而不是每次都重算全量
  • 对于无法用触发器覆盖的场景(如异构数据源同步),用 CDC 工具(如 Debezium)捕获 binlog,再由下游服务做幂等更新,比定时任务更可靠

注意:TRIGGER 在大批量 INSERT ... SELECTCOPY 时可能显著拖慢导入速度,测试时务必用真实数据量压测。

百度AI搜
百度AI搜

百度全新AI搜索引擎

下载

JSON 字段是反规范化的捷径还是陷阱?

把地址、标签、配置项塞进 JSONB(PostgreSQL)或 JSON(MySQL 8.0+)看起来省事,但很快会遇到问题。

  • 查询性能:想查“所有收货城市为北京的订单”,WHERE address->>'city' = '北京' 无法走普通 B-tree 索引,得建表达式索引:CREATE INDEX ON orders ((address->>'city'))
  • 数据校验缺失:JSON 字段不阻止你存 {"city": 123} 这种类型错乱的数据,应用层必须自己校验结构
  • 更新粒度粗:改一个字段就得重写整个 JSON,可能引发 MVCC 膨胀(尤其 PostgreSQL 中大 JSONB 字段频繁更新)
  • 不支持外键约束,没法保证 user_id 在 JSON 里引用的是真实存在的用户

适合放 JSON 的,仅限那些“只读、结构松散、不参与 WHERE/GROUP/JOIN”的数据,比如埋点日志、前端表单快照、第三方回调原始 payload。

正规化回滚时,哪些字段最容易被漏掉?

项目后期发现反规范化太重,想退回到第三范式,常卡在“不知道哪些字段其实是冗余的”。

  • 查数据库注释:COMMENT ON COLUMN 如果写过 "冗余自 users.name" 就很省事;没写的话,翻 Git 历史看建表语句的 commit message
  • 检查唯一性约束:如果 order.user_nameusers.name 总是一致,且没有单独修改 order.user_name 的业务逻辑,基本可判定为冗余
  • 审计 UPDATE 日志:用 pg_stat_statements 或慢日志分析,看哪些字段几乎从不被单独更新(比如 product.category_name 自上线后只随 category_id 变更而批量更新)
  • 最危险的是“表面冗余、实际承担业务逻辑”的字段,比如 user.cached_role 看似来自 role 表,但权限系统实际读它而非 join,删了就炸

真正难的不是技术还原,是厘清字段背后的语义契约——有些字段早就不只是“缓存”,而是成了新协议的一部分。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

1006

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

335

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

379

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

1782

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

376

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

1332

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

585

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

436

2024.04.29

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

916

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号