0

0

SQL 索引在大数据量表中的应用实践

舞夢輝影

舞夢輝影

发布时间:2026-02-20 09:42:10

|

947人浏览过

|

来源于php中文网

原创

未加索引的where条件会导致全表扫描,使查询慢十倍;需用explain确认索引使用情况,复合索引字段顺序影响生效范围,低区分度字段不宜单独建索引,order by需索引支持,大offset分页应改用游标分页。

sql 索引在大数据量表中的应用实践

WHERE 条件字段没加索引,查询直接变慢十倍

大数据量表里,SELECT * FROM orders WHERE user_id = 123 这种查询如果 user_id 没索引,MySQL 或 PostgreSQL 就得全表扫描。几千万行?可能要几秒甚至十几秒——而加了索引通常压到几十毫秒。

实操建议:

  • 先用 EXPLAIN 看执行计划,重点盯 type 字段:要是 ALL,基本就是全扫;refrange 才算走索引
  • 复合索引要注意字段顺序:CREATE INDEX idx_status_user ON orders(status, user_id) 能加速 WHERE status = 'paid' AND user_id = 123,但对 WHERE user_id = 123 单独查几乎无效
  • 别给低区分度字段单独建索引,比如 is_deleted TINYINT(99% 是 0),优化器大概率直接弃用

ORDER BY + LIMIT 在无索引时会触发 filesort

SELECT * FROM logs ORDER BY created_at DESC LIMIT 20 看似简单,但如果 created_at 没索引,数据库就得把几百万行全读出来、内存排序、再取前 20——内存爆掉或磁盘临时文件都会拖垮性能。

实操建议:

  • ORDER BY 的分页查询,必须确保排序字段在索引最左侧,且和查询条件能复用同一个索引
  • 避免 OFFSET 大值分页:OFFSET 100000 会让数据库先跳过 10 万行,即使有索引也慢;改用游标分页(如 WHERE created_at )
  • PostgreSQL 中 ORDER BY ... NULLS LAST 会影响索引使用,建索引时得显式写成 CREATE INDEX ON logs(created_at DESC NULLS LAST)

索引太多反而拖慢写入,尤其高并发 INSERT/UPDATE 场景

每多一个索引,每次 INSERT 就得多写一份 B+ 树结构;UPDATE 如果改的是索引列,还要同步更新多个索引页。单表上百个索引?写入吞吐可能掉一半以上。

住哪API酒店+租车源码包
住哪API酒店+租车源码包

数据本地化解决接口缓存数据无限增加,读取慢的问题,速度极大提升更注重SEO优化优化了系统的SEO,提升网站在搜索引擎的排名,增加网站爆光率搜索框本地化不用远程读取、IFRAME调用,更加容易应用及修改增加天气预报功能页面增加了天气预报功能,丰富内容增加点评和问答页面增加了点评和问答相关页面,增强网站粘性电子地图优化优化了电子地图的加载速度与地图功能酒店列表增加房型读取酒店列表页可以直接展示房型,增

下载

实操建议:

  • information_schema.STATISTICS 查哪些索引从没被用过(结合 performance_schema.table_io_waits_summary_by_index_usage,MySQL 8.0+)
  • 唯一性不强的字段组合慎建唯一索引,比如 (region, category, status) 可能重复率高,但加了 UNIQUE 会导致插入冲突或锁等待加剧
  • 考虑部分索引(PostgreSQL)或条件索引(MySQL 8.0.13+):只索引活跃数据,例如 CREATE INDEX idx_active_orders ON orders(user_id) WHERE status IN ('pending', 'processing')

TEXT/BLOB 字段不能直接建普通索引,容易报错或失效

ALTER TABLE articles ADD INDEX idx_content(content) 在 MySQL 里会报错 ERROR 1170 (42000): BLOB/TEXT column 'content' used in key specification without a key length;就算强行指定长度(如 content(255)),也可能因截断导致查询不准。

实操建议:

  • 全文检索场景用 FULLTEXT 索引(MySQL)或 tsvector + GIN(PostgreSQL),别硬套 B-tree
  • 想按前缀快速过滤?提取特征字段单独存,比如加一列 content_hash CHAR(16) 存 MD5 前 16 位,再对它建索引
  • JSON 字段别直接索引整个字段,MySQL 支持 GENERATED COLUMN 提取路径值并建索引,例如 ALTER TABLE events ADD COLUMN event_type VARCHAR(32) AS (data->>'$.type'),再建 INDEX idx_event_type ON events(event_type)

索引不是越多越好,也不是建了就一定生效;关键看查询模式是否匹配索引结构,以及写入负载能不能扛住额外开销。最常被忽略的是:上线前没用真实数据量 + 真实流量压测索引效果,结果大促时才发现某个看似合理的索引根本没被优化器选中。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

986

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

334

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

377

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

1760

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

375

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

1312

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

585

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

436

2024.04.29

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

776

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
CSS3 教程
CSS3 教程

共18课时 | 5.8万人学习

PostgreSQL 教程
PostgreSQL 教程

共48课时 | 9.4万人学习

Django 教程
Django 教程

共28课时 | 4.4万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号