0

0

Laravel如何利用Seed生成数万级测试数据?(批量性能)

裘德小鎮的故事

裘德小鎮的故事

发布时间:2026-03-12 10:46:03

|

856人浏览过

|

来源于php中文网

原创

使用 db::table()->insert() 批量插入可提速 5–10 倍,需控制每批 ≤1000 行、关闭事件与外键检查、禁用事务日志、预生成 faker 数据、避免 factory()->create() 隐式开销。

laravel如何利用seed生成数万级测试数据?(批量性能)

DB::table()->insert() 替代模型 save()create()

模型逐条写入在生成数万条数据时会明显变慢,因为每条记录都触发了 Eloquent 的事件、类型转换、验证(即使没显式写)、属性赋值等开销。直接走查询构造器批量插入,能跳过这些,速度通常快 5–10 倍。

实操建议:

  • 在 Seeder 中用 DB::table('users')->insert($rows),其中 $rows 是二维数组,每项是字段名 => 值的关联数组
  • 单次 insert() 最好控制在 1000 行以内(MySQL 默认 max_allowed_packet 可能限制大批次)
  • 避免在循环里反复调用 insert(),应攒够一批再插,比如每 500 条 flush 一次
  • 记得提前关闭模型事件:在 Seeder 开头加 Model::unsetEventDispatcher(),否则即使不用模型,某些全局监听仍可能被触发

禁用外键检查和事务自动提交

默认 Laravel Seeder 在事务中运行,对数万条数据来说,事务日志膨胀、锁持有时间长、内存占用高,容易超时或 OOM。同时外键约束也会拖慢插入速度。

实操建议:

  • 在 Seeder 开头执行 DB::statement('SET FOREIGN_KEY_CHECKS = 0'),结尾再设回 1
  • 显式关闭事务:在 run() 方法开头加 DB::disableQueryLog()(防内存爆)和 DB::beginTransaction() 不要加;如果真要用事务,务必分段 commit(),而不是包整个 Seeder
  • MySQL 下可临时调大 innodb_log_file_sizebulk_insert_buffer_size,但生产环境慎改,仅限本地/CI 环境

Faker 配合数组预生成,别在循环里实时调用

Faker 实例每次生成字符串、日期等都有一定开销,嵌套在万级循环里会累积成可观延迟,尤其用了 unique() 或复杂 provider 时更明显。

紫东太初
紫东太初

中科院和武汉AI研究院推出的新一代大模型

下载

实操建议:

  • 先用 $faker->name() 等生成一个含 1000 个名字的数组,再按需 slice 分配,而不是每次循环都调一次
  • 避免在 insert() 数据前用 $faker->unique()->numberBetween()——它内部维护哈希表,大数据量下内存和查找成本陡增;改用数据库层去重(如先插再 DELETE 重复)或应用层布隆过滤
  • 对固定枚举字段(如 status),直接用 ['active', 'inactive'][array_rand(['active', 'inactive'])],比 $faker->randomElement() 轻量得多

小心 factory()->count()->create() 的隐式开销

Laravel 8+ 的工厂默认走 Eloquent create(),哪怕你只想要原始数据,它仍会实例化模型、调用 make()、处理 for() 关系、触发 creating 事件——这对批量场景完全是冗余负担。

实操建议:

  • 不要用 UserFactory::new()->count(10000)->create(),改用 UserFactory::new()->count(10000)->make()->toArray() 得到纯数组,再喂给 DB::table()->insert()
  • 如果工厂里定义了 for() 关系,make() 仍会 eager 加载关联模型,导致 N+1;此时应拆解:先批量生成主表数据,再单独批量生成从表,并用外键数组对齐
  • 工厂的 definition() 中避免调用 DB 查询(如 User::inRandomOrder()->first()),这类操作在万次循环里会直接拖垮 Seeder

真正卡住的往往不是“怎么生成”,而是“谁在悄悄拦路”——比如某个被遗忘的 Observer、一条没关的 Query Log、或是 MySQL 的 autocommit=1 在大批量时反复刷盘。跑之前先 php artisan tinker 里试 100 条,看 DB::enableQueryLog() 输出里有没有意外语句,比硬扛超时更省时间。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
laravel组件介绍
laravel组件介绍

laravel 提供了丰富的组件,包括身份验证、模板引擎、缓存、命令行工具、数据库交互、对象关系映射器、事件处理、文件操作、电子邮件发送、队列管理和数据验证。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

340

2024.04.09

laravel中间件介绍
laravel中间件介绍

laravel 中间件分为五种类型:全局、路由、组、终止和自定。想了解更多laravel中间件的相关内容,可以阅读本专题下面的文章。

293

2024.04.09

laravel使用的设计模式有哪些
laravel使用的设计模式有哪些

laravel使用的设计模式有:1、单例模式;2、工厂方法模式;3、建造者模式;4、适配器模式;5、装饰器模式;6、策略模式;7、观察者模式。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

772

2024.04.09

thinkphp和laravel哪个简单
thinkphp和laravel哪个简单

对于初学者来说,laravel 的入门门槛较低,更易上手,原因包括:1. 更简单的安装和配置;2. 丰富的文档和社区支持;3. 简洁易懂的语法和 api;4. 平缓的学习曲线。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

385

2024.04.10

laravel入门教程
laravel入门教程

本专题整合了laravel入门教程,想了解更多详细内容,请阅读专题下面的文章。

141

2025.08.05

laravel实战教程
laravel实战教程

本专题整合了laravel实战教程,阅读专题下面的文章了解更多详细内容。

85

2025.08.05

laravel面试题
laravel面试题

本专题整合了laravel面试题相关内容,阅读专题下面的文章了解更多详细内容。

80

2025.08.05

PHP高性能API设计与Laravel服务架构实践
PHP高性能API设计与Laravel服务架构实践

本专题围绕 PHP 在现代 Web 后端开发中的高性能实践展开,重点讲解基于 Laravel 框架构建可扩展 API 服务的核心方法。内容涵盖路由与中间件机制、服务容器与依赖注入、接口版本管理、缓存策略设计以及队列异步处理方案。同时结合高并发场景,深入分析性能瓶颈定位与优化思路,帮助开发者构建稳定、高效、易维护的 PHP 后端服务体系。

458

2026.03.04

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Laravel---API接口
Laravel---API接口

共7课时 | 0.6万人学习

PHP自制框架
PHP自制框架

共8课时 | 0.6万人学习

PHP面向对象基础课程(更新中)
PHP面向对象基础课程(更新中)

共12课时 | 0.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号