0

0

如何使用PHP和PDO将CSV文件导入MySQL数据库

花韻仙語

花韻仙語

发布时间:2025-07-15 20:04:14

|

522人浏览过

|

来源于php中文网

原创

如何使用PHP和PDO将CSV文件导入MySQL数据库

本文详细介绍了如何使用PHP和PDO将CSV文件导入MySQL数据库。教程涵盖了从数据库连接、文件上传处理、CSV数据读取(包括自定义分隔符)、到使用PDO预处理语句进行数据插入的完整流程。特别强调了预处理语句中参数占位符的正确使用,并提供了完整的代码示例及错误处理和最佳实践建议,旨在帮助开发者构建稳定高效的CSV数据导入功能。

1. 引言

在web应用开发中,将外部数据(如csv格式)导入到数据库是一个常见的需求。php结合pdo(php data objects)为与mysql数据库交互提供了强大且安全的方式。本教程将引导您完成一个完整的csv文件导入mysql数据库的流程,并指出常见的错误及如何避免它们。

2. 前置准备

在开始之前,请确保您已具备以下环境和基础知识:

  • Web服务器环境: 如Apache或Nginx,并安装了PHP。
  • MySQL数据库: 确保MySQL服务正在运行。
  • PHP基础: 了解PHP语法、文件操作及表单处理。
  • PDO基础: 了解PDO的基本概念,如连接数据库、预处理语句等。

数据库表结构示例: 为了演示,我们假设有一个名为 users 的数据库表,包含以下字段:

CREATE TABLE `users` (
    `id` INT AUTO_INCREMENT PRIMARY KEY,
    `szam` VARCHAR(255) NOT NULL,
    `forras_szam` VARCHAR(255) NOT NULL
);

CSV文件格式示例: 假设您的CSV文件数据以分号(;)分隔,例如:

BGYR002217;FK-066
BGYR002218;FK-140

3. PHP脚本实现

整个导入过程可以分为几个主要步骤:数据库连接、文件上传处理、读取CSV数据并插入数据库。

3.1 数据库连接

首先,我们需要使用PDO建立与MySQL数据库的连接。为了提高安全性,建议将数据库凭据保存在配置文件中,但这里为了演示方便直接写入代码。

 PDO::ERRMODE_EXCEPTION, // 启用异常模式
            PDO::ATTR_DEFAULT_FETCH_MODE => PDO::FETCH_ASSOC, // 默认关联数组获取结果
            PDO::ATTR_EMULATE_PREPARES => false // 禁用模拟预处理,使用原生预处理
        ]
    );
} catch (Exception $ex) {
    // 捕获数据库连接异常
    exit("数据库连接失败: " . $ex->getMessage());
}
?>

注意事项:

立即学习PHP免费学习笔记(深入)”;

  • PDO::ATTR_ERRMODE => PDO::ERRMODE_EXCEPTION:这是非常重要的设置,它会使PDO在遇到错误时抛出异常,方便我们进行错误捕获和处理。
  • PDO::ATTR_EMULATE_PREPARES => false:禁用模拟预处理,确保使用数据库服务器的原生预处理功能,提高安全性和性能。
  • utf8mb4:推荐使用 utf8mb4 字符集,以支持更广泛的Unicode字符,包括表情符号等。

3.2 处理文件上传

CSV文件通常通过HTML表单上传到服务器。PHP通过 $_FILES 全局变量来处理上传的文件。

首先,您需要一个HTML表单来上传CSV文件:

ECTouch移动商城系统
ECTouch移动商城系统

ECTouch是上海商创网络科技有限公司推出的一套基于 PHP 和 MySQL 数据库构建的开源且易于使用的移动商城网店系统!应用于各种服务器平台的高效、快速和易于管理的网店解决方案,采用稳定的MVC框架开发,完美对接ecshop系统与模板堂众多模板,为中小企业提供最佳的移动电商解决方案。ECTouch程序源代码完全无加密。安装时只需将已集成的文件夹放进指定位置,通过浏览器访问一键安装,无需对已有

下载



    
    CSV文件导入


    

在 import.php 中,我们需要检查文件是否成功上传:

// ... (数据库连接代码) ...

if (!isset($_FILES["upcsv"]) || $_FILES["upcsv"]["error"] !== UPLOAD_ERR_OK) {
    exit("文件上传失败或未选择文件.");
}

$csvFilePath = $_FILES["upcsv"]["tmp_name"];
$fh = fopen($csvFilePath, "r");

if ($fh === false) {
    exit("无法打开上传的CSV文件.");
}

3.3 读取CSV数据并插入数据库

这是核心部分,我们将逐行读取CSV文件,并使用PDO预处理语句将数据插入到数据库中。

关键点:CSV分隔符fgetcsv() 函数默认使用逗号(,)作为分隔符。如果您的CSV文件使用其他分隔符(如本例中的分号 ;),您必须将其作为第二个参数(或第三个参数,如果指定了长度)传递给 fgetcsv()。

关键点:PDO预处理语句占位符 在PDO预处理语句中,参数占位符是问号 ? 或命名占位符 :name。原始代码中使用了 VALUES (?;?),这是不正确的语法。正确的占位符应该是 VALUES (?,?)。

// ... (数据库连接和文件处理代码) ...

$rowCount = 0;
$errorCount = 0;

// 开始事务,确保数据一致性,如果导入过程中出现错误,可以回滚
$pdo->beginTransaction();

try {
    // 准备SQL插入语句
    // 注意:VALUES (?,?) 是正确的占位符语法
    $stmt = $pdo->prepare("INSERT INTO users (szam, forras_szam) VALUES (?,?)");

    // 循环读取CSV文件中的每一行
    // fgetcsv的第三个参数是分隔符,这里指定为分号 ';'
    while (($row = fgetcsv($fh, 0, ';')) !== false) {
        // 检查行数据是否符合预期,避免 Undefined array key 错误
        if (count($row) < 2) {
            echo "警告: 跳过无效行 (数据不足): " . implode(';', $row) . "
"; $errorCount++; continue; } try { // 执行预处理语句,绑定CSV行中的数据 $stmt->execute([$row[0], $row[1]]); $rowCount++; } catch (Exception $ex) { // 捕获每行插入时的数据库错误 echo "插入数据失败 (行: " . implode(';', $row) . "): " . $ex->getMessage() . "
"; $errorCount++; // 可以选择在这里中断导入或继续 } } // 提交事务 $pdo->commit(); echo "数据导入完成。
"; echo "成功导入 " . $rowCount . " 行。
"; if ($errorCount > 0) { echo "有 " . $errorCount . " 行导入失败或被跳过。
"; } } catch (Exception $ex) { // 捕获整个导入过程中的异常,并回滚事务 $pdo->rollBack(); echo "导入过程中发生致命错误: " . $ex->getMessage() . "
"; echo "所有更改已回滚。
"; } finally { // 确保文件句柄被关闭 fclose($fh); } echo "DONE."; ?>

4. 完整代码示例

将上述所有部分组合起来,形成一个完整的 import.php 文件:

 PDO::ERRMODE_EXCEPTION,
            PDO::ATTR_DEFAULT_FETCH_MODE => PDO::FETCH_ASSOC,
            PDO::ATTR_EMULATE_PREPARES => false
        ]
    );
} catch (Exception $ex) {
    exit("数据库连接失败: " . $ex->getMessage());
}

// 2. 处理文件上传
if (!isset($_FILES["upcsv"]) || $_FILES["upcsv"]["error"] !== UPLOAD_ERR_OK) {
    exit("文件上传失败或未选择文件.");
}

$csvFilePath = $_FILES["upcsv"]["tmp_name"];
$fh = fopen($csvFilePath, "r");

if ($fh === false) {
    exit("无法打开上传的CSV文件.");
}

// 3. 读取CSV数据并插入数据库
$rowCount = 0;
$errorCount = 0;

// 开始事务
$pdo->beginTransaction();

try {
    // 准备SQL插入语句,使用正确的占位符 '?'
    $stmt = $pdo->prepare("INSERT INTO users (szam, forras_szam) VALUES (?,?)");

    // 循环读取CSV文件中的每一行
    // fgetcsv的第三个参数是分隔符,这里指定为分号 ';'
    while (($row = fgetcsv($fh, 0, ';')) !== false) {
        // 简单的数据完整性检查
        if (count($row) < 2) {
            echo "警告: 跳过无效行 (数据不足): " . htmlspecialchars(implode(';', $row)) . "
"; $errorCount++; continue; } try { // 执行预处理语句 $stmt->execute([$row[0], $row[1]]); $rowCount++; } catch (Exception $ex) { // 捕获每行插入时的数据库错误 echo "插入数据失败 (行: " . htmlspecialchars(implode(';', $row)) . "): " . $ex->getMessage() . "
"; $errorCount++; } } // 提交事务 $pdo->commit(); echo "数据导入完成。
"; echo "成功导入 " . $rowCount . " 行。
"; if ($errorCount > 0) { echo "有 " . $errorCount . " 行导入失败或被跳过。
"; } } catch (Exception $ex) { // 捕获整个导入过程中的异常,并回滚事务 $pdo->rollBack(); echo "导入过程中发生致命错误: " . $ex->getMessage() . "
"; echo "所有更改已回滚。
"; } finally { // 确保文件句柄被关闭 if ($fh) { fclose($fh); } } echo "DONE."; ?>

5. 注意事项与最佳实践

  • 错误处理: 使用 try-catch 块捕获所有可能的异常,包括数据库连接、文件操作和SQL执行错误。
  • 事务: 对于批量数据导入,强烈建议使用事务(beginTransaction(), commit(), rollBack())。这样可以确保数据的一致性,如果导入过程中发生任何错误,可以回滚所有已执行的操作,避免部分数据导入成功而导致的数据不完整。
  • CSV分隔符: 务必根据您的CSV文件实际使用的分隔符,正确设置 fgetcsv() 的第三个参数。
  • 数据验证: 在 $stmt->execute() 之前,对从CSV读取的数据进行严格的验证(如数据类型、长度、格式等),以防止无效数据插入数据库或SQL注入风险。
  • 安全性:
    • 永远不要直接将用户输入拼接到SQL查询中。使用PDO预处理语句是防止SQL注入的最佳实践。
    • 限制上传文件的大小和类型,防止恶意文件上传。
    • 上传的文件应存储在Web服务器不可直接访问的目录中,处理完成后及时删除。
  • 性能优化:
    • 对于非常大的CSV文件,可以考虑分批次导入(例如,每1000行提交一次事务),以减少内存消耗和提高效率。
    • 如果数据量巨大,LOAD DATA INFILE 是MySQL原生提供的一种更高效的导入方式,但它需要文件在数据库服务器上可访问。
  • 用户反馈: 在导入完成后,向用户提供清晰的反馈,说明导入结果、成功行数、失败行数及原因。

6. 总结

通过本文的详细教程,您应该已经掌握了如何使用PHP和PDO安全高效地将CSV文件导入MySQL数据库。核心要点在于正确使用PDO预处理语句的占位符 ?,以及根据CSV文件的实际分隔符配置 fgetcsv() 函数。遵循上述最佳实践,可以帮助您构建一个健壮、安全且高效的数据导入功能。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

728

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

328

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

350

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

1263

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

360

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

841

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

581

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

423

2024.04.29

java入门学习合集
java入门学习合集

本专题整合了java入门学习指南、初学者项目实战、入门到精通等等内容,阅读专题下面的文章了解更多详细学习方法。

1

2026.01.29

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 2万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 812人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号