在 php 开发中，处理大量数据导入时，逐条执行 insert 语句会导致严重的性能瓶颈。主要问题在于每次执行都涉及网络往返、sql 解析和事务开销。优化核心思路是将多次操作合并为单次或少数几次数据库交互。
传统逐条插入的性能陷阱
常见的错误做法是在 foreach 循环中直接调用 PDO 或 MySQLi 的 execute 方法。这种模式每处理一条记录就会触发一次完整的数据库通信周期。当数据量达到万级甚至十万级时，累积的网络延迟和上下文切换时间会让脚本运行时间呈线性增长，甚至导致超时。
解决这一问题的标准方案是使用事务（Transaction）配合多值插入（Multi-Row Insert）。通过 BEGIN 开启事务，将多条数据的 VALUES 拼接成一个长 SQL 语句，例如 INSERT INTO table (col1, col2) VALUES (...), (...), (...)，最后统一 COMMIT。这种方式将 N 次网络请求压缩为 1 次，极大提升了吞吐量。需要注意的是，单次 SQL 语句长度受限于 max_allowed_packet 配置，因此需要分批次处理，避免生成过大的字符串导致内存溢出或数据库拒绝执行。
立即学习“PHP免费学习笔记（深入）”；
基于 PDO 的分批插入实现
以下代码展示了如何使用 PDO 实现高效的分批插入。程序定义了模拟数据源，按指定批次大小分割数组，构建包含多个元组的 INSERT 语句，并在事务中执行。运行此脚本前请确保数据库连接信息正确，并创建对应的测试表。
$pdo = new PDO('mysql:host=localhost;dbname=test', 'user', 'pass');
$pdo->setAttribute(PDO::ATTR_ERRMODE, PDO::ERRMODE_EXCEPTION);
$data = range(1, 1000); // 模拟1000条数据
$batchSize = 100;
$sql = "INSERT INTO users (name, email) VALUES (?, ?)";
$stmt = $pdo->prepare($sql);
try {
$pdo->beginTransaction();
for ($i = 0; $i < count($data); $i += $batchSize) {
$batch = array_slice($data, $i, $batchSize);
$values = [];
$params = [];
foreach ($batch as $row) {
$values[] = '(?, ?)';
$params[] = 'User_' . $row;
$params[] = 'user' . $row . '@example.com';
}
$insertSql = "INSERT INTO users (name, email) VALUES " . implode(',', $values);
$stmt = $pdo->prepare($insertSql);
$stmt->execute($params);
}
$pdo->commit();
echo "Success: " . count($data) . " records inserted.";
} catch (Exception $e) {
$pdo->rollBack();
echo "Failed: " . $e->getMessage();
}
该程序通过 prepare 预编译语句提升解析效率，利用 array_slice 控制批次大小防止内存爆炸。执行后，控制台将输出成功插入的记录总数。若中途发生错误，事务会自动回滚，保证数据一致性。
极端大数据量的 LOAD DATA INFILE 策略
当数据量达到百万级别且对极致性能有要求时，PHP 层面的循环拼接仍可能成为瓶颈。此时应绕过 PHP 应用层，直接使用 MySQL 的 LOAD DATA INFILE 命令。该方法将数据写入临时 CSV 文件，由数据库服务端直接读取并入库，速度比 INSERT 快数十倍。实现时需先在 PHP 中生成符合格式的文本文件，调用 exec 或 shell_exec 执行 mysql 客户端命令加载文件，完成后删除临时文件。此方式适用于离线数据迁移或后台定时任务，不适合高频实时接口。
