PHP MySQL 批量插入 BATCH 和准备好的语句

TVA*_*ren 1 php mysql bulkinsert prepared-statement

我有一个插入大量数据的脚本。此数据主要是前一个插入的复制,但至少有一个值不同。因此,我准备语句并绑定参数以执行和重复。

但是,我尝试将其写入准备好的批量插入,一次插入 1000 行。不幸的是,我无法让它工作。我现在使用的代码只是一次插入整个数据。但是,这不是我们想要的,因为数据量可能比测试的数据量大得多。

我现在使用的代码(一次批量插入):

$Data = array(
    array("1", "2", "3", "4"),
    array("1", "2", "3", "5"),
    array("1", "2", "3", "6"),
    array("1", "2", "3", "7"),
    array("1", "2", "3", "8"),
    //ETC
    );
//AS YOU CAN SEE, ONLY COL4 CHANGES
$sql = $mysqli->prepare("INSERT INTO `Table` (Col1, Col2, Col3, Col4) VALUES ".implode(', ', array_fill(0, count($Data), "(?, ?, ?, ?)")));
foreach ($Data as $InsertData) {
    $sql->bind_param('iiii', $InsertData[0], $InsertData[1], $InsertData[2], $InsertData[3]);
    }
$sql->execute();
Run Code Online (Sandbox Code Playgroud)

我想要实现的是,数据将使用上述准备好的语句插入,但每批次限制为 1000(或任何其他数字)。我不能让它工作。我尝试使用array_splice和其他方法,但我无法让它工作。

Bil*_*win 5

您应该考虑使用 LOAD DATA INFILE。

即使您必须先写出临时文件,它也可能比对成批的行使用 INSERT 快得多。

$Data = array(
    array("1", "2", "3", "4"),
    array("1", "2", "3", "5"),
    array("1", "2", "3", "6"),
    array("1", "2", "3", "7"),
    array("1", "2", "3", "8"),
    //ETC
    );

$tempname = tempnam("/tmp", "data");
$fp = fopen($tempname, "w");
foreach ($Data as $fields) {
    fputcsv($fp, $fields);
}
fclose($fp);
if ($mysqli->query("
  LOAD DATA INFILE '$tempname' INTO TABLE `Table`
  FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '\"'
  ") === false) {
    error_log($mysqli->error);
}
unlink($tempname);
Run Code Online (Sandbox Code Playgroud)

阅读https://dev.mysql.com/doc/refman/5.7/en/load-data.html以确保您了解该LOCAL选项local_infile以及secure_file_priv配置选项。