mysqlпартияinsertданныеметод:1、Вставка петли 2;、Уменьшите ресурсы соединения и соедините SQL 3;、Использовать хранимые процедуры 4;、Используйте [MYSQL LOCAL_INFILE].
Операционная среда этого руководства: система Windows 7, MySQL версии 8.0.22. Этот метод подходит для компьютеров всех марок.
Метод пакетной вставки данных Mysql:
Способ 1: Вставка петли
Это также самый распространенный метод. Если объем данных не очень большой, его можно использовать, но он каждый раз будет потреблять ресурсы подключения к базе данных.
Общая мысль такова
(Здесь я пишу псевдокод,Конкретное написание можно комбинировать с вашей собственной бизнес-логикой или синтаксисом платформы.)for($i=1;$i<=100;$i++){
$sql = ‘insert……………’;
//querysql
}
foreach($arr as $key => $value){
$sql = ‘insert……………’;
//querysql
}
while($i <= 100){
$sql = ‘insert……………’;
//querysql
$i++
}
Поскольку это слишком распространено и не слишком сложно, и это не то, о чем я в основном пишу сегодня, я не буду здесь много говорить.
Способ 2. Уменьшите ресурсы соединения и объедините SQL.
Псевдокод выглядит следующим образом // Здесь предполагается, что ключ arr синхронизирован с полем базы данных. Фактически, большинство фреймворков спроектированы таким образом, когда PHP управляет базой данных.
$arr_keys = array_keys($arr);
$sql = ‘INSERT INTO tablename (‘ . implode(‘,’ ,$arr_keys) . ‘) values’;
$arr_values = array_values($arr);
$sql .= ” (‘” . implode(“‘,'” ,$arr_values) . “‘),”;
$sql = substr($sql ,0 ,-1);
//После сращивания, вероятно, это значения INSERT INTO tablename («имя пользователя», «пароль»)
(‘xxx’,’xxx’),(‘xxx’,’xxx’),(‘xxx’,’xxx’),(‘xxx’,’xxx’),(‘xxx’,’xxx’),(‘xxx’,’xxx’)
…….
//querysql
Написать 10 000 обычных вставок таким образом не составляет большой проблемы. Если данные не очень длинные, этого достаточно для обработки обычных пакетных вставок, таких как пакетная генерация номеров карт, пакетная генерация случайных кодов и т. д.
Способ 3. Использование хранимых процедур
Я просто использую это в своих руках и оплачиваю SQL. Вы можете комбинировать конкретную бизнес-логику самостоятельно. разделитель $$$
create procedure zqtest()
begin
declare i int default 0;
set i=0;
start transaction;
while i<80000 do
//your insert sql
set i=i+1;
end while;
commit;
end
$$$
delimiter;
call zqtest();
Это всего лишь тестовый код, конкретные параметры вы можете определить самостоятельно.
Я вставляю 80 000 элементов за раз. Хотя это немного, объем данных в каждом элементе большой, со множеством varchar4000 и текстовых полей.
Это заняло 6,524 с.
Способ 4: используйте MYSQL LOCAL_INFILE
В настоящее время я использую это, поэтому, кстати, я также скопирую код pdo для вашей справки //Установите pdo, чтобы включить MYSQL_ATTR_LOCAL_INFILE
/*hs96.cn@gmail.com
public function pdo_local_info ()
{
global $system_dbserver;
$dbname = ‘hs96.cn@gmail.com’;
$ip = ‘hs96.cn@gmail.com’;
$user = ‘hs96.cn@gmail.com’;
$pwd = ‘hs96.cn@gmail.com’;
$dsn = ‘mysql:dbname=’ . $dbname . ‘;host=’ . $ip . ‘;port=3306’;
$options = [PDO::MYSQL_ATTR_LOCAL_INFILE => true];
$db = new PDO($dsn ,$user ,$pwd ,$options);
return $db;
}
//Псевдокод выглядит следующим образом
public function test(){
$arr_keys = array_keys($arr);
$root_dir = $_SERVER[“DOCUMENT_ROOT”] . ‘/’;
$my_file = $root_dir . “hs96.cn@gmail.com/sql_cache/” . $order[‘OrderNo’] . ‘.sql’;
$fhandler = fopen($my_file,’a+’);
if ($fhandler) {
$sql = implode(“\t” ,$arr);
$i = 1;
while ($i <= 80000)
{
$i++;
fwrite($fhandler ,$sql . “\r\n”);
}
$sql = “LOAD DATA local INFILE ‘” . $myFile . “‘ INTO TABLE “;
$sql .= “tablename (” . implode(‘,’ ,$arr_keys) . “)”;
$pdo = $this->pdo_local_info ();
$res = $pdo->exec($sql);
if (!$res) {
//Вставка TODO не удалась
}
@unlink($my_file);
}
}