Как добавлять данные пакетами в mysql_Как вставлять данные пакетами в mysql
Как добавлять данные пакетами в mysql_Как вставлять данные пакетами в mysql

mysqlпартияinsertданныеметод:1、Вставка петли 2;、Уменьшите ресурсы соединения и соедините SQL 3;、Использовать хранимые процедуры 4;、Используйте [MYSQL LOCAL_INFILE].

Операционная среда этого руководства: система Windows 7, MySQL версии 8.0.22. Этот метод подходит для компьютеров всех марок.

Метод пакетной вставки данных Mysql:

Способ 1: Вставка петли

Это также самый распространенный метод. Если объем данных не очень большой, его можно использовать, но он каждый раз будет потреблять ресурсы подключения к базе данных.

Общая мысль такова

(Здесь я пишу псевдокод,Конкретное написание можно комбинировать с вашей собственной бизнес-логикой или синтаксисом платформы.)for($i=1;$i<=100;$i++){

$sql = ‘insert……………’;

//querysql

}

foreach($arr as $key => $value){

$sql = ‘insert……………’;

//querysql

}

while($i <= 100){

$sql = ‘insert……………’;

//querysql

$i++

}

Поскольку это слишком распространено и не слишком сложно, и это не то, о чем я в основном пишу сегодня, я не буду здесь много говорить.

Способ 2. Уменьшите ресурсы соединения и объедините SQL.

Псевдокод выглядит следующим образом // Здесь предполагается, что ключ arr синхронизирован с полем базы данных. Фактически, большинство фреймворков спроектированы таким образом, когда PHP управляет базой данных.

$arr_keys = array_keys($arr);

$sql = ‘INSERT INTO tablename (‘ . implode(‘,’ ,$arr_keys) . ‘) values’;

$arr_values = array_values($arr);

$sql .= ” (‘” . implode(“‘,'” ,$arr_values) . “‘),”;

$sql = substr($sql ,0 ,-1);

//После сращивания, вероятно, это значения INSERT INTO tablename («имя пользователя», «пароль»)

(‘xxx’,’xxx’),(‘xxx’,’xxx’),(‘xxx’,’xxx’),(‘xxx’,’xxx’),(‘xxx’,’xxx’),(‘xxx’,’xxx’)

…….

//querysql

Написать 10 000 обычных вставок таким образом не составляет большой проблемы. Если данные не очень длинные, этого достаточно для обработки обычных пакетных вставок, таких как пакетная генерация номеров карт, пакетная генерация случайных кодов и т. д.

Способ 3. Использование хранимых процедур

Я просто использую это в своих руках и оплачиваю SQL. Вы можете комбинировать конкретную бизнес-логику самостоятельно. разделитель $$$

create procedure zqtest()

begin

declare i int default 0;

set i=0;

start transaction;

while i<80000 do

//your insert sql

set i=i+1;

end while;

commit;

end

$$$

delimiter;

call zqtest();

Это всего лишь тестовый код, конкретные параметры вы можете определить самостоятельно.

Я вставляю 80 000 элементов за раз. Хотя это немного, объем данных в каждом элементе большой, со множеством varchar4000 и текстовых полей.

Это заняло 6,524 с.

Способ 4: используйте MYSQL LOCAL_INFILE

В настоящее время я использую это, поэтому, кстати, я также скопирую код pdo для вашей справки //Установите pdo, чтобы включить MYSQL_ATTR_LOCAL_INFILE

/*hs96.cn@gmail.com

public function pdo_local_info ()

{

global $system_dbserver;

$dbname = ‘hs96.cn@gmail.com’;

$ip = ‘hs96.cn@gmail.com’;

$user = ‘hs96.cn@gmail.com’;

$pwd = ‘hs96.cn@gmail.com’;

$dsn = ‘mysql:dbname=’ . $dbname . ‘;host=’ . $ip . ‘;port=3306’;

$options = [PDO::MYSQL_ATTR_LOCAL_INFILE => true];

$db = new PDO($dsn ,$user ,$pwd ,$options);

return $db;

}

//Псевдокод выглядит следующим образом

public function test(){

$arr_keys = array_keys($arr);

$root_dir = $_SERVER[“DOCUMENT_ROOT”] . ‘/’;

$my_file = $root_dir . “hs96.cn@gmail.com/sql_cache/” . $order[‘OrderNo’] . ‘.sql’;

$fhandler = fopen($my_file,’a+’);

if ($fhandler) {

$sql = implode(“\t” ,$arr);

$i = 1;

while ($i <= 80000)

{

$i++;

fwrite($fhandler ,$sql . “\r\n”);

}

$sql = “LOAD DATA local INFILE ‘” . $myFile . “‘ INTO TABLE “;

$sql .= “tablename (” . implode(‘,’ ,$arr_keys) . “)”;

$pdo = $this->pdo_local_info ();

$res = $pdo->exec($sql);

if (!$res) {

//Вставка TODO не удалась

}

@unlink($my_file);

}

}

boy illustration
Неразрушающее увеличение изображений одним щелчком мыши, чтобы сделать их более четкими артефактами искусственного интеллекта, включая руководства по установке и использованию.
boy illustration
Копикодер: этот инструмент отлично работает с Cursor, Bolt и V0! Предоставьте более качественные подсказки для разработки интерфейса (создание навигационного веб-сайта с использованием искусственного интеллекта).
boy illustration
Новый бесплатный RooCline превосходит Cline v3.1? ! Быстрее, умнее и лучше вилка Cline! (Независимое программирование AI, порог 0)
boy illustration
Разработав более 10 проектов с помощью Cursor, я собрал 10 примеров и 60 подсказок.
boy illustration
Я потратил 72 часа на изучение курсорных агентов, и вот неоспоримые факты, которыми я должен поделиться!
boy illustration
Идеальная интеграция Cursor и DeepSeek API
boy illustration
DeepSeek V3 снижает затраты на обучение больших моделей
boy illustration
Артефакт, увеличивающий количество очков: на основе улучшения характеристик препятствия малым целям Yolov8 (SEAM, MultiSEAM).
boy illustration
DeepSeek V3 раскручивался уже три дня. Сегодня я попробовал самопровозглашенную модель «ChatGPT».
boy illustration
Open Devin — инженер-программист искусственного интеллекта с открытым исходным кодом, который меньше программирует и больше создает.
boy illustration
Эксклюзивное оригинальное улучшение YOLOv8: собственная разработка SPPF | SPPF сочетается с воспринимаемой большой сверткой ядра UniRepLK, а свертка с большим ядром + без расширения улучшает восприимчивое поле
boy illustration
Популярное и подробное объяснение DeepSeek-V3: от его появления до преимуществ и сравнения с GPT-4o.
boy illustration
9 основных словесных инструкций по доработке академических работ с помощью ChatGPT, эффективных и практичных, которые стоит собрать
boy illustration
Вызовите deepseek в vscode для реализации программирования с помощью искусственного интеллекта.
boy illustration
Познакомьтесь с принципами сверточных нейронных сетей (CNN) в одной статье (суперподробно)
boy illustration
50,3 тыс. звезд! Immich: автономное решение для резервного копирования фотографий и видео, которое экономит деньги и избавляет от беспокойства.
boy illustration
Cloud Native|Практика: установка Dashbaord для K8s, графика неплохая
boy illustration
Краткий обзор статьи — использование синтетических данных при обучении больших моделей и оптимизации производительности
boy illustration
MiniPerplx: новая поисковая система искусственного интеллекта с открытым исходным кодом, спонсируемая xAI и Vercel.
boy illustration
Конструкция сервиса Synology Drive сочетает проникновение в интрасеть и синхронизацию папок заметок Obsidian в облаке.
boy illustration
Центр конфигурации————Накос
boy illustration
Начинаем с нуля при разработке в облаке Copilot: начать разработку с минимальным использованием кода стало проще
boy illustration
[Серия Docker] Docker создает мультиплатформенные образы: практика архитектуры Arm64
boy illustration
Обновление новых возможностей coze | Я использовал coze для создания апплета помощника по исправлению домашних заданий по математике
boy illustration
Советы по развертыванию Nginx: практическое создание статических веб-сайтов на облачных серверах
boy illustration
Feiniu fnos использует Docker для развертывания личного блокнота Notepad
boy illustration
Сверточная нейронная сеть VGG реализует классификацию изображений Cifar10 — практический опыт Pytorch
boy illustration
Начало работы с EdgeonePages — новым недорогим решением для хостинга веб-сайтов
boy illustration
[Зона легкого облачного игрового сервера] Управление игровыми архивами
boy illustration
Развертывание SpringCloud-проекта на базе Docker и Docker-Compose