Как я могу вставить много данных в базу данных mySQL сразу?

Question

Я вставляю данные из текстового файла в базу данных mySQL и будет вставлен около 6000 или более записей за один раз.

try { 
    $sql = "INSERT INTO data (id,name,date,place) values(?,?,?,?) "; 
    $q = $pdo->prepare($sql); 
    foreach($data as $row) { 
     $q->execute(array($row['id'], $row['name'], $row['date'], $row['place'])); 
    } 
} 
catch (PDOException $pe) { 
    echo $pe->getMessage(); 
} 
catch (Exception $e) { 
    echo $e->getMessage(); 
} 

Я пробовал его с 3000 записей, и все работает нормально. Но если у меня есть больше данных для вставки, бывает, что моя страница пуста, и ничто не добавлено в мою базу данных.

Что может вызвать эту проблему и как ее решить?

Answer 1

Поскольку у вас уже есть текстовый файл, а затем использовать ниже запрос

LOAD DATA INFILE 'file/path/to/file.txt' 
INTO TABLE table-name 
FIELDS TERMINATED BY ',' 
ENCLOSED BY '"' 
LINES TERMINATED BY '\n' 
IGNORE 1 ROWS; 

Убедитесь, что ваши данные в файл в последовательности с вашими строк таблицы.

Подробнее здесь https://dev.mysql.com/doc/refman/5.6/en/load-data.html

Answer 2

Операторы NSERT, которые используют синтаксис VALUES, могут вставлять несколько строк. Для этого включите несколько списков значений столбцов, каждый из которых заключен в круглые скобки и разделен запятыми. Пример:

INSERT INTO tbl_name (a,b,c) VALUES(1,2,3),(4,5,6),(7,8,9); 

От How to do a batch insert in MySQL

Answer 3

Вместо выполнения нескольких запросов внутри цикла, вы должны использовать синтаксис мульти-вставки. Пример:

INSERT INTO data (id,name,date,place) VALUES (:id1,:name1,:date1,:place1), (:id2,:name2,:date2,:place2), (:id3,:name3,:date3,:place3); 

Заканчивать this article делать мульти-вставки с подготовленными операторами.

Answer 4

Использование MySQL LOAD DATA INFILE

см This Answer

Если вы используете PDO или тому подобное с зацикливание, вы делаете это неправильно, и медленно.