0

У меня есть порядка 150 000 строк которые нужно вставлять (insert) в базу данных mysql.

Сейчас я делаю insert на каждую строку, то есть получается 150 000 запросов идет. В итоге я получаю зависание приложения, и ошибки too many connections

в настройках mysql max connections = 150, увеличить тоже не вариант, потому что серверу не хватит ОЗУ и он упадет...

Можно ли как-то делать один insert и в него передавать все строки?

Фрагмент кода моего php скрипта:

$mysqli = new mysqli("localhost", 'base', 'pass', 'user');
$mysqli->query("SET NAMES 'utf8'");
if ($mysqli->connect_errno) {
    printf("Не удалось подключиться к базе данных: %s\n", $mysqli->connect_error); exit();
}

foreach ($arr as $key => $v) {
    $mysqli->query("INSERT IGNORE INTO `table` (`row1`, `row2`) VALUES ('$v[val1]', '$v[val2]')");
    $id = mysqli_insert_id($mysqli);
}
8
  • too many connections у вас получается не потому, что на каждую строку у вас отдельный запрос, а потому что вы делаете это в цикле, каждый раз создавая новое подключение, и, видимо, не закрывая его.
    – teran
    Commented 27 февр. 2023 в 8:46
  • @teran у меня подключение $mysqli = new mysqli(...); только 1 раз, в начале скрипта. далее я в цикле делаю insert'ы просто. разве нужно в цикле закрывать и открывать новое соединение? буду благодарен за информацию!
    – iKey
    Commented 28 февр. 2023 в 6:53
  • текст ошибки явно говорит, что подключения множатся по той или иной причине. Если бы вы привели фрагменты кода, было куда понятнее.
    – teran
    Commented 28 февр. 2023 в 7:44
  • @teran добавил фрагмент кода в вопрос
    – iKey
    Commented 28 февр. 2023 в 7:48
  • если на этом цикл заканчивается, то зачем id сохранять в переменную? Там не такого, что этот ID подставляется еще в один запрос, который в свою очердь создает коннект?
    – teran
    Commented 28 февр. 2023 в 8:30

1 ответ 1

2

Сформируйте запрос таким образом:

INSERT INTO table VALUES (1,2), (5,5), ...;

Здесь в скобках указываются данные каждой строки, которую нужно вставить.

1
  • Я бы добавил, что 1) не совсем понятно, почему МНОГО вставок (т.е. запросов) приводят к ошибке превышения лимита соединений? У вас эти 150 000 вставок в рамках чего происходят? 2) одна вставка 150 000 записей тоже может лечь или приводить к ошибке из-за ограничений на размер запроса, поэкспериментируйте с количеством записей успешно вставляемых за один раз, как показано в комментарии выше. Так как вы не привели состав полей, трудно предположить объемы. Попробуйте эмпирически подобрать число записей, вставляемое за один INSERT корректно. Commented 24 февр. 2023 в 8:48

Ваш ответ

Нажимая «Отправить ответ», вы соглашаетесь с условиями пользования и подтверждаете, что прочитали политику конфиденциальности.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.