Задача: регулярно по расписанию обновлять всю структуру каталога (категории, товары, доп. таблицы, сводные таблицы связей многие ко многим) на основе xml файла выгрузки.
Необходимо парсить файл и на основе полученных данных наполнять\обновлять каталог.
Номенклатура довольно объёмная, около 30 тысяч товаров, десятки категорий и сотни тысяч записей в сводных таблицах.
Проблема: как выполнять эту процедуру оптимально, за минимальное время и с минимальный количеством запросов в БД.
Мои предположения как это можно сделать:
- На каждой итерации выполнять
Product::updateOrCreate()
и аналогично для других моделей, а сводные таблицы обновлять с помощьюsync
. - Из выгрузки получить массивы товаров, категорий и т.п., затем несколькими запросами извлечь из БД соответственно все товары, категории и т.п. и в цикле сравнивать соответствующие записи и в случае отличия обновлять или добавлять записи в БД.
1 вариант кажется даст слишком большую нагрузку, т.к. на каждой итерации будут выполняться селекты для сравнения.
А вот по второму варианту у меня вопрос: как в Laravel лучше всего сравнивать объект из коллекции моделей с обычным массивом полей? Нужно тупо последовательно сравнивать каждое поле или есть удобная функция для сравнения? В документации ничего такого не видел, но может опытные пользователи Laravel могут подсказать...