Имеется база FileMaker из 20 и более таблиц. Кол-во записей в таблицах от 1 до 3 млн. Нужно для нескольких таблиц регулярно синхронизировать данные с данными в MySql базе. База MySql развернута на отдельном сервере. Для выполнения запросов в MySQL базе используется язык R.
Рассматриваю такие варианты: Вариант 1
- Выгружать данные в csv-файл (средствами FileMaker)
- Загружать во временную таблицу в MySql (средствами R)
- Обновлять по связи старые записи (средствами R)
- Добавлять новые записи (средствами R)
Смущает скорость выгрузки в csv-файл и необходимость кидаться файлами между серверами.
Вариант 2
- Выбирать данные по ODBC подключению к базе FileMaker (средствами R)
- Запросом UPDATE ... ON DUPLICATE KEY UPDATE одновременно обновлять и добавлять данные (средствами R)
Смущает стабильность подключения и последствия неожиданной потери связи.
Какие еще варианты стоит рассмотреть?