2

Имеется большие БД весом не меньше 10гб. При их дампе сервер повисает, как можно более мягче дампить данные без большой потери производительности?

9
  • 2
    а почему не настроить репликацию и делать дамп с второго сервера (slave). А в свободное время второй сервер может помогать распределять нагрузку.
    – KoVadim
    19 фев 2014 в 19:57
  • 1
    Так перед репликацией надо сделать копию базы ведь на вторую машину. А как вы делаете дамп, что сервер повисает? mysqldump в связке с gzip прекрасно справляется с такими объемами
    – vanchester
    19 фев 2014 в 21:25
  • @vanchester, репликация сама сделает копию, при этом в сам процесс репликации уже должен быть заложен "мягкий" алгоритм копирования, чтобы ненароком не завалить базу-источник.
    – etki
    19 фев 2014 в 21:37
  • @Fike, я думаю, вы не правы, по крайней мере в отношении MySQL (MariaDB). Репликация строится на основе бинарных логов, которые создаются только после включения репликации на мастере и потом забираются репликами. Не включена репликация - нет этих логов. В эти логи попадают все запросы, которые изменяют структуру или данные БД. Во всех руководствах перед включением репликации (специально сейчас несколько просмотрел, удивясь информации от вас) БД на мастере останавливается или переводится в ReadOnly, вручную копируется на слейв, включается механизм репликации и мастер выводится в боевой режим.
    – vanchester
    19 фев 2014 в 22:29
  • 1
    за срок жизни логов отвечает параметр expire_logs_days в my.cnf
    – vanchester
    21 фев 2014 в 9:06

2 ответа 2

2

Предлагаю несколько вариантов.

Способ 1. Скопировать файлы баз на новый сервер. Обычно они лежат в /var/lib/mysql. Т.е. на новом сервере устанавливаете MySQL (или MariaDB), останавливаете его и просто заменяете те файлы, которые создались в /var/lib/mysql на файлы со старой машины. После запуска он будет работать с этими базами. Еще эту же задачу можно решить, прописав другой путь к базам в my.cnf

Способ 2. Воспользоваться утилитой mysqldump. Она создает дамп БД на столько быстро, на сколько это возможно. Я пользуюсь такой командой

mysqldump -u root -p dbname | gzip > dump.sql.gz

Если задача позволяет сдампить только несколько таблиц, после dbname их можно перечислить. Восстановление будет выглядеть так:

gunzip <dump.sql.gz | mysql -u root -p dbname

10 ГБ - вполне реальная цифра для этого способа, но придется подождать (думаю, около 30-50 минут на дамп и столько же на восстановление). Я пользуюсь именно этим способом.

Способ 3. Если на сервере есть настроенные php и какой-нибудь веб-сервер, можно воспользоваться скриптом sypex dumper. Работает довольно быстро, имеет ряд удобных инструментов. Позволяет делать как полный бэкап, так и только выбранных таблиц. При выполнении операций есть подробная информация о том, что сейчас выполняется, показывает процент оставшегося объема операций. Для восстановления нужно будет воспользоваться им же.

1
  • 2
    То что вы предложили, это обычный способ дампа, мне он не подходит, цель не просто сдампить данные, а сдампить данные незаметно для процессов использующих sql сервер и которые повисают во время дампа, залагивают. Минут на 10-15.
    – avengerweb
    21 фев 2014 в 8:11
0

Как вариант попробовать по таблицам. Но если их много - то это жесть).

1
  • около 50 сцепленных друг с другом таблиц, весь их иногда очень велик.
    – avengerweb
    21 фев 2014 в 8:09

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.