Подскажите как решить задачку с обезличиванием личных данных клиентов в базе MySQL. Моя задача состоит в том что бы при бекапе были обезличены личные данные клиентов - ФИО, емаил. Есть e-commerce CMS, и я хочу что бы при бекапе эти данные были изменены. Как это реализовать? Есть ли примеры? Я себе представляю это как изменения данных во время бекапа на лету. Другой вариант это копия базы и изменение данных через sql запросы, и потом обезличеный бекап. Подскажите как сделать правильно и если можно пример.
-
Хм. Какой же это бекап если из него нельзя восстановить базу?– Alexey Ten7 авг 2019 в 6:53
-
моя задача в том что бы иметь 2 бекапа. один полный (для клиента) и один обезличеный (для девелоперов)– James M7 авг 2019 в 6:55
-
Ну не выгружайте эти поля, делов-то... или заливайте их рандомным фэйком. Моя задача состоит в том что бы при бекапе Как ВЫ намерены делать бэкап - нам предложено догадаться, надо понимать?– Akina7 авг 2019 в 7:21
-
Например, ФИО может быть заменено на любой чексумм от него, а мыло - то же, но с добавкой @host.fake. Делается, например, изготовлением вьюшки и бэкапом её данных вместо данных таблицы.– Akina7 авг 2019 в 7:24
-
бекап хочу делать через mysqldump. как их на лету менять? нужен какой то скрипт?– James M7 авг 2019 в 7:29
2 ответа
Бекап БД подразумевает сохранение данных, а задача в изменении данных. Если для разработчиков не нужно чтобы количество записей в таблицах было одинаковым в основной базе и дев базе, а нужна именно структура. Можно подготовить тестовые данные для дев базы один раз. Изменив либо часть основной базы, либо всю если нужны все записи. А далее изменяете только структуру, если она менялась, миграциями обычно. Если все таки нужны для чего то все данные бекапа, но измененные. То стоит написать миграцию (набор sql запросов изменяющих данные) и применять ее к свежему бекапу, в потом отдавать дамп разработчикам. Для автоматизации или bash или консольное приложение, смотря что у вас там конкретно стоит и как удобнее. Хорошая практика это иметь базу с тестовыми данными и менять только структуру, если она поменялась через миграции.
Я решил задачу с GDPR данными обычной маскировкой данных функциями MySQL.
mysql -u %DB_LOGIN% -p%DB_PASSWORD% %GDPR_DB_NAME% -e "DROP DATABASE %GDPR_DB_NAME%"
mysql -u %DB_LOGIN% -p%DB_PASSWORD% -e "CREATE DATABASE %GDPR_DB_NAME%"
mysqldump -u %DB_LOGIN% -p%DB_PASSWORD% %DB_NAME% | mysql -u %DB_LOGIN% -p%DB_PASSWORD% %GDPR_DB_NAME%
mysql -u %DB_LOGIN% -p%DB_PASSWORD% -D %GDPR_DB_NAME% -e "UPDATE "customer_address_entity" SET company = CONCAT(SUBSTR(company, 1, 6), REPEAT('*', CHAR_LENGTH(company) - 6));" -vvv