Есть два sql файла, некоторые записи в них повторяются, как закинуть в БД эти файлы что бы не продублировать записи?
1
-
насколько я понимаю, проще всего — загрузить их в две временные базы данных, а затем отобрать в нужные таблицы нужную информацию. – aleksandr barakin 3 авг '15 в 13:47
добавить комментарий
|
1 ответ
Если в данных есть уникальный набор вроде username/email или что-то, что подходит под уникальность, то импортировать такие данные просто - проставить флаг unique и в запросе писать INSERT IGNORE (или REPLACE) в базе и ничего не продублируется. В остальном все зависит от вашего набора данных. Что в них входит?
-
это дампы БД geoip, там каждый start_ip уникальный, вот через импортирование одно да другое не получается – Юрий 3 авг '15 в 13:51
-
Как минимум не достаточно информации, чтобы понять чем тот же вариант с INSERT IGNORE не подходит? – white-imp 3 авг '15 в 13:58
-
подходит, только дело в том что у меня 86 тыс записей, разбиты на кучу INSERT INTO, и каждому добавлять IGNORE это ежика родить можно – Юрий 3 авг '15 в 14:02
-
1Ну так для этого есть всякие текстовые тулзы: например notepad++, @textReplace. Одна минута дел. :) – white-imp 3 авг '15 в 14:13