В один момент из сторонних API наш сервис получает определённую информацию. Эту информацию нам необходимо сохранить у себя в БД. Однако возможна такая ситуация, что данные будут скачены повторно. Соответственно это либо запись новой информации с удалением старой (недопустимо в нашей ситуации), либо игнорирование дубликатов. На текущий момент для игнорирования дубликатов я вижу 2 пути:
- Перед внесением изменений в БД взять все существующие данные, и сравнивать их. Данный подход мне не нравится тем, что нужно обрабатывать все имеющиеся записи - это означает, что будет скушано много оперативки зазря.
- Добавлять каждую запись поштучно, затем на каждую запись вызывать
SaveChanges
- если будет встречен дубликат, то будет брошено исключение. Данный подход не нравится тем, что это займёт много времени на то, чтобы каждый раз обращаться к БД.
Есть ли в Entity FrameWork Core менее закостыленный способ решения проблемы с дубликатами?
Insert Ignore <нужные данные>
. Соответственно если в момент записи такие данные уже есть, тоInsert
игнорируется, если нет - пишутся