0

Из csv файла получены данные следующего вида:

lastname,firstname,surname,organization,position,phone,email
Паньшин,Алексей,Владимирович,,,Минфин,,+7(495)748-49-73,[email protected]
Лагунцов,Иван,Алексеевич,,,Минфин,,+7(495)913-11-11 доб.0792,
Лагунцов,Иван,,,,[email protected]

Надо найти дублирующие записи и объединить, а лишнюю строку удалить:

Паньшин,Алексей,Владимирович,Минфин,,+7(495)748-49-73,[email protected]
Лагунцов,Иван,Алексеевич,Минфин,,+7(495)913-11-11 доб.0792,[email protected]

Подскажите пожалуйста как это реализовать.

PS. Данные взяты с открытых источников

4
  • Как узнать что две записи про одного человека? Иванов,Иван,Иванович, Иванов,Иван,Петрович, Иванов,Иван, - это сколько людей? 30 апр 2022 в 22:38
  • Извиняюсь за не полный вопрос. Если ФИ или, можно, ФИО совпадает, то считается, что это один и тот же человек. Одинаковые люди могут быть не только в соседствующих строках.
    – user498075
    1 мая 2022 в 18:08
  • В списке есть Иванов,Иван,Иванович и Иванов,Иван,Петрович. Вы встретили Иванов,Иван, (без отчества), то этот (без отчества) кто он? Иванович? Петрович? Ещё кто-то? 1 мая 2022 в 19:25
  • Вы верно рассуждаете, правильнее сверять ФИО, но в этом задании надо сверять ФИ, так как идентичные ФИ будет только в 2-х экземплярах. Будет Иванов Иван Иванович и Иванов Иван, а вот Петровича не будет :)
    – user498075
    1 мая 2022 в 19:51

1 ответ 1

0

Исходя из вашей задачи, предполагаю, что данные, которые вы указали, находятся в формате str. Если две последние строчки об одном и том же человеке, то воспользуйтесь модулем collections:

from collections import OrderedDict


def remove_duplicates(list_: list) -> list:
    k = 0
    while k < len(list_) - 1:
        for list1, list2 in zip(list_[k], list_[k + 1]):
            if list1 == list2:
                new_list = list(OrderedDict.fromkeys(list_[k] + list_[k + 1]))
                list_.remove(list_[k + 1])
                list_.remove(list_[k])
                list_.append(new_list)
            break
        k += 1
    return list_


contact_list = [
    ['lastname', 'firstname', 'surname', 'organization', 'position', 'phone', 'email'],
    ['Паньшин', 'Алексей', 'Владимирович', '', '', 'Минфин', '', '+7(495)748-49-73', '[email protected]'],
    ['Лагунцов', 'Иван', 'Алексеевич', '', '', 'Минфин', '', '+7(495)913-11-11 доб.0792', ''],
    ['Лагунцов', 'Иван', '', '', '', '[email protected]']]

unique_data_list = remove_duplicates(contact_list)
print(unique_data_list)
3
  • Вы предполагаете что дубликаты всегда рядом? 30 апр 2022 в 22:42
  • @StanislavVolodarskiy валидное замечание. Тут я исхожу из данных и предполагаю, что имя и фамилия говорят о том, что это один и тот же человек. Если уникальным будет телефон или емейл, то функцию можно чуть изменить, и все будет ок. 30 апр 2022 в 22:50
  • Добрый вечер. Извиняюсь за не полный вопрос. Все правильно, все данные в формате str и в том виде как вы указали. Если ФИ или, можно, ФИО совпадает, то считается, что это один и тот же человек. Одинаковые люди могут быть не только в соседствующих строках. Функция и модуль, который вы предложили, отлично решают мой вопрос, нужно будет только немного доработать. Спасибо большое.
    – user498075
    1 мая 2022 в 18:24

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.