1

Знатоки, нужна помощь. Использую Openpyxl для записи данных в эксель предварительно выгрузив их с бд. Суть в том что мне нужно удалять (заменять) данные в листе эксель новыми данными, и по этому я написал код который сам удаляет данные с листа и после этого добавляет новые. Но проблема в том что он добавляет их после "старых" данных оставляя за собой пустые строки. Эта проблема решается сохранением файла после удаления данных, но это удваивает время работы програмы. Возможно есть какой то метод явно указать в какой ряд начинать запись, или что то еще? Спасибо за помощь.

    def write_to_excel(name_file):

    
    # request = request 
    # path_create_or_save_file = path_create_or_save_file 
    # name_sheet = name_sheet
    
    with psycopg2.connect(dbname='', 
                                     user="", 
                                     password="", 
                                     host='', 
                                     port ='') as connection:
        with connection.cursor(cursor_factory=DictCursor) as cursor:

            for name_sheet in sheets:
                print(f'Запускаю скрипт {name_sheet}')
                cursor.execute(sheets[name_sheet]) 
                rows = [[desc[0] for desc in cursor.description]]
                for row in cursor: 
                    rows.append(row)
                print(f'Выгрузили и скопировали {name_sheet}')

    
                clear_wb = load_workbook(name_file) 
                excel_sheet = clear_wb[name_sheet]
                excel_sheet.delete_cols(1,50)
                # clear_wb.save(name_file)
                # clear_wb.close()
                # write_wb1 = load_workbook(self.path_create_or_save_file)
                # excel_sheet1 = write_wb1[self.name_sheet]
                data = rows 
                
                # **Вот проблемный момент**
                for i in data:                        
                    excel_sheet.append(i)


                clear_wb.save(name_file)
                print(f'Сохранили {name_sheet}')
            clear_wb.close()

start_time = time.time()
write_to_excel('test.xlsx')
print("--- %s seconds ---" % (time.time() - start_time))
5
  • Сделайте print(data), скорей всего там в начале пустые строки. И непонятно, как у вас остаются "старые" данные, если вы удаляете столбцы? 28 авг 2022 в 20:21
  • Они не остаются, остаётся ровное количество пустых строк от старых данных.
    – Влад
    28 авг 2022 в 20:23
  • Попробуйте удалить не столбцы а строки. 28 авг 2022 в 20:43
  • Действительно это помогло. И время выполнения увеличилось незначительно. Если удалять 50к строк, это занимает на моей машине около 8-9 секунд. Немного оптимизирую, и планирую удалять ровно столько строк сколько находится в файле.Большое спасибо.
    – Влад
    29 авг 2022 в 4:56
  • Нашел совет от основателя - скопировать все данные, которые нужны на новый лист, удалить исходный и затем переименовать новый. stackoverflow.com/questions/65027902/… 30 авг 2022 в 12:57

2 ответа 2

1

Это "чудо" объясняется из просмотра исходного года. исходный код удалялок. При удалении строк добавлена проверка словаря self._cells содержащего координаты ячеек и если он пуст, то счетчик строк обнуляется.

self._current_row = self.max_row
        if not self._cells:
            self._current_row = 0

При удалении столбцов этого нет, поэтому счетчики обнуляются сборщиком мусора только при записи изменений в файл. В общем, как показал опыт @Влада, после удаления возникают коллизии при работе с добавлением строк. Между этими действиями, должно быть сохранение в файл.

4
  • Поправка, вариант не совсем рабочий с удалением строк. Пример: Если было 50 строк, а при следующей записи строк стало 100, то запишется всего первые 50, остальные пропадают.
    – Влад
    30 авг 2022 в 6:55
  • @Влад Вот же черт. А если попробовать удалить тогда сразу столько количество строк, сколько нужно вставить? 30 авг 2022 в 7:55
  • @Влад Вот, что нашел stackoverflow.com/questions/14904977/…. 30 авг 2022 в 8:17
  • пробовал удалять и ровное кол-во и больше. Одно и тоже. Сейчас переписал код, пробую сначала зачистить все листы, сохранить, закрыть, открыть, и записать данные. Вроде и время обработки не сильно должно страдать, и запись должна получиться. Единственное переживаю за функции эксель, они могут потерять из виду данные которые удалились.
    – Влад
    30 авг 2022 в 9:47
0

Вопрос решен в комментах. На мое удивление удаление строк, а не столбцов помогло. Думал что будет такая же история, только вместо пустых строк будут пустые столбцы, но нет. Спасибо.

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge that you have read and understand our privacy policy and code of conduct.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.