Есть список из десятка url. Начинаю в цикле for их перебирать, парсить html и формировать словарь из данных с каждого линка. Потом хочу передать получившийся словарь в созданный ранее список, но происходит нечто неожиданное. Вместо ожидаемого списка словарей с данными по каждому линку, получаю в нем 10 одинаковых словарей, созданных на основе данных с последнего линка.
article = {}
articles = []
for i in links:
article['link'] = i
r = requests.get(i, headers = headers)
soup = BeautifulSoup(r.text, 'lxml')
title = soup.find_all('h2')[0].get_text()
article['title'] = title
article['date_pub'] = soup.find_all('time', class_='b-date')[0].get('datetime')
articles.append(article)
Распечатываю содержание переменной article внутри цикла. Все работает корректно, каждый раз скрипт создает новый словарь. Но в момент добавления к списку происходит нечто непонятное. Вместо добавление, происходит его полная замена. Например, при втором прохождении цикла for два раза один и тот-же словарь со второго линка... Ну и далее. Что это и как оно исправить?
article = {}
, а после везде ссылку на него используете. Нужно создавать словарь на каждой итерации списка. И, для наглядности, лучше используйтеarticle = dict()