Понимаю что вопрос нубский, а код овно. Но не могу разобраться с кодировкой при записи в csv. Python 3.7 Пишу из под винды 10 и pycharm
Ниже код и приме того как записывается . Помогите разобраться. Спасибо
import requests
from bs4 import BeautifulSoup
import lxml
import csv
url = 'https://www.avito.ru/krasnodar/kvartiry/prodam/vtorichka-ASgBAgICAkSSA8YQ5geMUg'
headers = {'accept': '*/*',
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/98.0.4758.102 Safari/537.36'
}
flats = {
'title': None,
'price': None,
'address': None,
'href': None
}
# Создаем CSV файл с заголовками для дальнейшей записи в него полученных параметров
with open('flats.csv', 'w', newline='') as file:
writer = csv.writer(file, delimiter=';')
writer.writerow(['Заголовок', 'Цена', 'Адрес', 'Ссылка'])
#
req = requests.get(url, headers=headers)
src = req.text
with open('index_1.html', 'w', encoding='utf-8') as file:
file.write(src)
print('Обработка и скачивание страницы 1 завершено')
for i in range(2, 11):
req = requests.get(f'{url}' + '?p=' + str(i))
src = req.text
with open(f'index_{i}.html', 'w', encoding='utf-8') as file:
file.write(src)
print(f'Обработка и скачивание страницы {i} завершено')
print('Запускаю обратботку информации на скачаных страницах')
for i in range(1, 11):
with open(f'index_{i}.html', 'r', encoding='utf8') as file:
src = file.read()
soup = BeautifulSoup(src, 'lxml')
cards_offers = soup.find('div', {'data-marker': 'catalog-serp'})
cards = cards_offers.find_all('div', class_="iva-item-content-rejJg")
for element in cards:
# Достаем заголовок
title_res = element.find('div', class_="iva-item-titleStep-pdebR").text
title = str(title_res).replace(' ', '')
# Достаем ссылку на объявление
href_res = element.find('a').get('href')
href = str('https://www.avito.ru' + href_res)
# Достаем цену за квартиру
price = str(element.find('span', class_="price-text-_YGDY text-text-LurtD text-size-s-BxGpL").text.replace('₽',
'').replace(
' ', ''))
address = str(element.find('span', class_="geo-address-fhHd0 text-text-LurtD text-size-s-BxGpL").text)
flats.update({'title': title,
'price': price,
'address': address,
'href': href
})
with open('flats.csv', 'a', newline='', encoding='utf-8') as file:
writer = csv.writer(file, delimiter=';')
writer.writerow([flats['title'], flats['price'], flats['address'], flats['href']])