С Python начал знакомство недавно. Никак не могу решить проблему. Пытаюсь парсить сайт при помощи selenium. Страницу скачал, записал в файл. Файл в браузере открывается нормально. Хочу забрать список заголовков. Все забираются нормально, кроме одного, который содержит греческую букву бетта. При попытке вывести этот заголовок получаю ошибку "'charmap' codec can't encode character '\u03b2' in position 13: character maps to ". Вроде и кодировку 'utf-8' прописал, а всё равно не работает. Файл страницы также записывал с использованием 'utf-8'
Полный текст ошибки
Traceback (most recent call last): File "D:\scrap\test1.py", line 18, in <module>
print(aaa.text)
File "C:\Users\serge\AppData\Local\Programs\Python\Python310\lib\encodings\cp1251.py", line 19, in encode
return codecs.charmap_encode(input,self.errors,encoding_table)[0]
UnicodeEncodeError: 'charmap' codec can't encode character '\u03b2' in position 13: character maps to <undefined>
with open("index.html", 'w', encoding='utf-8') as file:
file.write(driver.page_source)
, и в браузере он открывается нормально с написанием буквы 'бетта' как 'β'
with open("index.html", 'r', encoding='utf-8') as file:
src = file.read()
soup = BeautifulSoup(src, 'lxml')
research = soup.find_all(class_="analyzes__row")
for res in research:
res1 = res.find_all('a')
for aaa in res1:
try:
print(aaa.text)
except Exception as ex:
print(ex)
continue
"'charmap' codec can't encode character '\u03b2' in position 13: character maps to "
без пропусков, еще лучше - с полным стектрейсом. Скорее всего выводите в консоль Windows, а она поддерживает не все символы.text = aaa.text.replace("\u03b2", "бета")
. Если не единичный, то нужно смотреть какие еще встречаются символы, и от этого уже думать, что дальше делать.