0

Имеется данный код:

import requests
from bs4 import BeautifulSoup as BS
r = requests.get('https://www.pointercrate.com/demonlist/')
html = BS(r.content, 'html.parser')
for el in html.select('.panel'):
    title = el.select('.text-align > a')
    print(title[0].text)

По идее код должен возвратить список топа, но в итоге получаю ошибку list index out of range

6
  • В чем вопрос? Очевидно, что в title ничего нет. 30 янв 2020 в 18:30
  • Вопрос в том, почему возвращается ошибка. Простите если что-то не так, я новичок 30 янв 2020 в 18:31
  • Я же написал: потому что в title ничего нет. 30 янв 2020 в 18:32
  • Странно... Кстати писал по инструкции Хауди Хо про парсинг сайтов на python 30 янв 2020 в 18:34
  • @ДенисСапфиров, ошибка из-за того, что искомый элемент не найден. Скорее всего структура этой страницы поменялась, а инструкция нет.
    – insolor
    31 янв 2020 в 5:32

1 ответ 1

2

Вот код, который выполняет данную задачу:

import requests
from bs4 import BeautifulSoup

response = requests.get('https://www.pointercrate.com/demonlist/').text
soup = BeautifulSoup(response, 'html.parser')
divs = soup.findAll('div', class_='leftlined pad')
for div in divs:
    print(div.text)

Или, используя select:

import requests
from bs4 import BeautifulSoup

response = requests.get('https://www.pointercrate.com/demonlist/').text
soup = BeautifulSoup(response, 'html.parser')
divs = soup.select('div.leftlined.pad')
for div in divs:
    print(div.text)
3
  • Так почему тогда не парсить через html.parser? lxml это плюс одна зависимость, да и к тому на windows он очень проблемный)
    – ccvhd
    31 янв 2020 в 8:17
  • @dhvcc изменил код
    – n1tr0xs
    31 янв 2020 в 8:22
  • благодарю! спасибо огромное 31 янв 2020 в 13:21

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими пользовательским соглашением, политикой конфиденциальности и политикой о куки

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.