Хочу сделать парсинг страниц Яндекс.Дзена, чтобы вытащить оттуда теги каждой публикации и колчество прочитываний. Делаю это на Python с помощью BeautifulSoup. При извлечение HTML кода страницы кодом
import urllib.request
from bs4 import BeautifulSoup
url = 'https://zen.yandex.ru/media/filmmaking/esli-vam-nravitsia-liucifer-posmotrite-i-eti-13-serialov-5d0f25adb34feb00af5df506'
response = urllib.request.urlopen(url)
page = BeautifulSoup(response, features="lxml")
print(page)
блоки, где находятся теги
<div class="theme-tags__grid"> "теги" </div>
и счетчик просмотров
<span class="article-stat__count">13 тыс. дочитываний</span>
оказываются пустыми.
Позволяет ли яндекс.дзен вообще достать эту информацию? Теми ли средствами я пользуюсь? В парсинге новичок)
QWebPage
, загружаешь ссылку в ней и рендер уже передаешь bs для парсинга.