0

Если включить код, то будет работать пару секунд, при этом ничего не выводя, а потом выключится. Код должен вывести "Ссылка на видео - ссылка"

import requests
from bs4 import BeautifulSoup

def parse_of_video():
    URL = 'https://www.youtube.com/feed/trending'
    HEADERS = {
        'User_Agent': 'Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.105 Safari/537.36'
    }

    response = requests.get(URL, headers = HEADERS)
    soup = BeautifulSoup(response.content, 'html.parser')
    items = soup.findAll('div', class_ = 'style-scope ytd-video-renderer')
    videos = []

    for item in items:
        videos.append({
            'link': item.find('a', class_ ='yt-simple-endpoint style-scope ytd-video-renderer').get('href')
            })

    for video in videos:
        print(f"Ссылка на видео - {video['link']}")

parse_of_video()
1

2 ответа 2

1

Сайт наполняется динамически с помощью JavaScript. Средствами BeautifulSoup вы эту задачу не решите. Вам нужен Selenium:
Как парсить html страничку с JavaScript в python 3?
Парсинг динамических данных сайта на python

0

Присоеденяюсь к ответу колеги. Однако, я бы посоветовал пользоваться Scrappy. Он будет немного быстрее нежели чем Selenium Вот тут можно прочитать разницу между этими тремя инструментами: https://dev-gang.ru

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими условиями использования и подтверждаете, что прочитали и поняли наши политику конфиденциальности и нормы поведения.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.