Есть ссылка с которой надо парсить данные (https://www.epicgames.com/store/ru/browse?sortBy=releaseDate&sortDir=DESC&tag=Экшен&count=40&start=0), и есть код, который должен парсить, но он выдает пустой словарь каждый раз и я уверен, что проблема в ссылке, возможно надо отдельно задавать параметры ему, вот только как это правильно сделать? Код, который надо доработать:
import requests
from bs4 import BeautifulSoup
HOST = 'https://www.epicgames.com'
URL = 'https://www.epicgames.com/store/ru/browse?sortBy=releaseDate&sortDir=DESC&tag=Экшен&count=40&start=0'
HEADERS = {
'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 YaBrowser/20.11.3.183 Yowser/2.5 Safari/537.36'
}
def get_html(url, params=None):
req = requests.get(url, headers=HEADERS, params=params)
return req
def get_content(html):
soup = BeautifulSoup(html, 'html.parser')
items = soup.find_all('div', class_='css-1gc10zu-DiscoverCardLayout__content')
games = []
for item in items:
games.append(
{
'TITLE': item('div', class_='css-2ucwu'),
}
)
return games
def parser():
html = get_html(URL)
games = []
if html.status_code == 200:
html = get_html(URL)
games.extend(get_content(html.text))
print(games)
else:
print('Error')
parser()