0

Проблема такая: с браузера сайт открывается на ура, но при отправлении ему get запроса с помощью requests возвращает ошибку 403. В чем может быть проблема?

import requests

r = requests.get("http://<тут адрес сайта>")

Причем так происходит только с этим сайтом(hltv.org). На нем стоит какая то защита?

4
  • 2
    используйте headers от любого брайзера, без него сайт определяет, что работает именно программа и блочит ее
    – danilshik
    27 мар 2019 в 19:30
  • @danilshik а как их сформировать? 27 мар 2019 в 19:55
  • @danilshik {'user-agent': 'your-own-user-agent/0.0.1'} вот такое вставил и заработало! Спасибо! 27 мар 2019 в 19:59
  • не успел добавить комментарий)
    – danilshik
    27 мар 2019 в 20:01

2 ответа 2

2

Нужно имитировать вход человека, некоторые сайты блокируют программы import requests

headers = {'user-agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) '
                         'Chrome/67.0.3396.99 Safari/537.36', 'Accept-Encoding': 'identity'}

r = requests.get("https://www.hltv.org/", headers=headers)

print(r) #<Response [200]>
1

В качестве примера, список user-agent можете найти в интернете, либо просто скопировать из своего браузера

headers = {
            'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:65.0) Gecko/20100101 Firefox/65.0'
        }
r = requests.get(url_page, headers=headers)

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими условиями использования и подтверждаете, что прочитали и поняли наши политику конфиденциальности и нормы поведения.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.