2

Добрый день господа, столкнулся с такой проблемой. Раньше делал парсер инвентаря пользователя, было все отлично. Теперь пытаюсь спарсить инвентарь, в итоге после 3й перезагрузки страници стим не отвечает, и начинает отдавать ответ только после минуты ожидания. Как быть? если сайтом будет пользоваться допустим человек 10, то инвентарь в таком случае вообще парситься не будет. Если что, контент беру так - file_get_contents('http://steamcommunity.com/profiles/'.$id.'/inventory/json/730/2'); Была мысль пускать запрос через ТОР, при каждом запросе меняя цепь, тем самым меняя IP адрес, но это же костыль.

4
  • Так а это не оно? Или есть еще способ парсить инвентарь? Если да - можете скинуть ссылку, буду очень признателен
    – Corle
    14 фев 2017 в 12:00
  • Мне бы для инветаря, вот смотрю везде используют метод как я stackoverflow.com/questions/39142591/…
    – Corle
    14 фев 2017 в 12:04
  • У меня есть АПИ кей, я авторизацию делал через стим. Мне именно инвентарь нужен
    – Corle
    14 фев 2017 в 12:04
  • Да, действительно, этот endpoint также позиционируется, как api, извините =)
    – vp_arth
    14 фев 2017 в 12:26

1 ответ 1

2

Если бы вы прочитали код ошибки, всё бы сами поняли:

The request is a duplicate and the action has already occurred in the past, ignored this time (29)

Система знает, что вы недавно запрашивали точно этот ресурс и запрещает вам спамить её одинаковыми запросами.

Вам просто необходимо кешировать результаты всех запросов


Чтобы получить тело ответа при возникновении ошибки
нужно передать в file_get_contents контекст с параметром:

$context = stream_context_create(array(
    'http' => array('ignore_errors' => true),
));

$result = file_get_contents($uri, false, $context);  
$data = json_decode($result, true);
if (!empty($data['error'])) {
  throw new \Exception("SteamAPI Error: {$data['error']}");
}

ЗЫ:
Expires заголовок у них шикарнейший:

Expires:Mon, 26 Jul 1997 05:00:00 GMT

4
  • Секундочку, вы вероятно не получаете тело ответа с ошибкой) Сейчас дополню ответ.
    – vp_arth
    14 фев 2017 в 13:13
  • А можно поподробнее про заголовок. Он типа отдает дату/время, когда можно сделать повторный запрос?
    – Corle
    14 фев 2017 в 13:34
  • Этот заголовок должен отдавать дату в будущем, до которой можно безболезненно кешировать ответ, браузер делает это автоматически, например. Но в steam, этот заголовок бесполезен, потому что 1997)
    – vp_arth
    14 фев 2017 в 13:54
  • Думаю можно кешировать запросы в каком-нибудь redis на пару минут. От бедности можно и файлы с ответами создавать.
    – vp_arth
    14 фев 2017 в 13:56

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими пользовательским соглашением, политикой конфиденциальности и политикой о куки

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.