0

Пытаюсь заниматься парсингом, с сайта получил json-ответ, пытаюсь работать над ним библиотекой pandas.

import json
import pandas as pd


url = 'https://1xstavka.ru/results/getmain'
params = {'showAll': 'true', 'date': '2020-03-09'}
headers = {'X-Requested-With': 'XMLHttpRequest'}
response = requests.get(url, params=params, headers=headers)

r = response.json() 
basket = r['results'][1]['Elems']                   
for i in basket:
    for j in i['Elems']:
        with open('response.json', 'w', encoding='utf-8') as file:
            json.dump(j, file, indent=2, ensure_ascii=False)

df = pd.read_json('response.json')
print(df)

Выдает почему то в ответ, только последний результат из json. Как получить полную таблицу и как можно получить только определенные столбцы?

3
  • 1
    Открытие файла в режиме 'w' стирает все предыдущее содержимое файла. Нужно один раз открыть файл до цикла, записать в него все что вы хотели записать, закрыть файл.
    – insolor
    5 мая 2020 в 16:22
  • А как его открыть до цикла, если нужна информация сохраняется в переменной после цикла? 5 мая 2020 в 16:33
  • 1 - если действительно нужен файл, то нужно вынести with наружу циклов. 2 - в файле у вас будет формироваться невалидный json - скорее всего нужно формировать список из элементов, потом уже передавать их в файл.
    – insolor
    5 мая 2020 в 16:46

1 ответ 1

0

Создал список перед началом цикла, результат цикла добавил в список.

r = response.json() 
score =[]
basket = r['results'][1]['Elems']                   
for i in basket:
   for j in i['Elems']:
       score.append(j)


with open('response.json', 'w', encoding='utf-8') as file:
    json.dump(score, file, indent=2, ensure_ascii=False)

df = pd.read_json('response.json')
print(df)

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge that you have read and understand our privacy policy and code of conduct.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.