Разбираюсь с загрузкой данных из ВК через Python. Написал программу, работающую с городом и стеной членов заданной группы (для удобства вырезал всё, не относящееся к моей проблеме). Проблема заключается в том, что через некоторый промежуток времени (всегда разный) программа начинает очень медленно работать, время от времени зависая на несколько минут.
Чтобы понять, в какой момент это происходит, обособил момент с запросом к API строками 'getting wall'
перед и 'got wall'
после. Как я и предполагал, всё виснет именно на urllib2.urlopen().read()
: получает ответ по несколько минут. При этом через браузер с тем же токеном ответ приходит мгновенно.
Я делаю большую паузу в промежутках между запросами, как уже говорил, виснет каждый раз в разных местах, т.е. при обработке пользователей другой частью программы проблем нет.
import urllib2
import json
from time import sleep
access_token = 'kdf4f94fkr9fdefp94frkffkefifj8f5fjefi488940eidf003feijkd03f3'
while True:
url = 'https://api.vk.com/method/groups.getMembers?fields=name,sex,bdate,city,universities&access_token=' + access_token + '&count=1000&offset=0&group_id=15755094'
members = urllib2.urlopen(url).read()
members = json.loads(members)
sleep(0.5)
for member in members['response']['users']:
print member['uid']
if 'city' in member and member['city'] != 0:
print 'getting city...'
city_info = 'https://api.vk.com/method/database.getCitiesById?access_token=' + access_token + '&city_ids=' + str(member['city'])
city_info = urllib2.urlopen(city_info).read()
print 'got city'
city_info = json.loads(city_info)
sleep(0.5)
print 'getting wall'
wall = 'https://api.vk.com/method/wall.get?access_token=' + access_token + '&filter=owner&offset=0&count=100&owner_id=' + str(member['uid'])
wall = urllib2.urlopen(wall).read()
print 'got wall'
wall = json.loads(wall)
sleep(0.5)
В чём может быть проблема?