Хочу забрать контент посредством GET-запроса через socket, уже день как застрял на этой проблеме. Не для кого наверное не секрет, что recv(x) с любым количеством x байт вернет только часть данных.
try:
sock.connect((host_ip, 80))
sock.send('GET / HTTP/1.1' + "\n" + "HOST: " + host + "\n\n")
res_data = sock.recv(65000)
except socket.error, e:
console.err("can't connect: " + os.strerror(e.errno))
else:
self.data = res_data.decode("utf-8")
Первое, что приходит на ум - рекурсивный цикл, который вытащил бы все данные:
res_data = ''
while True:
data = sock.recv(65000)
if not data:
break
res_data += data
Программа благополучно зависает. Находил всяческие решения через timeout, мол ожидать несколько миллисекунд с каждым шагом, потому как это не текст, и данные могут не приходить периодически - тоже ничего не вышло (
i need help!
qsort = lambda L: qsort([x for x in L[1:] if x <= L[0]]) + [L[0]] + qsort([x for x in L if x > L[0]]) if L else L
Content-Length
, хоть сConnection: close
— всё равно обломаетесь обTransfer-Encoding: chunked
. Если это всё не в образовательных целях, лучше взять какую-нибудь готовую http-библиотекуConnection: close
используется, то код в вопросе получит все данные без зависания. Верно, что любой http/1.1 клиент обязан пониматьTransfer-Encoding: chunked
, но она задумана, чтобы позволить поддерживать постоянные подключения, если сервер знает что данный запрос имеетConnection: close
, то меньше основанийchunked
кодировку использовать. Верно, что полноценный http клиент ещё тучу вещей должен делать и что по умолчанию следует что-нибудь вродеrequests
использовать.