0

Разбираюсь с web workers, пишу приложение (github) для скачивания списка Участников группы ВКонтакте. Авторизация и получение id группы происходит во «фронтенде», а долгое скачивание поручается "рабочему" – dedicated web worker'у.

На группах до 3.5 млн. работает. Но попробовал MDK с их 7 млн. и напоролся на ошибку в консоли: InternalError: too much recursion. Firefox 41.0.1, os x 10.11.

Как точнее разобраться в причине этой ошибки?

Может ли это быть лимит памяти данных (предполагаю, около 70 мегов весят id в текстовом виде)? Или дело в том, как я криво организовал вызовы к api – накручивается где-то снежный ком коллбэков?

Воспроизвести ошибку можно тут: авторизоваться через ВК и ввести группу mdk. У меня отваливается на 65–71%.

Запросы к API ВКонтакта делаю через jsonp: формирую url запроса и добавляю параметр callback с именем функции, которую вызвать «по возвращении». И выполняю importScripts() с этим url.

Весь код обернул в объект, который вешает свой метод на обработку коллбэка:

self.callback = this.runLoop.bind(this);

Может, эта конструкция создаёт лишний виток стека вызовов?

Буду благодарен за идеи по дебагу воркера, а также помощь в отлаживании проекта.

6
  • Проблема, я так понимаю, в importScripts - вы запускаете его в runLoop, затем не выходя из него опять вызывается этот же метод и т.д. Не пробовали обращаться к ВК асинхронно, через тот же ajax? Тогда запуск метода всегда был бы "чистым", т.е. безо всякой рекрсии
    – BOPOH
    5 окт 2015 в 15:32
  • Через XMLHttpRequest не выйдет т.к. cross-domain. Поэтому jsonp c importScripts(). Он асинхронен.
    – Sergiks
    5 окт 2015 в 15:35
  • Напишите после importScripts строчку console.log(1); и поставьте на ней breakpoint. Как думаете - когда у вас он сработает? И о какой асинхронности вы говорите? Нет асинхронности, есть синхронность, есть лимит рекурсии, в который вы упираетесь
    – BOPOH
    5 окт 2015 в 15:45
  • 1. Написал. В консоль сыпятся выводы по ходу считывания большой группы – т.е. туда выполнение доходит, и ф-я завершается. 2. каким дебаггером можно поставить breakpoint внутри кода web worker'а? FireBug внутрь WW не умеет.
    – Sergiks
    5 окт 2015 в 15:51
  • 1
    Я хромом пользуюсь. Поставил брекпоинт на importScripts, поставил на console.log. Доходит до importScripts и опять до него и опять до него и т.д. Т.е. console.log будет достигнут только при возврате из рекурсии. Обернул importScripts в setTimeout(function() {importScripts (url);}, 100) - дошел до 100%, т.е. как раз сделал то, что предлагал - обращение к вк происходит асинхронно
    – BOPOH
    5 окт 2015 в 15:57

1 ответ 1

0

Похоже, я не учёл, что importScripts() не только импортирует скрипт, но и немедленно его исполняет, ещё до выхода из функции. Это вызывает ком вложенности вызовов метода runLoop(), что и переполняет стек.

Fixed обёртыванием в setTimeout():

setTimeout( function(){ importScripts(url)}, 0);

Спасибо @BOPOH за обнаружение и объяснение этого момента.

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.