Пытаюсь найти способ хранения данных в рамках Google Cloud проекта, чтобы быстро их от туда достать и обработать в веб сервисе на node js. Сейчас данные хранятся в гугл таблице. В Google Cloud развернул веб сервис в AppEngine на node js. Подключился к гугл таблице через Google Sheets API. Данные из гугл таблицы забирает, но на обращение к API Google SHeets уходит много время. Время указано в миллисекундах(Например, 4100 - 4 секунды и 100 миллисекунд).
Максимальное время допустимое для меня, не более 3 секунд. Этот веб сервис работает для Алисы. Алиса не ждет более 3 секунд.
Решил, что всемогущая BigQuery решит проблему и будет доставать нужные мне данные менее чем за 1 секунду. Экспортировал туда данные, создав таблицу в BigQuery. В итоге, она оказалась еще более медленной!
Место обработки выбрал Финляндия (europe-north1). Место обработки веб сервиса Франкфурт (europe-west3). Время 7.6 секунды на обработку это ужасно медленно. Создал набор данных с местом обработки Франкфурт (europe-west3). Итог - результат тот же, 7.4 секунды на выполнение.
Неужели BigQuery так и должна медленно работать? Или я что-то делаю не так? Подскажите пожалуйста, как ускорить работу с БД?
Информация о данных: количество строк 6 тыс, количество столбцов 24.