есть нейронная сеть, она является чат-ботом.
с сайта отправляется ajax-запрос на php, он через shell_exec
запускает питон и получает от него ответ, который после отправляет клиенту. проблема в том что всё это работает очень долго, но самое узкое место в самом питоне.
замеряю время этой функцией:
start_time = time.clock() #начали считать
#код
q = time.clock() - start_time #закончики считать
return_(q) #функция ответа и завершения
в целом код отрабатывает быстро, в среднем 0.0001 сек. (без загрузки модели), но как только я возвращаю загрузку модели (model = load_model( mycfg.path + 'my_model.h5')
), то время выполнения в среднем становится 1.18 сек., при этом сама модель имеет размер 67кб.
для чата такая скорость непозволительна, особенно учитывая потерю времени на прослойку в виде php, каким образом оптимизировать этот момент? может можно запустить сеть в фоновом режиме и работать с процессом, а не грузить каждый раз всё для работы с сетью?