1

Есть расширение, которое позволяет использовать GDB для дебага Питонячих процессов, я его установил и попробовал использовать на моём веб-приложении на aiohttp. Но, какие бы запросы там не выполнялись, в консоли всегда отображается самый базовый стэк вызовов, без какой-либо полезной информации:

(gdb) py-bt
Traceback (most recent call first):
  File "/usr/lib/python3.7/selectors.py", line 468, in select
    fd_event_list = self._selector.poll(timeout, max_ev)
  File "/usr/lib/python3.7/asyncio/base_events.py", line 1739, in _run_once
    event_list = self._selector.select(timeout)
  File "/usr/lib/python3.7/asyncio/base_events.py", line 539, in run_forever
    self._run_once()
  File "/usr/lib/python3.7/asyncio/base_events.py", line 571, in run_until_complete
    self.run_forever()
  File "/usr/local/lib/python3.7/dist-packages/aiohttp/web.py", line 433, in run_app
    reuse_port=reuse_port))
  File "./my-server/main.py", line 98, in <module>
    web.run_app(app_main, host=host, port=port)

Вероятно это следствие того, что asyncio создаёт свой стэк вызовов каждой корутине.

Мне очень важно иметь возможность смотреть внутренности процесса для дебага нагруженного веб-приложения. Как можно посмотреть стэк вызовов и прерывать/продолжать корутины с GDB?

5
  • Про питоньи радости сказать ничего не могу и про детали реализации asyncio я тоже не так много знаю, но <здесь много «если»> возможно можно просто получить список потоков с помощью info threads и перейти на нужный с помощью thread N, о том как с этим работать в нормальных языках я уже писал тут: ru.stackoverflow.com/questions/771275/…
    – Fat-Zer
    30 дек 2020 в 15:05
  • @Fat-Zer там же системные потоки? Питон однопоточный, поэтому вряд ли прокатит... хотя по идее принцип работы должен быть очень схож.
    – AivanF.
    30 дек 2020 в 15:08
  • опять, же я не знаю, что из себя представляет asyncio... если это просто диспетчер событий, с циклом, то решение почти наверняка не поможет, да и gdb тоже... если он запускает каждую корутину в отдельном полноценном потоке, то поможет... если это менеджер thread pool'а worker'ов (затрудняюсь сейчас с русскими терминами), как в каком-нить Go, то частично может и помочь, но вряд ли...
    – Fat-Zer
    30 дек 2020 в 15:18
  • @Fat-Zer это цикл который смотрит системные select(2) и дергает колбэки
    – eri
    30 дек 2020 в 19:49
  • @AivanF. каждый await кладется на стек run_forever - это как разворот рекурсии в цикл. тоесть вызывающая функция лежит не выше, а рядом
    – eri
    30 дек 2020 в 19:58

1 ответ 1

1

После долгих поисков удалось найти альтернативное решение, утилита py-spy! В отличие от gdb, ей не нужен запуск целевого процесса на специальной сборке Питона, а также она не испытывает трудностей при работе с асинхронными функциями. Простой пример использования:

pip install py-spy

# Получить стэки вызовов активных потоков:
py-spy dump --pid 1

# Смотреть выполняющиеся функции в реалтайме:
py-spy top --pid 1

Подробное описание можно найти здесь: https://github.com/benfred/py-spy

Важное для некоторых окружений замечание: как и gdb, для использования внутри Докера этой утилите нужен включенный флаг SYS_PTRACE.

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.