2

Есть готовый python скрипт, чтобы сильно не заморачиваться с запуском через supervisor я просто добавил в cron задание:

0 12 * * 1 python /pat/to/script.py > /path/to/my.log

Каждый понедельник в 12 часов запускается скрипт и работает какое-то продолжительное время, а в лог записывает информацию только после окончания работы, что не очень удобно, я не могу посмотреть инфо во время выполнения скрипта, подскажите, как правильно логировать процессы запущенные кроном?

11
  • так исправьте скрипт, чтобы выдавал нужную вам информацию в нужное вам время. Commented 27 апр. 2017 в 10:17
  • @alexanderbarakin много исправлять придется :) Тогда проще запустить супервизором, надеюсь найти более простой способ и получше познакомится с кроном Commented 27 апр. 2017 в 10:22
  • не ясно, при чём тут программы cron и supervisor. информацию вам выдаёт ваш скрипт. у него, что, недетерминированное поведение? один раз работает так, другой раз эдак, третий вообще никак? Commented 27 апр. 2017 в 10:26
  • 4
    Сделайте логирование в вашем Python скрипте. Для этого есть модуль logging Commented 27 апр. 2017 в 11:19
  • 3
    А если запускать с помощью python -u?
    – andreymal
    Commented 3 мая 2017 в 16:31

2 ответа 2

3

Я рекомендую лог реализовать внутри скрипта.

Всё очень подробно расписанно в документации

Для быстрого старта вот вам пример как быстро реализовать данный функционал. В начало файла поместите эти строки

import logging
level = logging.DEBUG
FORMAT = '%(asctime)s %(processName)s\%(name)-8s %(levelname)s: %(message)s'
logfile = '/path/to/my.log'
logging.basicConfig(format = FORMAT, level=level, filename = logfile )

logger = logging.getLogger(__name__)
debug = logger.debug
print = logger.info

Тут есть хак с функцией print для python3. Для python2 этот хак реализуется иначе.

import sys
class LoggerWriter:
    def __init__(self, level):
        self.level = level

    def write(self, message):
        if message != '\n':
            self.level(message)

    def flush(self):
        self.level(sys.stderr)

sys.stdout = LoggerWriter(logger.info)
sys.stderr = LoggerWriter(logger.warning)

via

Но вместо хаков лучше переписать принты на logger.info

2

Вывод перенаправленный в файл является полностью буферизированным (то есть пока не заполнится буфер или явно его не очистить, то в файле вы ничего не увидите). Когда в консоли интерактивно запускается скрипт (стандартный ввод/вывод присоединены к терминалу), буферизация построчная включена.

В cron вы можете просто -u параметр командной строки передать:

</dev/null python -u /path/to/script.py >> /path/to/my.log 2>&1

Сложнее не значит лучше. Вывод из простого print легче забрать чем к примеру редактировать logging настройки скрипта, упакованного в docker-контейнер, внутри него самого. Или даже просто, если вы интерактивно хотите скрипт запустить, то каждый раз лезть в него тоже не очень удобно. logging это уровень абстракции, который позволяет разделить: какие события регистрировать (с акцентом на относительной важности разных событий в коде, генерируемых иерархией loggers), от того кто эти события потребляет (handlers) и как они форматируются (formatters). Если logging используете, то удобно добавить возможность читать конфигурацию, которая задаёт loggers, handlers, formatters из файла.

Ваш ответ

Нажимая «Отправить ответ», вы соглашаетесь с условиями пользования и подтверждаете, что прочитали политику конфиденциальности.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.