1

Всем добрый день. Подскаите пожалуйста, вот есть парсер. Как сделать так, чтобы он работал каждые 2 часа? Программа запрашивает число (время) как часто нужно парсить сайт, и после этого она каждые (например юзер ввёл 3) 3 часа парсит этот сайт. Но чтобы она не останалвивалась, работала 24/7. Вот есть код, немного глупый, но он с фиксированным временем.

while True:
    if datetime.datetime.now().time().hour == 3 or 
    datetime.datetime.now().time().hour == 6 or 
    datetime.datetime.now().time().hour == 9 or 
    datetime.datetime.now().time().hour == 12 or 
    datetime.datetime.now().time().hour == 15 or 
    datetime.datetime.now().time().hour == 18 or 
    datetime.datetime.now().time().hour == 21 or 
    datetime.datetime.now().time().hour == 24:
        main()
    else:
        pass
    time.sleep(3600)

Подскажите, как такое осуществить? Заранее большое спасибо!

5
  • Запихните лучше параметр в Json файл конфигурационный. И там задавайте параметр. Это будет удобней. Если нужно будет перезвпускать комп. И парсер автоматически стартовать при загрузке. Без глупых вопросов каждый раз спрашивать пользователя,
    – Manul74
    Commented 19 мая 2020 в 11:17
  • прога будет на хостинге, админ захочет просто поменять время, поставить 2 (2 часа), иногда 3. Спасибо, но такой вариант не подходит
    – Илья
    Commented 19 мая 2020 в 11:18
  • а вот sheduler действительно здесь нужный вариант
    – Илья
    Commented 19 мая 2020 в 11:21
  • Почему не подходит? как раз именно так и подходит. Менять в конфигурационном файле. Или админ будет перезапускать сервер каждый раз отвечать вашей программе время парсинга? 1 раз прописывается в конфигурационном файле и все.
    – Manul74
    Commented 19 мая 2020 в 11:22
  • если Решение в shedullere то это уже не вопрос python
    – Manul74
    Commented 19 мая 2020 в 11:25

1 ответ 1

2

Для таких целей вроде есть модуль schedule

Простой пример:

import datetime

import schedule

i = 1


def job():
    global i
    print(f"Запустился {i} раз")
    i += 1
    print(datetime.datetime.now())


schedule.every(5).seconds.do(job)

while True:
    schedule.run_pending()

Вывод:

Запустился 1 раз
2019-11-01 12:18:27.172611
Запустился 2 раз
2019-11-01 12:18:32.173117
Запустился 3 раз
2019-11-01 12:18:37.173148

Модуль можно настраивать достаточно гибко:

schedule.every(10).minutes.do(job)
#каждые 10 минут

schedule.every().hour.do(job)
# каждый час

schedule.every().day.at("10:30").do(job)
# каждый день в 10-30

schedule.every().monday.do(job)
# каждый понедельник

schedule.every(2).wednesday.at("13:15").do(job)
# Каждую вторую среду в 13-15

schedule.every().minute.at(":17").do(job)
# каждую минуту в 17 секунду

Кроме того, можно передавать параметры в ту функцию, которую мы хотим вызывать:

import schedule

i = 0


def greet(name):
    global i
    print('Hello', name)
    i += 1
    if i == 5:
        return schedule.CancelJob # Отменяем задачу после 5 запуска


schedule.every(1).to(3).seconds.do(greet, name='Yandex')
# Запускаем задачу в случайное время время от 1 до 3 секунд

while True:
    schedule.run_pending()
2
  • Это решило задачу, спасибо!
    – Илья
    Commented 19 мая 2020 в 11:30
  • 1
    Даже при использовании шедуллера из питона, конфигурировать настройки шедуллинга удобно будет через json файл.
    – Manul74
    Commented 19 мая 2020 в 11:32

Ваш ответ

Нажимая «Отправить ответ», вы соглашаетесь с условиями пользования и подтверждаете, что прочитали политику конфиденциальности.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.