Ваш cron пропустит запуск: как планировать автоматизации, которые переживут реальную жизнь
Cron запускает задачу и сразу о ней забывает. Рассказываю, как я планирую парсеры, AI-дайджесты и ботов через слоты: правила догона, правила наложения, переход на летнее время и алерты на тишину.
Pavel Duglas
AI Automation & MVP Architect
Однажды клиент спросил меня, почему отчет по ценам конкурентов четыре дня показывает одни и те же цифры. С парсером все было в порядке, с прокси тоже. Просто провайдер устроил плановые работы, сервер перезагрузился в 02:58, и запуск по cron в 03:00 не случился. Cron ничего не помнит и ни о чем не жалеет. Он молча ждет следующих 03:00 и делает вид, что все хорошо.
Большинство автоматизаций, которые я собираю, работают по расписанию: ночной парсинг, утренние AI-дайджесты, ежечасное обогащение лидов, еженедельная сверка платежей. На слой планирования обычно тратят меньше всего времени, и при этом он чаще всего ломается без единого звука. Ниже паттерн, который я теперь использую по умолчанию. Встроить его в существующий проект можно за день.
Почему расписание ломается молча
Крах процесса далеко не единственный способ сломать расписание. Вот что я ловил в проде лично:
- Сервер лежал в момент запуска. Перезагрузка, деплой, контейнер в цикле рестартов. У классического cron нет догона, запуск просто пропадает.
- Хостинговый планировщик опоздал или пропустил запуск. Встроенный cron в CI и на serverless-платформах обычно работает по принципу best effort. Под нагрузкой он срабатывает с опозданием на минуты или часы, а некоторые платформы вообще отключают расписания в репозиториях без свежих коммитов.
- Предыдущий запуск еще не закончился. Ежечасный парсер в плохой день работает 70 минут. В итоге два экземпляра дерутся за один пул прокси и одни и те же строки в базе.
- Переход на летнее время. Задача на 02:30 по местному времени одну ночь в году не существует, а в другую ночь срабатывает дважды.
- Все стартует в полночь. Десять задач запускаются в 00:00, все идут к одному LLM-провайдеру, ловят rate limit, половина падает.
- Запуск был, но толку ноль. Утренний дайджест после шторма ретраев сгенерировался в 15:00. Формально успех, по факту мусор.
Ничего из этого не появится в логах как ошибка, потому что ошибки не было. Просто что-то не произошло, а отсутствие события мониторить сложнее всего.
Главный сдвиг: планируем слоты, а не запуски
Cron мыслит запусками: в этот момент выполни эту команду. Я мыслю слотами: на каждое логическое время, когда задача должна была выполниться, в базе есть строка, и у этой строки есть статус.
Минимальная таблица выглядит так:
create table scheduled_runs (
job_name text not null,
slot_at timestamptz not null,
status text not null default 'pending',
attempts int not null default 0,
lease_until timestamptz,
started_at timestamptz,
finished_at timestamptz,
error text,
primary key (job_name, slot_at)
);
Дальше работают два отдельных процесса с разными обязанностями:
- Тикер просыпается раз в минуту (или когда его дернули), смотрит на расписание каждой задачи, вычисляет, какие слоты должны существовать к текущему моменту, и вставляет недостающие. Благодаря первичному ключу повторная вставка того же слота ничего не делает.
- Воркеры забирают слоты в статусе pending, выполняют их и записывают результат.
Ключевой момент: тикер вычисляет слоты из расписания и текущего времени, а не из того, был ли он жив в нужную секунду. Если сервер лежал с 02:58 до 03:40, тикер проснется в 03:41, увидит, что слота на 03:00 нет, и создаст его. Запуск опоздает, но не потеряется.
Слот и есть идентичность запуска
Время слота становится ключом идемпотентности для всего запуска. Ночной парсинг для слота 2026-03-14 03:00 UTC пишет результаты с пометкой этого слота. Если воркер упал на середине и задачу подхватил другой, он перезапишет результат того же слота, а не создаст вторую пачку данных. Если ваш пайплайн уже идемпотентный, слот как раз тот естественный ключ, на который его стоит повесить.
Захват без двойных запусков
Воркеры забирают слот с арендой (lease) и блокировкой строки, чтобы два воркера никогда не схватили одно и то же:
update scheduled_runs
set status = 'running', attempts = attempts + 1,
lease_until = now() + interval '10 minutes', started_at = now()
where (job_name, slot_at) in (
select job_name, slot_at from scheduled_runs
where status = 'pending'
or (status = 'running' and lease_until < now())
order by slot_at
limit 1
for update skip locked
)
returning job_name, slot_at;
Пока воркер работает, он продлевает lease_until через heartbeat. Если воркер умер, аренда истекает, и слот снова можно забрать. Никаких вечно висящих строк в статусе running.
Политику догона выбираем для каждой задачи
Когда вы умеете видеть пропущенные слоты, надо решить, что с ними делать. Универсального ответа нет, поэтому я делаю это явным полем в описании каждой задачи:
- run_all - выполняются все пропущенные слоты, от старых к новым. Это для сверки платежей, ежедневных выгрузок в бухгалтерию, всего, где пропуск означает дыру в данных.
- latest_only - если пропущено несколько слотов, выполняется только самый свежий, остальные помечаются как skipped. Идеально для ценовых парсеров и проверок статуса. Три устаревших снимка за прошедшие часы никому не нужны.
- skip - пропустили и пропустили. Редкий случай, но подходит, например, для бота, который в 09:00 пишет в рабочий чат мотивирующую фразу.
Значение по умолчанию очень важно. У меня это latest_only, потому что run_all на задаче, которая неделю не работала, может разом выпустить 168 ежечасных парсингов и за двадцать минут сжечь прокси и бюджет на LLM.
И политику наложения тоже
Второе явное поле: что делать, если подошло время нового слота, а предыдущий еще выполняется?
- forbid - новый слот ждет, пока закончится старый. Безопасный вариант по умолчанию для парсеров с общим пулом сессий или одним профилем браузера.
- parallel - нормально для stateless-задач, например обогащения независимых пачек лидов.
- replace - отменить старый запуск и начать новый. Только там, где свежесть важнее полноты, и только если задача реально умеет корректно отменяться.
С таблицей слотов forbid превращается в одну строку в запросе захвата: не забирать слот задачи, у которой уже есть живая аренда.
Часовые пояса и летнее время
Бизнес думает в местном времени: «присылай дайджест в 08:00 по Москве» или «выгрузка зарплаты в 18:00 по Берлину». Расписание храните в часовом поясе бизнеса, а слоты вычисляйте и храните в UTC.
Но при переходе на зимнее время 02:30 по местному случается дважды, и это два разных момента в UTC, поэтому нужно правило. Мое простое: при переводе местного времени в UTC берем первое вхождение. Если 02:30 вообще не существует (переход на летнее), сдвигаемся на следующую валидную минуту. Запишите это правило в коде комментарием, иначе следующий разработчик обязательно его «починит».
Да, Москва живет без перевода часов, но клиенты в Европе, США или Израиле вполне себе с ним. И не ставьте критичные задачи между 01:00 и 03:00 по местному времени в зонах с DST. Перенесите их на 04:00, и проблема в основном исчезнет.
Jitter до того, как упретесь в rate limit
Если каждая задача описана как «каждый час в 00 минут», все они стартуют в одну секунду. Для AI-автоматизаций это rate limit, который вы устроили себе сами. Я добавляю детерминированный jitter: беру хэш имени задачи, превращаю его в число секунд в окне, скажем, от 0 до 300, и прибавляю к каждому слоту. Детерминированность принципиальна, потому что время слота должно быть стабильным ради идемпотентности. Случайный jitter на каждом тике давал бы разные ключи слотов.
Дедлайны: опоздать бывает хуже, чем не прийти
Это особенно актуально для автоматизаций, у которых результат быстро портится, а это почти вся AI-работа. Утренняя сводка после обеда превращается в шум. Алерт о снижении цены у конкурента бесполезен, если они уже вернули цену обратно.
У каждой задачи есть max_lateness. Если воркер забирает слот и видит, что now() > slot_at + max_lateness, он помечает слот как expired и не выполняет его. Это отдельный статус, не failed и не skipped, и он попадает в отчеты. Expired говорит о том, что ваша инфраструктура не вытягивает обещанные сроки. Это совсем другая информация, чем «LLM вернула ерунду».
Для LLM-задач я еще ставлю лимит стоимости на слот. Если цикл ретраев на одном слоте пробивает лимит, слот падает окончательно. Один кривой слот не должен съесть месячный бюджет.
Мониторьте тишину, а не только ошибки
Алерты на ошибки не поймают запуск, который вообще не начался. Нужен dead man’s switch: алерт, который срабатывает, когда хорошее событие не случилось.
С таблицей слотов это один запрос в отдельном процессе, в идеале на другой инфраструктуре, чем планировщик:
- Для каждой задачи находим последний слот в статусе done.
- Если он старше, чем интервал задачи плюс max_lateness, шлем алерт.
- Также алертим, если какой-то слот висит в pending дольше своего max_lateness. Это значит, что тикер жив, а воркеры умерли.
Если сам мониторинг тоже может упасть, пусть он пингует внешний heartbeat-сервис. Тогда единственный способ не получить алерт - это когда все действительно работает.
Хостинговый cron как дверной звонок, а не планировщик
Свой постоянно работающий тикер держать не обязательно. На serverless я использую встроенный cron платформы только чтобы дернуть эндпоинт с логикой тикера. Тикер читает расписания, вычисляет недостающие слоты по базе и ставит их в очередь.
Так ненадежный планировщик становится вполне приемлемым. Если платформа позвонила в дверь на 40 минут позже, тикер все равно точно видит, какие слоты пора выполнить. Если звонок пропущен совсем, следующий все догонит. Источник правды здесь ваша база и часы, а не добрая воля платформы.
Чек-лист, который я применяю к каждой задаче по расписанию
- Слоты хранятся строками с уникальным ключом из имени задачи и времени слота в UTC.
- Тикер вычисляет недостающие слоты из расписания, а не из собственного аптайма.
- Воркеры забирают слоты с арендой и heartbeat через skip locked.
- У каждой задачи задана политика догона, политика наложения, max_lateness и лимит стоимости.
- Расписание в местном времени бизнеса, слоты в UTC, правило для DST записано.
- Детерминированный jitter уводит нагрузку с начала часа.
- Отдельный мониторинг алертит на тишину, а не только на ошибки.
Это примерно 300 строк кода. Они спасли меня от большего числа гневных сообщений клиентов, чем любой апгрейд модели.
Вопросы и ответы
Можно ли просто добавить ретраи в cron и не городить таблицу слотов?
Ретраи помогают, только когда запуск начался и упал. Если сервер лежал в момент срабатывания, повторять нечего: cron даже не попытался. Таблица слотов решает именно эту проблему, потому что ожидаемые запуски вычисляются из расписания и текущего времени и не зависят от того, был ли процесс жив в нужную секунду.
Подойдет ли этот паттерн для BAS-скриптов и Telegram-ботов без Postgres?
Да. Таблицу можно держать в SQLite, MySQL или даже в Redis с атомарными операциями. Важны три вещи: уникальный ключ из имени задачи и времени слота, атомарный захват с арендой и отдельный мониторинг тишины. BAS-скрипт или бот просто выступает воркером, который забирает слот, делает работу и отмечает результат.
Какую политику догона ставить, если не уверен?
latest_only. Она безопасна для бюджета и прокси: после долгого простоя выполнится один свежий запуск, а не сотня устаревших. run_all включайте осознанно, только для задач, где пропуск дает дыру в данных, например для сверки платежей или выгрузок в бухгалтерию, и желательно с ограничением на число слотов, которые можно догонять за раз.
Похожие статьи
Сделаю под ключ
Соберу ИИ-агента под реальную задачу
С инструментами, памятью и логами, чтобы он работал в проде, а не только в демо.
от 70 000 ₽ · 1-2 недели