← Назад к блогу

Практика системного анализа · 5 минут

Открытых заявок стало больше: как сверить остаток с событиями

Сверьте открытые заявки с потоком событий: начальный остаток, новые, повторно открытые, закрытые и удалённые записи, повторы и точная граница дня.

Аналитическая мастерскаяRead this article in English

Отчёт показывает 23 открытые заявки к концу дня, а выгрузка содержит только пять новых. Эти числа могут одновременно быть правильными. Новые заявки описывают поток событий, открытые заявки на дату описывают состояние. Задача аналитика состоит в том, чтобы связать их понятным балансом.

Числа в примере вымышлены. Вопрос сформулирован для учебной сверки, не получен от реального пользователя. Рассматривается одна очередь за 19 ноября UTC. Состояние на начало дня: 20 открытых заявок. За день открыли 5 новых, повторно открыли 2 ранее закрытые, закрыли 3 открытые и удалили 1 открытую заявку. Переносов между очередями не было.

Считать переходы, которые меняют остаток

Согласованный остаток включает существующие заявки со статусом open. Новая и повторно открытая заявка увеличивают его на единицу. Закрытие и удаление открытой уменьшают. Повтор доставки уже принятого события не является новым переходом.

Компонент балансаВкладОткрытых после шага
Начальный остаток2020
Новые+525
Повторно открытые+227
Закрытые−324
Удалённые из открытых−123

Время событий задано с точностью до секунды. В дневное окно входят события с 19 ноября 00:00:00 UTC включительно до 20 ноября 00:00:00 UTC, не включая верхнюю границу. Конечный остаток берётся непосредственно перед этой границей, до событий следующего дня. Иначе два отчёта могут иметь одну метку даты, но считать разные состояния.

Удаление уже закрытой заявки не уменьшает число открытых. Повтор события закрытия той же версии тоже не уменьшает его второй раз. Чтобы проверить это, добавьте повтор закрытия с тем же event_id и закрытую удалённую заявку: ожидаемый итог остаётся 23. Это проверка фактических переходов, а не числа служебных записей.

Как проверить расчёт, предложенный LLM

Дайте модели начальный снимок, перечень событий с идентификаторами и состояниями до и после, а также определение дневной границы. Попросите вернуть баланс и список событий с нулевым вкладом. Отдельно потребуйте вывести итог двумя способами: применением переходов к снимку и суммой вкладов.

Если LLM использовала число строк журнала вместо числа принятых переходов, два расчёта разойдутся на повторе. Если она забыла повторное открытие, получится 21 вместо 23. Оба дефекта можно показать одним конкретным набором входов, без рассуждений о «неправильной статистике» вообще.

Проверяющий сохраняет идентификаторы учтённых переходов и отклонённых повторов. Владелец процесса подтверждает, входит ли удалённая запись в показатель и как считать переносы между очередями. Здесь проверено только удаление из open и отсутствие переносов. Запоздавшие события и пересчёт прошлого дня требуют отдельной политики.

Различие потока и состояния дополняет определение состава метрики. Для повторно доставленных сообщений пригодна сверка цепочки событий, но сам баланс нужно считать по изменению состояния заявки.

Вопросы о балансе заявок

Почему пять новых заявок не равны конечному остатку?

Остаток включает начальные 20 и изменения: 20 + 5 + 2 − 3 − 1 = 23.

Уменьшает ли повтор закрытия остаток ещё раз?

Нет. Повтор того же event_id не создаёт нового перехода.

Что даёт удаление уже закрытой заявки?

Нулевой вклад в число открытых заявок по согласованному определению.

Входит ли событие ровно в полночь 20 ноября?

Нет. Это нижняя граница следующего дня, а не часть окна 19 ноября.

Проверена ли обработка опоздавших событий?

Нет. Правило пересчёта прошлых остатков должно быть задано отдельно.

Автор: Иннокентий Бодров, автор Аналитической мастерской.