Проект 06 · Мониторинг

ML Monitor

Дрейф данных и скорингов: PSI и KS на каждом признаке, алерты по порогам и контроль распределения предсказаний uplift-модели.

Метрики PSI, KS-статистика Пороги 0.10 / 0.25 Стек Python, scipy, FastAPI
Максимальный PSI
—
Признаков в алерте
—
PSI скорингов
—
Батчи: эталон / текущий
—

Сдвиг текущего батча

Имитация изменения спроса: множитель к GMV и чеку, сдвиг давности заказа. Двигайте ползунок и смотрите, какие признаки первыми выходят из-под контроля.

×1.6

PSI по признакам

Зелёный < 0.10, жёлтый < 0.25, красный — признак требует вмешательства.

Алерты

Признаки с PSI выше 0.10: повод проверить контракт данных и переобучить модель.

ПризнакPSIKSСтатус

Полная таблица мониторинга

ПризнакPSIKS Среднее эталонСреднее текущийСтатус