Проект 02 · Регрессионные тесты
Сравнение VCF с эталоном: TP/FP/FN, F1, порог и падение сборки при просадке
01Сводка
Что показывает прогон набора кейсов.
67%кейсов прошли3 кейса
0.95порог F1ниже — сборка падает
0.909худший F1кейс с просадкой
0continue в кодеправило стиля
02Кейсы
Сравнение по вариантам: TP, FP, FN и итоговый F1.
| кейс | TP | FP | FN | precision | recall | F1 | sha256 |
|---|---|---|---|---|---|---|---|
| case_a_ideal | 12 | 0 | 0 | 1.00 | 1.00 | 1.000 | c0b5823b54e4 |
| case_b_regression | 10 | 0 | 2 | 1.00 | 0.83 | 0.909 | 480c3af3cd5f |
| case_c_extra | 12 | 1 | 0 | 0.92 | 1.00 | 0.960 | 27b0bfde33f1 |
03Порог
F1 по кейсам на фоне порога: всё, что ниже, валит сборку.
04История версий
Как менялась доля пройденных кейсов от версии к версии.
05Вывод прогона
Тот же вывод печатает CI-джоба.
$ python src/regression.pyкейсов: 3прошли: 2статус: regression detected