Калибровка модели

Калибровка показывает, насколько заявленная уверенность модели соответствует реальной точности. Идеально откалиброванная модель с confidence 70% должна быть верна в 70% случаев.

Бакет confidenceПрогнозовВерныхОжидаемаяРеальнаяОтклонение
0-30%42334%8%NaN%
30-40%260101%38.8%NaN%
40-50%291156%53.6%NaN%
50-60%353169%47.9%NaN%
60-70%19495%49%NaN%
70-80%13377%57.9%NaN%
80-100%499388%77.8%NaN%

Визуализация

0-30%8% факт / % ожид.
30-40%38.8% факт / % ожид.
40-50%53.6% факт / % ожид.
50-60%47.9% факт / % ожид.
60-70%49% факт / % ожид.
70-80%57.9% факт / % ожид.
80-100%77.8% факт / % ожид.

Пунктир — ожидаемая точность. Полоса — реальная. Зелёный = модель недооценивает, жёлтый = переоценивает.

Важно: Калибровка — статистический показатель на исторических данных. Прошлые результаты не гарантируют будущих. 18+.