Калибровка модели

Калибровка показывает, насколько заявленная уверенность модели соответствует реальной точности. Идеально откалиброванная модель с confidence 70% должна быть верна в 70% случаев.

Бакет confidenceПрогнозовВерныхОжидаемаяРеальнаяОтклонение
0-30%37129%7.8%NaN%
30-40%24699%40.2%NaN%
40-50%267144%53.9%NaN%
50-60%301144%47.8%NaN%
60-70%17185%49.7%NaN%
70-80%10660%56.6%NaN%
80-100%455370%81.3%NaN%

Визуализация

0-30%7.8% факт / % ожид.
30-40%40.2% факт / % ожид.
40-50%53.9% факт / % ожид.
50-60%47.8% факт / % ожид.
60-70%49.7% факт / % ожид.
70-80%56.6% факт / % ожид.
80-100%81.3% факт / % ожид.

Пунктир — ожидаемая точность. Полоса — реальная. Зелёный = модель недооценивает, жёлтый = переоценивает.

Важно: Калибровка — статистический показатель на исторических данных. Прошлые результаты не гарантируют будущих. 18+.