#reliability_diagram — Public Fediverse posts

predict_proba выдаёт 0.9 — но это не вероятность 90%

В ML легко перепутать аккуратное число с честной вероятностью: модель выдаёт predict_proba = 0.9 , и кажется, что событие произойдёт в 90% случаев. Но это не всегда так. В статье разбираем, почему выход модели может быть просто внутренней оценкой уверенности, чем калибровка отличается от AUC, как увидеть смещение через reliability diagram и Brier score — и когда вероятности нужно обязательно калибровать, прежде чем использовать их в бизнес‑решениях.

https://habr.com/ru/companies/otus/articles/1036882/

#машинное_обучение #predict_proba #калибровка_вероятностей #вероятности_в_ML #AUC #Brier_score #классификация #CalibratedClassifierCV #reliability_diagram #интерпретация_модели