Une nouvelle méthode par classement pour mesurer la calibration des modèles

Les modèles prédictifs affichent inévitablement des erreurs de calibration, mais la mesure standard (ECE) ne peut être estimée avec précision sans hypothèses fortes. Les auteurs introduisent le rankECE, une mesure fondée sur la comparaison de points aux valeurs de probabilité voisines. Ils démontrent, théoriquement et empiriquement, que cette approche est plus fiable que les approximations par bins couramment utilisées.