La "loterie du FID" : quantifier le hasard caché dans l'évaluation des modèles génératifs

Kyutai publie une étude sur le score FID (Fréchet Inception Distance), métrique de référence pour évaluer la qualité des modèles génératifs d'images. Les chercheurs démontrent que des facteurs aléatoires (seed, initialisation) peuvent influencer significativement le classement des modèles, remettant en question la fiabilité de comparaisons basées sur cette métrique seule.