λ-Controlled GRPO : transformer l'instabilité du flow-matching en ressource budgetée

L'alignement des générateurs d'images par RL sur des signaux de récompense souffre d'instabilités spécifiques au débruitage multi-étapes. Cette étude montre que ces instabilités découlent d'une unique quantité par étape, la variance de chemin, déterminée par le noyau de transition gaussien. La méthode λ-Controlled GRPO calibre les ratios d'importance via cette loi prédite et alloue l'effort de gradient selon le coût prévu, sans hyperparamètres libres. Sur des modèles text-to-image, cette approche surpasse les stabilisateurs manuels.