Apprendre la réflexion native dans les modèles unifiés via du RL entrelacé

UMM-Reflection applique du reinforcement learning sur des trajectoires complètes de réflexion au sein d'un modèle unifié, en attribuant un avantage au niveau de la trajectoire qui met à jour à la fois les tokens de réflexion et les révisions d'image. Testée sur BAGEL, la méthode améliore GenEval de 12,05 points par rapport au SFT, avec des gains transférables à WISE, OneIG-Bench et T2I-CompBench++, bien qu'aucun de ces benchmarks ne soit utilisé lors de l'entraînement.