TRACE : attribution de récompense au niveau des tours pour agents à long horizon

TRACE propose une méthode d'attribution dense de récompense pour l'entraînement RL d'agents multi-tours utilisant des outils. Elle dérive des récompenses par action à partir de variations temporelles de log-probabilités issues d'un modèle de référence gelé, sans critique ni labels de processus supplémentaires. Sur le benchmark BrowseComp-Plus, elle fait passer Qwen3-4B de 7,2 à 35,6 et Qwen3-30B-A3B de 8,4 à 42,6.