S3Gym : évaluation de l'auto-amélioration des LLM

S3Gym est un benchmark interactif évaluant la capacité des LLM à s'auto-améliorer via trois mécanismes : auto-test, auto-jugement et auto-amélivement. Les expériences sur sept jeux textuels montrent que l'amélioration n'est ni automatique ni uniforme, dépendant fortement de la structure des tâches. L'efficacité varie entre l'utilisation de l'historique brut, de mémoires résumées et de l'entraînement des paramètres.