Image · Source originale
RECHERCHE
Exploration de l'espace des experts en RL MoE
ESRL est un nouveau cadre qui optimise l'exploration des modèles MoE via le routage stochastique.
arXiv cs.AI · cs.LG · cs.CL·Hongyi He, Zhenghao Lin, Xiao Liu, Peng Cheng·11 septembre 2026
Ce papier introduit ESRL, un framework pour l'apprentissage par renforcement sur les modèles Mixture-of-Experts (MoE). En perturbant sélectivement le routage des experts tout en préservant les chemins à haute confiance, ESRL améliore la diversité des rollouts et la performance sur diverses architectures de routage.
Chaleur 0
Pertinence 65
Nouveauté 75