Des modèles de langage qui jouent aux échecs et expliquent leurs coups

Les chercheurs présentent Queen, un modèle hybride encodeur-décodeur associant un moteur d'échecs expert à un LM instruction-tuned via cross-attention. Un algorithme de distillation itératif, inspiré d'une mise à jour de Bellman en langage naturel, lui permet de gagner plus de 900 points Elo en sept itérations (1782 à 2697). Malgré un nombre de paramètres mille fois inférieur aux modèles frontier, Queen les surpasse en force de jeu et en précision aux puzzles, tout en produisant des explications fluides et cohérentes.