Letterpaths : comment les LLM peuvent être utiles même quand ils se trompent

L'auteur analyse un cas de test appelé 'letterpaths' où les LLM échouent souvent, mais montre que ces échecs n'empêchent pas certaines applications pratiques d'être utiles. L'article interroge la manière dont on évalue la fiabilité des modèles selon les tâches et les contextes d'usage.