Le feedback utilisateur porte un signal unique que les LLM ne savent pas détecter

Les auteurs contestent l'idée que le feedback utilisateur soit trop bruité pour être exploité par les LLM. À l'aide de données synthétiques à vérité terrain et de données naturalistes, ils montrent que les révisions informées par le feedback corrigent significativement plus de problèmes ciblés que les révisions de référence. Le biais d'évaluation vient des juges LLM, qui échouent souvent à identifier la réponse réellement corrigée et préfèrent des sorties inférieures.