Au-delà du leaderboard : leçons de conception pour un VQA multimodal fiable en santé

À partir du cas MediaEval Medico 2025, l'étude compare neuf systèmes de question-réponse visuelle appliqués à l'endoscopie gastro-intestinale. L'adaptation paramétrique efficace de backbones pré-entraînés améliore les scores, mais sans garantir un raisonnement clinique fidèle et complet. Les méthodes imposant un raisonnement structuré et un ancrage explicite se montrent plus fiables, même si les preuves restent corrélationnelles. Les auteurs plaident pour des évaluations dépassant le simple recouvrement lexical et pour une gouvernance des données plus rigoureuse.