Image · Source originale
RECHERCHE
MM-ToolSandBox : évaluation unifiée des agents visuels
Un nouveau benchmark évalue la capacité des agents multimodaux à appeler des outils sur 500+ fonctions.
arXiv cs.AI · cs.LG · cs.CL·Kaixin Ma, Di Feng, Alexander Metz, Jiarui Lu·13 juillet 2026
MM-ToolSandBox est un framework d'évaluation pour les agents multimodaux capables d'appeler des outils. Le benchmark couvre plus de 500 outils sur 16 domaines, avec des tâches multi-images et multi-tours. Les tests sur 12 modèles montrent que même les meilleurs systèmes atteignent moins de 50 % de succès, la précision visuelle constituant le goulot d'étranglement principal.
Chaleur 0
Pertinence 75
Nouveauté 60