VLoc Bench : évaluer la localisation de vulnérabilités par des agents à l'échelle d'un dépôt

VLoc Bench évalue 27 modèles de langage et quatre outils d'analyse statique sur leur capacité à localiser des vulnérabilités connues dans des dépôts logiciels réels, avant et après correction. Le meilleur système n'atteint que 0,229 en File F1, et 38,4% des tâches ne sont résolues correctement par aucun modèle. Les auteurs montrent aussi qu'une bonne localisation avant patch n'implique pas un comportement fiable après remédiation.