MedPMC : un cadre pour constituer des données médicales multimodales haute fidélité

MedPMC est un framework automatisé et continuellement mis à jour qui transforme la littérature scientifique sous licence permissive en données multimodales haute fidélité pour les modèles médicaux. Appliqué à 6,1 millions d'articles PMC, il a produit 11 millions de paires image-texte avec des scores de pertinence médicale de 95,3 % contre 19,7 % pour un dataset PMC antérieur. Un modèle CLIP entraîné sur MedPMC améliore l'AUC zero-shot de 7,1 points sur 26 benchmarks couvrant 11 spécialités médicales.