OUTILS · NVIDIA
ModelExpress : distribution ultra-rapide des artefacts de modèles
NVIDIA optimise le transfert des checkpoints massifs pour réduire la latence et les coûts réseau dans les clusters.
NVIDIA présente ModelExpress pour accélérer la distribution des poids de modèles, désormais massifs. Cette solution réduit les coûts et la latence lors des démarrages à froid, de l'autoscaling et des mises à jour rolling.