RECHERCHE
Taux d'approximation pour réseaux à paramètres latents affines
Une étude établit les bornes théoriques reliant dimension latente et budget pour les réseaux à génération de paramètres.
arXiv cs.AI · cs.LG · cs.CL·Shijun Zhang·31 août 2026
Ce papier analyse le compromis entre la dimension latente M et le budget de paramètres P pour les méthodes générant des réseaux via une représentation latente (hypernetworks, PEFT). En optimisant conjointement architecture et générateur affine pour des fonctions Höldériennes, les auteurs démontrent que l'erreur d'approximation décroît selon l'ordre (P min{M, P})^-α/d, prouvant qu'un espace latent de dimension fixe suffit à obtenir une approximation convergeante.