Image · Source originale
RECHERCHE
Des hypernetworks générateurs de LoRA pour personnaliser les LLM embarqués sur mobile
Une méthode combine les avantages du in-context learning et du fine-tuning léger pour personnaliser des LLM directement sur smartphone.
arXiv cs.AI · cs.LG · cs.CL·Sean Augenstein, Li Ding, Jihwan Lee, Keith Rush·21 septembre 2026
Les chercheurs proposent d'entraîner un hypernetwork qui transforme le contexte d'un utilisateur en une adaptation LoRA sur mesure, synthétisée entièrement sur l'appareil. L'approche évite le coût computationnel du fine-tuning classique tout en supprimant l'allongement de séquence propre à l'in-context learning. Elle est particulièrement adaptée aux contraintes de calcul et de latence des appareils mobiles.
Chaleur 0
Pertinence 60
Nouveauté 72