Paysages de perte bénins coexistent avec la complexité au pire

Une étude sur les Tree Tensor Networks (TTNs) démontre que leur paysage de perte peut être localement optimal tout en contenant des targets impossibles à apprendre par gradient descent. La difficulté d'apprentissage provient de points sel dégénérés causés par un déficit de rang, et non de mauvais minima locaux.