SemRF : un cadre de référence sémantique pour analyser la dynamique du residual stream dans les LLM

SemRF introduit un cadre de référence sémantique basé sur des ancres fixes permettant de séparer la mesure sémantique de la dynamique du residual stream dans les LLM. Le formalisme garantit des coordonnées stables entre les couches via un couplage pseudo-inverse, évitant la dérive de mesure. Il induit un diagramme de Voronoi sémantique par couche et définit une trajectoire canonique à action minimale, ouvrant la voie à une analyse de la densité locale de connaissance et de la compressibilité des représentations.