RECHERCHE
SemMSA : une approche sémantique latente pour l'analyse de sentiment multimodale avec données incomplètes
Un nouveau framework combine LLM et alignement spectral pour inférer le sentiment humain malgré des modalités manquantes ou bruitées.
arXiv cs.AI · cs.LG · cs.CL·Wenhao Li, Zhibin Wu, Chong Xiao, Qiangchang Wang·24 septembre 2026
SemMSA exploite des LLM pour construire une sémantique riche liée au sentiment, intégrée à toutes les modalités via un alignement spectral sans ancrage prédéfini. Le framework combine un raffinement sémantique cross-modal (CSR) et un alignement spectral cross-modal (CSA) pour capturer les dépendances globales non linéaires entre représentations, tout en préservant la discrimination entre échantillons.