OrbitQuant : quantification sans données pour les diffusion transformers image et vidéo

Les diffusion transformers (DiTs) souffrent d'un coût d'inférence élevé, et les méthodes de quantification post-entraînement (PTQ) existantes nécessitent une recalibration à chaque nouveau checkpoint. OrbitQuant contourne ce problème en quantifiant dans une base normalisée et pivotée via une rotation RPBH (randomized permuted block-Hadamard), rendant la distribution des activations indépendante des entrées. Un seul codebook Lloyd-Max couvre tous les timesteps, prompts et couches, sans réglage par modalité, et les résultats sont à l'état de l'art sur plusieurs modèles image et vidéo.