Toutes les news taguées avec ce sujet.
Hugging Face publie la v1 de sa lib tokenizers avec des benchmarks de vitesse et de scalabilité pour l'encode et le decode.