Combien vaut un token d'IA ? Lois d'échelle pour le texte web généré par IA en conditions réelles

Les auteurs montrent que 27,5% à 31,1% des tokens web récents sont générés par IA (hors synthétique contrôlé). En faisant varier le ratio texte IA/humain sur 800 modèles pré-entraînés, ils constatent un effet bénéfique initial qui s'inverse en nuisance, un phénomène que les lois d'échelle classiques (Chinchilla) ne capturent pas. Ils proposent une nouvelle loi d'échelle avec termes de bénéfice et de nuisance séparés, plus précise de 41% pour prédire cet effet sur des modèles plus grands.