Hindcast : évaluer les LLM prévisionnistes en rejouant les marchés de prédiction sans fuite de données

Les backtests classiques de LLM forecasters souffrent de deux fuites : la récupération de rapports post-événement et l'entraînement sur des données proches de la date cible. Hindcast fige un instantané public de Reddit et rejoue des marchés Polymarket résolus en limitant le modèle aux contenus antérieurs à une date de coupure choisie. Les prévisions sont comparées à la fois au résultat réel et au prix du marché à cette date. La récupération d'information reste utile, mais seulement quand la discussion existait déjà avant l'échéance.