Contamination des données

Quand des questions ou réponses d'un benchmark figurent dans les données d'entraînement, gonflant le score. La contamination fait paraître un modèle meilleur au test qu'à la compétence mesurée. Les benchmarks récents et régulièrement renouvelés sont plus difficiles à contaminer.