Jeu de test· Test set

Sous-ensemble de données non utilisé pour l'entraînement, servant à évaluer la performance d'un modèle.

ExempleSur 100 000 transactions, 80 000 servent à l'entraînement, 10 000 à la validation et 10 000 constituent le jeu de test : utilisé une seule fois pour évaluer la performance finale, jamais pendant le développement.

En clairCe sont les cas que le modèle n'a jamais vus, gardés de côté pour mesurer ce qu'il vaut vraiment. La règle est simple et souvent violée : dès qu'on ajuste le système en regardant ces résultats, ils cessent d'être une mesure honnête. Un score annoncé sans dire sur quoi il a été obtenu ne vaut rien.