Archives
Rétro-prédictions point-in-time du modèle stat-v1.13 sur 22 éditions (CDM, Euro, Copa América, Coupe des Confédérations) — le modèle est ajusté uniquement sur les matchs antérieurs au coup d'envoi de chaque édition, sans aucune fuite des résultats. Les éditions sont classées ENTRAÎNEMENT (sur lesquelles le stack de features a été calibré) ou TEST (vraie généralisation hors-échantillon).
Coupes du Monde — archives riches (stack complet + simulation)
Log loss moyen — ENTRAÎNEMENT vs TEST (capacité de généralisation)
ENTRAÎNEMENT
2 éd. 128 matchs
1.0076
53.9% d'issues correctes
15.6% de scores exacts
TEST
20 éd. 708 matchs
0.9653
54.7% d'issues correctes
14.4% de scores exacts
Un log loss TEST proche du log loss ENTRAÎNEMENT indique une bonne généralisation.
Un écart important (train << test) serait le signe d'un sur-apprentissage sur les CDM 2018/2022.
Nuance : le coefficient de recent_form (v1.13) a été sélectionné par CV leave-one-edition-out touchant plusieurs éditions TEST — celles-ci ne sont donc pas un test 100 % pur pour cette seule feature (effet mineur).
Nuance : le coefficient de recent_form (v1.13) a été sélectionné par CV leave-one-edition-out touchant plusieurs éditions TEST — celles-ci ne sont donc pas un test 100 % pur pour cette seule feature (effet mineur).
Coupe du Monde FIFA
— 5 éd., 320 matchs,
LL moyen 0.9790,
55.6% d'issues ok, 16.3% scores exacts
Championnat d'Europe UEFA
— 6 éd., 246 matchs,
LL moyen 1.0085,
50.8% d'issues ok, 15.0% scores exacts
Copa América
— 8 éd., 222 matchs,
LL moyen 0.9625,
53.6% d'issues ok, 13.5% scores exacts
Coupe des Confédérations
— 3 éd., 48 matchs,
LL moyen 0.7790,
70.9% d'issues ok, 6.2% scores exacts
Lecture honnête.
Les CDM 2018 et 2022 (badge rouge ENTRAÎNEMENT) ont servi à calibrer
les hyperparamètres et à sélectionner les features du modèle :
leurs métriques sont sincères mais probablement un peu optimistes.
Les 20 autres éditions (badge vert TEST) sont hors-échantillon.
Le log loss TEST ≈ log loss ENTRAÎNEMENT confirme que le modèle généralise
correctement sans sur-apprentissage visible sur 2018/2022.
Pour les éditions avec le badge +valeur,
le modèle inclut en plus les données de valeur d'effectif
(market value Transfermarkt d'époque, E20) et d'âge d'effectif (E2).