Nous pensions que l’Elo par surface serait meilleur. Il est moins bon.
Le tennis est trois sports, tout le monde le dit. Un classement calculé surface par surface devrait donc mieux désigner le vainqueur qu’un classement global. Nous l’avons mesuré, et le résultat va dans l’autre sens.
Ce que nous attendions
Un Elo restreint à la terre battue ne voit que des matchs sur terre battue. Il devrait donc placer les spécialistes à leur vraie valeur, là où un classement général les dilue dans une saison qui se joue majoritairement sur dur. L’intuition est solide, et elle est fausse.
La mesure
Chaque match est prédit avant d’être appris, sur trois saisons complètes. Évaluer un classement sur les matchs qui l’ont construit donnerait un score flatteur et sans valeur.
| Méthode | Matchs | Vainqueur bien désigné | Perte logarithmique |
|---|---|---|---|
| Elo général | 6 979 | 63,0 % | 0,6428 |
| Elo par surface seule | 5 659 | 62,4 % | 0,6462 |
| Elo mixte | 6 979 | 63,4 % | 0,6390 |
Pourquoi le spécialisé perd
Une échelle par surface voit environ trois fois moins de matchs. Ce qu’elle gagne en spécialisation, elle le perd en précision d’estimation : ses cotes reposent sur trop peu d’observations pour être fiables. Le gain théorique existe, il est simplement plus petit que le coût.
Ce que nous avons fait de ce résultat
Nous n’avons pas jeté l’idée, nous l’avons corrigée. Le classement publié part de l’échelle générale et glisse vers celle de la surface à mesure qu’un joueur y accumule des matchs. Ce mélange fait mieux que les deux méthodes prises séparément.
Un test automatique grave désormais le constat de départ, pour que personne ne réintroduise l’échelle spécialisée seule par intuition dans six mois.
Et pour être complet
Notre modèle point par point, celui qui sert aux prévisions de match, fait encore mieux sur la perte logarithmique : 0,6317. L’Elo n’est pas notre meilleur outil de prévision, c’est un classement lisible qui répond à une question que les gens posent. Les deux ne servent pas à la même chose, et nous n’allons pas prétendre le contraire.
Voir le classement Elo, avec le détail de ce qu’il sait et ne sait pas faire.