Les comparaisons multiples apparaissent quand on teste plusieurs hypothèses, variantes ou métriques à la fois. À seuil alpha fixé, la probabilité d'obtenir au moins un faux positif augmente avec leur nombre. On la contrôle par une correction, comme celle de Bonferroni, ou en limitant les tests à ceux décidés à l'avance.
Exemple
Avec 20 tests à alpha = 0,05, on s'attend à environ un faux positif même sans aucun effet réel.