De temps en temps, un article intéressant apparaît ou une conversation intéressante a lieu qui mérite d'être partagée entre collègues chercheurs. Cette statistique à petites doses décrit une importante prise de conscience pour les scientifiques du Centre européen pour la recherche nucléaire (Genève). Le Centre avait découvert le boson de Higgs ou «particule de Dieu» en 2012, et les premières lectures non confirmées du Grand collisionneur de hadrons du Centre suggéraient qu'un révolutionnaire neufs particule, qui n'était pas explicable par la physique traditionnelle, avait été trouvée. Après 8 mois de travail de confirmation, leurs espoirs ont malheureusement été déçus – la « nouvelle particule intrigante » n'avait été qu'un rot statistique ! [« Les physiciens se sont trompés sur la découverte des particules », section Honolulu Star Advertiser Science, 17 août 2016].
Malgré leur rétractation, le travail des scientifiques était admirable. Ils ont peut-être « vu ce qu'ils espéraient voir » (ce qui les a peut-être amenés à commettre une erreur de type I), donc à leur crédit, ils ont effectué un certain nombre de tests de confirmation. Mais il faut aussi les féliciter d'avoir refusé de se laisser induire en erreur par la (in)fameuse p-value dès le départ. Ne pas faire confiance à la valeur p, quelle que soit la taille de l'échantillon, vaut la peine d'être répété (et répété et …) !
