Une fiabilité sans commune mesure
Les physiciens et les théoriciens des sciences utilisent le terme “incommensurable” pour des paradigmes ne pouvant pas être comparés. Littéralement, ils n’ont pas de commune mesure. Les jugements émis lors des concours de vins appartiendraient-ils à cette catégorie ?
Les compétitions sont censées évaluer la qualité des vins et attribuer des récompenses en fonction des mérites. Quand on parle d’évaluation d’un vin, on voudrait que celle-ci ne soit pas le résultat contingent d’une dégustation à un moment donné, en un lieu donné, par un dégustateur donné. L’expertise doit être commensurable, les juges des concours reçoivent à ce titre des fiches de dégustation pour chacun des vins soumis à leur appréciation.
ÊTREOUNEPASÊTRECOHÉRENT?
Si le système était parfait, un expert évaluant un vin devrait lui attribuer toujours la même note, quelle que soit la situation. On peut bien sûr accepter des petites variations, mais pas des changements trop importants. L’expert doit être cohérent avec lui-même. Ce critère se nomme la cohérence intra-juge ou intra-expert.
Vigneron à ses heures perdues et professeur émérite de la Humboldt State University en Californie, Robert Hodgson a analysé les résultats de quatre éditions de la California State Fair Wine Competition. Lors de ces éditions, il a “truqué” les séries (30 vins dégustés) en présentant à 64 juges trois fois le même vin issu de la même bouteille.
Résultat : les juges n’ont été cohérents que dans 18 % des cas, attribuant à l’un des échantillons “pirates” tantôt une médaille d’or, tantôt une médaille de bronze, voire aucune médaille. Les cas de cohérence, eux, ont été relevés sur des vins n’ayant, pour la plupart, obtenu aucune distinction.
Dans un monde rationnel, ce genre de révélations choquerait. Mais la magie du vin consiste à garder le sourire en toutes circonstances même devant certaines incohérences. C’est là l’un des mystères impénétrables de l’oenologie. Et que celui qui n’a jamais acheté une bouteille auréolée d’une médaille me jette la première bière.