Les méthodes

Les tests discriminatifs

Les tests discriminatifs répondent à une seule question, mais une question qui revient sans cesse en industrie : ces deux produits sont-ils perçus comme différents ?

Rapides à mettre en œuvre, peu coûteux et solidement établis sur le plan statistique, ils permettent de valider un changement de recette, de fournisseur ou de procédé sans engager une étude descriptive complète.

Le principe

À quelle question répondent-ils ?

Un test discriminatif ne demande pas de décrire ni d'apprécier. Il demande de faire un choix simple, le plus souvent de désigner un échantillon parmi plusieurs. La réponse de chaque évaluateur pris isolément n'a pas de valeur : c'est le nombre de bonnes réponses obtenues sur l'ensemble du groupe qui permet de conclure.

Le raisonnement est statistique. Si les produits étaient identiques, les évaluateurs répondraient au hasard et un certain nombre de bonnes réponses surviendrait malgré tout. On conclut à une différence perceptible lorsque le nombre de bonnes réponses dépasse nettement ce que le hasard produirait.

Des conditions strictes

La validité du test tient à la rigueur du dispositif : échantillons codés et anonymes, ordres de présentation équilibrés entre les évaluateurs, conditions de dégustation identiques pour tous, éclairage neutralisant d'éventuelles différences de couleur, temps de repos entre les échantillons. Un biais dans la présentation suffit à invalider le résultat.

Les protocoles

Les principaux tests discriminatifs

Le test triangulaire

Le plus connu. Trois échantillons sont présentés, dont deux identiques. L'évaluateur doit désigner celui qui diffère des deux autres. Aucun attribut n'est précisé : le test détecte une différence globale, quelle qu'en soit la nature. C'est le protocole de référence lorsqu'on ignore sur quel critère la différence pourrait porter.

Mis au point dès 1941 dans les laboratoires de la maison Seagram pour le contrôle qualité des whiskies, c'est aussi le plus utilisé. La probabilité de répondre juste par hasard y est d'un tiers. Encadré par la norme NF EN ISO 4120, il sert à démontrer une différence, mais aussi une similitude (François Sauvageot et Catherine Dacremont, Cahier SFAS n° 3, 2015, p. 19-23).

Trois échantillons dont deux identiques ; l'évaluateur désigne celui qui diffère des deux autres.

Le test duo-trio

Un échantillon de référence est présenté en premier, puis deux échantillons dont l'un est identique à la référence. L'évaluateur désigne celui qui correspond à la référence. Ce protocole est plus intuitif que le triangulaire et convient bien lorsqu'un produit de référence existe clairement, par exemple la recette actuellement commercialisée.

La probabilité de répondre juste par hasard y est d'une chance sur deux (Cahier SFAS n° 3, p. 21). Le protocole est décrit par la norme NF ISO 10399 (François Sauvageot et Félix Depledt, Cahier SFAS n° 2, 2013, p. 24).

Une référence, puis deux échantillons dont l'un est identique à la référence ; l'évaluateur désigne celui qui lui correspond.

La comparaison par paires

Deux échantillons, et une question orientée : lequel est le plus sucré, le plus ferme, le plus intense ? Contrairement aux précédents, ce test porte sur un attribut désigné à l'avance. Il ne s'utilise donc que lorsqu'on sait déjà sur quoi la différence est susceptible de porter.

Le protocole est décrit par la norme NF ISO 5495 (Cahier SFAS n° 2, p. 29).

Deux échantillons ; l'évaluateur indique lequel présente le plus l'attribut demandé, par exemple le plus sucré.

Le test tétrade

Quatre échantillons, deux de chaque produit, à répartir en deux groupes de deux. Plus exigeant pour l'évaluateur, ce protocole est statistiquement plus puissant que le triangulaire : il permet de conclure avec un nombre d'évaluations plus faible pour une même exigence de fiabilité.

Comme pour le triangulaire, la probabilité de répondre juste par hasard est d'un tiers (Cahier SFAS n° 3, p. 21).

Quatre échantillons, deux de chaque produit ; l'évaluateur les répartit en deux groupes de deux.

Le test A / non-A

L'évaluateur mémorise d'abord un produit de référence, puis juge une série d'échantillons présentés un à un en indiquant, pour chacun, s'il s'agit ou non de la référence. Ce protocole convient aux produits qui ne peuvent pas être comparés simultanément, par exemple ceux dont l'évaluation sature rapidement les sens.

Une référence mémorisée, puis des échantillons présentés un à un ; l'évaluateur indique pour chacun s'il s'agit de la référence.

Vue d'ensemble

Les protocoles en un coup d'œil

Les cinq protocoles présentés ci-dessus, comparés sur les mêmes critères.

Protocole Échantillons présentés Ce que fait l'évaluateur Quand l'utiliser
Test triangulaire Trois échantillons, dont deux identiques Désigne celui qui diffère des deux autres Quand on ignore sur quel critère la différence pourrait porter
Test duo-trio Une référence, puis deux échantillons dont l'un est identique à la référence Désigne celui qui correspond à la référence Quand un produit de référence existe clairement, par exemple la recette actuellement commercialisée
Comparaison par paires Deux échantillons Répond à une question orientée sur un attribut désigné à l'avance : lequel est le plus sucré, le plus ferme, le plus intense ? Quand on sait déjà sur quoi la différence est susceptible de porter
Test tétrade Quatre échantillons, deux de chaque produit Les répartit en deux groupes de deux Pour conclure avec un nombre d'évaluations plus faible, à exigence de fiabilité égale
Test A / non-A Une référence mémorisée, puis une série d'échantillons présentés un à un Indique pour chacun s'il s'agit ou non de la référence Pour les produits qui ne peuvent pas être comparés simultanément, par exemple ceux dont l'évaluation sature rapidement les sens

Les résultats

Comment lire un résultat

Un test discriminatif produit une conclusion binaire assortie d'un niveau de confiance. Deux formulations sont possibles, et elles ne s'équivalent pas.

Conclure à une différence perceptible signifie que le nombre de bonnes réponses est trop élevé pour être attribué au hasard. La conclusion est solide, dans la limite du risque d'erreur retenu au départ.

Ne pas conclure à une différence ne signifie pas que les produits sont identiques. Cela signifie que le test n'a pas permis de mettre une différence en évidence, ce qui peut tenir à l'absence réelle de différence comme à un nombre d'évaluations insuffisant. Cette nuance est essentielle : l'absence de preuve d'une différence n'est pas la preuve d'une équivalence.

Lorsque l'objectif est précisément de démontrer que deux produits sont équivalents, par exemple après un changement de fournisseur, il existe des protocoles conçus pour cela, dits tests de similarité. Ils demandent d'être dimensionnés dès la conception de l'étude. Les normes NF ISO 4120 et NF ISO 5495 distinguent ainsi l'essai de différence et l'essai de similitude, dont l'objectif doit être fixé avant le test (Cahier SFAS n° 2, p. 29).

Les cas d'usage

Dans quels cas y recourir ?

  • Changement d'un ingrédient, d'un fournisseur ou d'un procédé : le consommateur va-t-il s'en apercevoir ?
  • Réduction du sel, du sucre ou d'un additif : jusqu'à quel niveau la modification reste-t-elle imperceptible ?
  • Contrôle qualité : ce lot diffère-t-il de la référence ?
  • Vieillissement : le produit reste-t-il conforme à son état initial après plusieurs mois ?
  • Comparaison à un concurrent : la différence revendiquée est-elle réellement perceptible ?
  • Sélection des évaluateurs : ces protocoles servent aussi à vérifier l'acuité sensorielle de candidats à un panel.

Les limites

Ce que les tests discriminatifs ne disent pas

Ils établissent l'existence d'une différence, jamais sa nature. Savoir que deux produits sont perçus comme différents ne dit pas en quoi ils diffèrent : il faut alors une analyse descriptive.

Ils ne disent pas davantage si la différence est acceptable. Une différence perceptible peut être sans conséquence commerciale, ou au contraire rédhibitoire. Seuls les tests consommateurs permettent de trancher.

Enfin, une différence détectée en conditions de laboratoire, avec des échantillons présentés côte à côte, n'est pas nécessairement perçue par un consommateur qui utilise le produit chez lui, plusieurs semaines après avoir goûté la version précédente.

Vous mettez en œuvre ces protocoles, ou vous souhaitez échanger sur leur application ?

Pour retrouver la définition des termes employés sur cette page, consultez le glossaire de l'analyse sensorielle.