Frieve EffeTune
Documentation

Comment utiliser le test en double aveugle

Le test en double aveugle vous permet de comparer à l’écoute Pipeline A et Pipeline B. C’est une façon contrôlée de vérifier si une différence que vous pensez entendre est réellement perceptible, et si vous préférez vraiment l’un des pipelines à l’autre.

Deux types de test sont disponibles :

  • Test ABX : vérifie si vous pouvez distinguer les deux pipelines de façon fiable.
  • Test de préférence A/B : vous choisissez celui que vous préférez sans savoir lequel est lequel.

Dans les deux cas, EffeTune enregistre vos réponses et affiche une valeur p afin de déterminer si le résultat est statistiquement significatif.

Préparer les deux pipelines

Le test compare les deux pipelines décrits dans Utilisation des fonctions Pipeline AB :

  • Pipeline A et Pipeline B doivent contenir chacun au moins un effet.
  • Placez l’un des réglages dans Pipeline A et l’autre dans Pipeline B, en gardant tout le reste identique (par exemple Avec EQ et Sans EQ), afin de ne tester que la différence visée.
  • Retenez quel réglage vous avez placé dans Pipeline A et lequel dans Pipeline B. Dans un test de préférence A/B, le résultat indique si Pipeline A ou Pipeline B a été préféré de façon significative.
  • L’option « Test en double aveugle » du menu et les boutons de démarrage restent désactivés tant que Pipeline A et Pipeline B ne contiennent pas chacun au moins un effet.

Ouvrir le test

  • Application web : dans l’en-tête Effect Pipeline, cliquez sur le bouton ▼ situé juste à droite du bouton de basculement A/B, celui qui affiche “A” ou “B” selon le pipeline actuel, puis choisissez Test en double aveugle dans le menu qui apparaît.
  • Application de bureau : en plus du même menu ▼, vous pouvez aussi ouvrir le test depuis le menu Fichier.

Pendant que le test est ouvert, l’affichage de l’Effect Pipeline est masqué afin que vous ne puissiez pas voir quels effets sont actifs et que l’écoute reste aveugle. Vous pouvez fermer le test à tout moment avec le bouton × pour revenir à l’affichage normal.

Configurer le test

L’écran de configuration propose les éléments suivants :

  • Nom du test : décrit la différence testée, par exemple Avec EQ vs. Sans EQ. Le sélecteur fonctionne comme les Préréglages d’effet : vous pouvez enregistrer, rappeler et supprimer des tests nommés. Un test enregistré contient les deux pipelines et le nombre d’essais, ce qui permet de recharger plus tard la même comparaison. Un nom de test est nécessaire pour pouvoir partager le test.
  • Votre nom : facultatif. Il apparaît dans le résultat. Si le champ est vide, le résultat utilise Anonyme.
  • Nombre d’essais : nombre d’essais à exécuter, défini avec le champ de saisie ou le curseur. Plus il y a d’essais, plus le résultat est fiable, mais plus le test prend du temps. La valeur par défaut est 20.
  • Garder A/B fixes dans les tests ABX – Activé par défaut. Pendant tout le test ABX, A correspond au Pipeline A d’origine et B au Pipeline B d’origine. X reste choisi au hasard à chaque essai. Décochez cette case pour que les attributions de A et B soient elles aussi tirées au sort à chaque essai. Ce réglage est conservé lors de l’enregistrement et du partage du test.

Appuyez sur Démarrer le test ABX ou Démarrer le test de préférence A/B pour commencer.

Remarque : dans un test de préférence A/B, les attributions de A et B sont toujours tirées au sort à chaque essai, quel que soit l’état de cette case. Le A du test ne correspond donc pas nécessairement au Pipeline A d’origine, et cette correspondance reste masquée.

Lire l’audio

Le test ne fait que changer de pipeline ; vous fournissez la musique comme d’habitude :

  • glissez-déposez un fichier musical, ou ouvrez-le depuis le menu Fichier, ou
  • envoyez de l’audio vers EffeTune depuis une source physique.

La fréquence d’échantillonnage du périphérique audio est affichée sur l’écran du test à titre de référence.

Réaliser un test ABX

  1. Utilisez les boutons Passer à A, Passer à B et Passer à X pour changer l’audio en cours de lecture entre les échantillons. X est identique à A ou à B, avec un choix aléatoire à chaque essai.
  2. Passez d’un échantillon à l’autre autant de fois que nécessaire jusqu’à déterminer lequel correspond à X.
  3. Cliquez sur X correspond à A ou X correspond à B pour enregistrer votre réponse et passer à l’essai suivant.

Vous pouvez aussi changer d’échantillon au clavier : appuyez sur A, B ou X, ou sur 1, 2 ou 3 sur la rangée supérieure ou le pavé numérique, pour activer l’échantillon correspondant comme avec le bouton. Pour voter, appuyez sur Q pour X correspond à A ou sur W pour X correspond à B.

Réaliser un test de préférence A/B

  1. Utilisez Passer à A et Passer à B pour comparer les deux sons. Il n’y a pas de X dans ce mode.
  2. Lorsque vous avez décidé lequel vous préférez, cliquez sur Je préfère A ou Je préfère B.

Vous pouvez aussi changer d’échantillon au clavier : appuyez sur A ou B, ou sur 1 ou 2 sur la rangée supérieure ou le pavé numérique, pour changer l’échantillon actif. Pour voter, appuyez sur Q pour Je préfère A ou sur W pour Je préfère B.

Lire le résultat

Lorsque tous les essais sont terminés, EffeTune affiche le résultat :

  • Test ABX : le taux de réponses correctes, le nombre de réponses correctes sur le total et la valeur p d’un test binomial unilatéral sont affichés. Si p < 0.05, le résultat est statistiquement significatif : vos réponses sont donc difficiles à expliquer par le seul hasard, et l’on peut dire que vous avez pu distinguer les deux pipelines. Sinon, on ne peut pas dire que vous les avez distingués.
  • Test de préférence A/B : le pipeline choisi le plus souvent, affiché comme Pipeline A en cas d’égalité, son nombre de choix sous forme de compte sur le total, ainsi que la valeur p d’un test binomial bilatéral sont affichés. Le pourcentage affiché correspond toujours au côté gagnant ; il est donc toujours d’au moins 50 %, et un pourcentage élevé ne signifie pas à lui seul qu’il existe une préférence réelle. La décision se fait avec la valeur p : si p < 0.05, votre préférence est significative. Sinon, on ne peut pas dire qu’il y ait eu une préférence significative ; un résultat proche de 50 % relève du hasard attendu.

Le temps total passé à effectuer le test est également affiché.

Partager un test

Cliquez sur Partager ce test pour copier une URL dans le presse-papiers. Cette URL reproduit les deux pipelines d’effets et ouvre le test à l’aveugle, afin que la personne qui la reçoit puisse lancer la même comparaison de pipelines. Vous pouvez partager à tout moment : depuis l’écran de configuration avant de commencer, ou après avoir terminé. Si vous partagez avant de commencer, l’élément principal partagé est la comparaison entre les deux pipelines ; vérifiez le nombre d’essais avant de lancer le test. Si vous partagez après avoir terminé, votre résultat est également inclus, et la personne qui reçoit l’URL peut le consulter avant d’essayer elle-même la même comparaison.

Le partage nécessite les deux pipelines et un nom de test. Cela garantit que la comparaison partagée a un sens et peut être reproduite chez l’autre personne.

Utiliser une URL de test partagée :

  • Application web : ouvrez l’URL partagée dans un navigateur. EffeTune restaure les deux pipelines et ouvre automatiquement le test en double aveugle.
  • Application de bureau : copiez l’URL partagée, basculez vers EffeTune, puis collez-la avec Édition > Coller, Ctrl+V ou Command+V sur macOS, ou avec le bouton Coller les effets de la barre d’outils. EffeTune lit l’URL depuis le presse-papiers, restaure les deux pipelines et ouvre le test en double aveugle. Collez l’URL lorsque le panneau du test en double aveugle n’est pas déjà ouvert.

← Retour au README