كيفية استخدام Double Blind Test
يتيح لك Double Blind Test مقارنة Pipeline A وPipeline B بالاستماع، من دون معرفة أيهما تسمعه في تلك اللحظة. يساعدك ذلك على معرفة ما إذا كان الفرق الذي تظن أنك تسمعه يمكن تمييزه فعلًا، وما إذا كنت تفضّل إحدى الـ pipelines بالفعل.
يتوفر نوعان من الاختبارات.
- ABX Test - يتحقق مما إذا كنت تستطيع تمييز الـ pipelines بموثوقية.
- A/B Preference Test - تختار الصوت الذي تفضّله من دون معرفة أي pipeline هي أيهما.
في الحالتين، يسجل EffeTune إجاباتك ويعرض p-value، لكي ترى ما إذا كانت النتيجة ذات دلالة إحصائية.
تجهيز الـ pipelines
يقارن الاختبار بين الـ pipelines الموضحتين في استخدام ميزات AB Pipeline.
- يجب أن تحتوي كل من Pipeline A وPipeline B على effect واحد على الأقل.
- ضع إحدى الإعدادات التي تريد مقارنتها في Pipeline A، والأخرى في Pipeline B. اجعل كل شيء آخر متطابقًا باستثناء النقطة التي تريد اختبارها (مثلًا: With EQ مقابل Without EQ)، حتى يكون ذلك الفرق وحده موضع الاختبار.
- في A/B Preference Test، لا يهم أي الإعدادين تضعه في Pipeline A وأيهما في Pipeline B. أثناء الاختبار، يُعاد تعيين عينتي A وB عشوائيًا في كل trial، لذلك لا توجد أفضلية أو عيب لأي موضع. إذا بدّلت الإعدادين بين Pipeline A وPipeline B، فسيتبدّل أيضًا اسم الـ pipeline الفائزة المعروض في النتيجة، لكن التفسير الإحصائي لا يتغير. المهم أن تتذكر أي إعداد وضعته في أي pipeline: فالنتيجة تعرض ما إذا كانت Pipeline A أو Pipeline B قد فُضّلت بدلالة إحصائية، وبمقارنتها مع إعدادك تعرف أي صوت فضّلته. النتيجة الواضحة تعني غالبًا أنك اخترت باستمرار فرقًا أحدث تفضيلًا حقيقيًا لديك. إذا كان الصوتان متشابهين أو كانت اختياراتك متقلبة، فلن يظهر الاختبار عادةً تفضيلًا ذا دلالة.
- يمكنك فتح لوحة الاختبار في أي وقت، لكن أزرار البدء تبقى غير مفعلة إلى أن تتوفر الـ pipelines كلتاهما. إذا كانت Pipeline B غير موجودة، تظهر رسالة توضح ذلك.
فتح الاختبار
- Web app: انقر على زر ▼ الموجود مباشرة إلى يمين زر التبديل A/B في عنوان Effect Pipeline (الزر الذي يعرض “A” أو “B” حسب الـ pipeline الحالية)، ثم اختر Double Blind Test من القائمة التي تظهر.
- Desktop app: تتوفر قائمة ▼ نفسها، ويمكنك أيضًا فتح الاختبار من قائمة ملف.
أثناء فتح الاختبار، يُخفى عرض الـ effect pipeline حتى لا ترى أي effects مفعلة، وبذلك تبقى حالة الاختبار عمياء. يمكنك إغلاق الاختبار في أي وقت بزر × للعودة إلى العرض العادي.
إعداد الاختبار
تعرض شاشة الإعداد العناصر التالية.
- Test name - يصف الفرق الذي تختبره (مثل: With EQ vs. Without EQ). يعمل صندوق الاختيار مثل Effect Presets: يمكنك حفظ الاختبارات المسماة واستدعاؤها وحذفها. يحفظ الاختبار المحفوظ الـ pipelines كلتيهما وعدد الاختبارات، لذلك يمكنك إعادة تحميل المقارنة نفسها لاحقًا. يلزم test name قبل مشاركة الاختبار.
- Your name - اختياري. يظهر في النتيجة؛ وإذا تُرك فارغًا يصبح Anonymous.
- Number of tests - عدد الـ trials التي سيتم تشغيلها (يُضبط من المربع أو شريط التمرير). زيادة عدد الـ trials تجعل النتيجة أكثر موثوقية، لكنها تستغرق وقتًا أطول. القيمة الافتراضية 20.
اضغط Start ABX Test أو Start A/B Preference Test للبدء.
Note: إن A وB في الاختبار منفصلتان عن Pipeline A وPipeline B في Effect Pipeline. في كل trial، يُقرر عشوائيًا من جديد أي pipeline سيُسمع كـ A وأيها كـ B، ولا تُعرض هذه المطابقة على الشاشة. لذلك لا يمكنك معرفة أي pipeline حقيقية تسمعها الآن باسم A. لا تفترض أن “A” في الاختبار هي Pipeline A؛ فهذا ما يحافظ على الاختبار أعمى.
تشغيل الصوت
الاختبار يبدّل بين الـ pipelines فقط؛ أما الموسيقى فتجهزها كالمعتاد.
- اسحب ملفًا موسيقيًا وأفلته (أو افتحه من قائمة ملف)، أو
- أدخل الصوت إلى EffeTune من مصدر فعلي.
يعرض الاختبار معدل العينة لجهاز الصوت كمرجع.
تشغيل ABX Test
- استخدم أزرار Switch to A وSwitch to B وSwitch to X لتبديل الصوت الحي بين العينات. تكون X مطابقة إما لـ A أو B، ويتم اختيارها عشوائيًا في كل trial.
- بدّل واستمع كما تشاء إلى أن تستطيع معرفة أي عينة تطابق X.
- انقر X matches A أو X matches B لتسجيل إجابتك، ثم يبدأ الـ trial التالي.
يمكنك التبديل أيضًا من لوحة المفاتيح: اضغط مفتاح A أو B أو X، أو مفتاح 1 أو 2 أو 3 (من الصف العلوي أو لوحة الأرقام)، لتبديل العينة النشطة كما لو أنك نقرت زر التبديل المقابل. للتصويت، اضغط Q لاختيار X matches A أو W لاختيار X matches B.
تشغيل A/B Preference Test
- استخدم زري Switch to A وSwitch to B لمقارنة العينتين (لا توجد X في هذا الوضع).
- عندما تقرر أيهما تفضّل، انقر Prefer A أو Prefer B.
يمكنك التبديل أيضًا من لوحة المفاتيح: اضغط مفتاح A أو B، أو مفتاح 1 أو 2 (من الصف العلوي أو لوحة الأرقام)، لتبديل العينة النشطة. للتصويت، اضغط Q لاختيار Prefer A أو W لاختيار Prefer B.
قراءة النتيجة
بعد اكتمال جميع الـ trials، يعرض EffeTune النتيجة.
- ABX Test - يعرض نتيجتك (النسبة المئوية و correct / total) وقيمة p لاختبار ثنائي الحدين أحادي الطرف. إذا كانت p < 0.05، فالنتيجة ذات دلالة إحصائية؛ أي إن إجاباتك يصعب تفسيرها بالمصادفة وحدها، ويمكن القول إنك استطعت تمييز الـ pipelines. وإلا فلا يمكن القول إنك استطعت تمييزهما.
- A/B Preference Test - يعرض الـ pipeline التي اختيرت أكثر (وتُعرض Pipeline A عند التعادل)، وعدد مرات اختيارها (count / total)، مع قيمة p لاختبار ثنائي الحدين ثنائي الطرف. النسبة المعروضة تكون دائمًا 50% أو أكثر لأنها تعرض الجانب الفائز؛ لذلك فالنسبة العالية وحدها لا تعني وجود تفضيل حقيقي. الحكم يكون من p-value: إذا كانت p < 0.05، فتفضيلك ذو دلالة. وإلا فلا يمكن القول إن لديك تفضيلًا ذا دلالة (النتيجة القريبة من 50% ضمن نطاق الصدفة).
يُعرض أيضًا إجمالي الوقت الذي استغرقه الاختبار.
مشاركة الاختبار
انقر Share this test لنسخ URL إلى الحافظة. هذا الـ URL يعيد إنشاء الـ effect pipelines كلتيهما ويفتح الاختبار الأعمى، بحيث يستطيع من يفتحه تشغيل مقارنة الـ pipelines نفسها. يمكنك المشاركة في أي وقت: من شاشة الإعداد قبل البدء، أو بعد الانتهاء. إذا شاركت قبل البدء، فإن الشيء المهم الذي تتم مشاركته هو مقارنة الـ pipelines الاثنين؛ تأكد من عدد الـ trials قبل البدء. إذا شاركت بعد إكمال الاختبار، فستُضمّن نتيجتك أيضًا، ويمكن للمستلم رؤيتها قبل إجراء الاختبار بنفسه.
تتطلب المشاركة وجود الـ pipelines كلتيهما وtest name، لكي تكون المقارنة المشتركة ذات معنى ويمكن إعادة إنتاجها لدى الطرف الآخر.
طريقة استخدام URL مشترك للاختبار:
- Web app: افتح URL المشترك في المتصفح. يعيد EffeTune إنشاء الـ pipelines كلتيهما ويفتح Double Blind Test تلقائيًا.
- Desktop app: انسخ URL المشترك، انتقل إلى EffeTune، ثم الصقه باستخدام تحرير > لصق أو Ctrl+V (أو Command+V على macOS)، أو زر لصق المؤثرات في شريط الأدوات. يقرأ EffeTune الـ URL من الحافظة، ويعيد إنشاء الـ pipelines كلتيهما، ويفتح Double Blind Test. الصق الـ URL عندما لا تكون لوحة Double Blind Test مفتوحة بالفعل.