لا تحب الإعلانات؟ يذهب خالية من الإعلانات اليوم 

محاسبة دقة اختبار A/B الإحصائي

بياناتمطورالرياضيات

إعلان · حذف؟

مدخل

عملية تلقائية

انتاج

جانب العميل

إعلان · حذف؟

مرشد

محاسبة دقة اختبار A/B الإحصائي

أدخل عدد الزوار والتحويلات لنسخة التحكم (A) ونسخة الاختبار (B) وشاهد فورًا ما إذا كانت الفرق بينهما حقيقيًا أم مجرد تقلبات. يُجرى الحاسب تحليل z لعوامل مزدوجة، ويُحسب القيمة p، وارتفاع القيمة المطلق والنسبية، ونطاق الثقة للفرق، ثم يُحوّل الأرقام إلى قرار واضح: فائز، لا فرق، أو الاستمرار في الاختبار.

يستخدم نفس تحليل z للاختلافات المجمعة الذي يُستخدم في أدوات مثل Optimizely، VWO، وConvert. تُجرى جميع الحسابات داخل المتصفح، لذا لا تخرج أرقام تجربتك من الصفحة.

كيفية استخدام

أدخل العدد الكلي للزوار الذين رأوا التحكم (A) أدخل عدد من هؤلاء الزوار الذين تحوّلوا.
أدخل العدد الكلي للزوار الذين رأوا النسخة (B) أدخل عدد من هؤلاء الزوار الذين تحوّلوا.
اختر مستوى الثقة (90%، 95%، أو 99%) واختر تحليلًا موجهًا أو مزدوجًا.
أعد قراءة الحكم في أعلى لوحة النتائج وتحقق من تفاصيل القيمة p، ودرجة z، وارتفاع القيمة، ونطاق الثقة.
انقر على أي من معايير المثال المقدمة في أسفل مدخلاتك لرؤية كيف تبدو نتيجة فائزة، نتيجة متوسطة، وتجربة بحركة زوار منخفضة.

خصائص

تحليل z لعوامل مزدوجة — تحليل للاختلافات المجمعة، وهو المعيار المعياري لمقارنة معدلات التحويل.
القيمة p الدقيقة — تُحسب من دالة التوزيع الطبيعي باستخدام تقريب دقيق لـ erf.
موجه أو مزدوج — اختر وفقًا لهل تهتم فقط بـ B يفوق A أم بفرق ما.
نطاقات الثقة — لكل من الفرق المطلقة (بأقطار مئوية) والارتفاع النسبي.
أحكام ذكية — تمييز بين عدم وجود بيانات كافية، عدم وجود فرق حقيقي، وفرق يحتاج إلى عينة أكبر.
تحليل بصري — أعمدة لأسعار التحويل ونظرة عامة على توزيع الزوار لتسهيل اكتشاف توزيع غير متوازن.
100% من جانب العميل — تبقى أرقام تجربتك داخل متصفحك، لا يتم تحميل أي شيء.

إعلان · حذف؟

 التعليمات

ما معنى القيمة الإحصائية في تجربة A/B؟

القيمة الإحصائية هي احتمال أن يكون الفرق الملاحظ بين النسختين ناتجًا عن تأثير حقيقي بدلًا من تقلبات عشوائية. الحد التقليدي هو قيمة p أقل من 0.05، أي أن احتمال ظهور الفرق الملاحظ إذا كانت النسختين متطابقتين أقل من 5%.
ما معنى القيمة p بالفعل؟

القيمة p هي احتمال أن تلاحظ فرقًا كهذا (أو أكبر) إذا كانت النسختين تمتلكان نفس الأداء. قيمة p صغيرة (مثلاً 0.01) تعني أن النتيجة ستكون غير محتملة في افتراض عدم وجود فرق، وهي دليل على أن النسختين تصرفن بشكل مختلف. القيمة p ليست احتمال أن تكون B أفضل من A.
متى يجب استخدام تحليل موجه أم مزدوج؟

استخدم تحليل مزدوج عندما ترغب في اكتشاف أي فرق بين A وB، بما في ذلك أن B يُظهر أداء أسوأ. استخدم تحليل موجه عندما يكون لديك افتراض اتجاهي (أن B أفضل من A) تم تحديده قبل بدء التجربة، ولا تتخذ أي إجراءات إذا كان النتيجة في الاتجاه المعاكس. يُعد التحليل المزدوج الخيار الأفضل للأساس في معظم تجارب المنتج.
ما الفرق بين الارتفاع المطلق والارتفاع النسبي؟

الارتفاع المطلق هو الفرق في معدلات التحويل المُعبّر بنسبة مئوية (مثلاً، من 5% إلى 6% يمثل ارتفاعًا مطلقًا بـ +1 نقطة مئوية). الارتفاع النسبي يعبر عن هذا التغير كنسبة مئوية من المعدل الأصلي (من 5% إلى 6% يمثل ارتفاعًا نسبيًا بـ +20%). يُستخدم الارتفاع النسبي عادةً من قبل المُعلنين، لكن الارتفاع المطلق هو ما يحدد التأثير المالي عند حجم معين من الزوار.