Tidak suka iklan? Pergi Bebas Iklan Hari ini 

Kalkulator Kebermaknaan Statistik Uji A/B

DataPengembangMatematika

IKLAN · HAPUS?

MEMASUKKAN

Proses Otomatis

KELUARAN

Sisi klien

IKLAN · HAPUS?

Memandu

Kalkulator Kebermaknaan Statistik Uji A/B

Masukkan jumlah pengunjung dan konversi untuk kontrol (A) dan varian (B), lalu segera lihat apakah perbedaan antara keduanya adalah nyata atau hanya noise. Kalkulator ini menjalankan uji z dua proporsi, menghitung nilai p, peningkatan absolut dan relatif, serta interval kepercayaan untuk perbedaan, lalu mengubah angka-angka tersebut menjadi keputusan jelas: pemenang, tidak ada perbedaan, atau tetap menjalankan uji ini.

Ini menggunakan uji z dengan varian terkumpul yang sama yang digunakan oleh kalkulator kebermaknaan di balik alat seperti Optimizely, VWO, dan Convert. Semua perhitungan dilakukan di browser, sehingga angka-angka eksperimen Anda tidak pernah meninggalkan halaman.

Cara Penggunaan

Masukkan jumlah total pengunjung yang melihat Kontrol (A) pengalaman dan berapa banyak dari mereka yang melakukan konversi.
Masukkan jumlah total pengunjung yang melihat Varian (B) pengalaman dan berapa banyak dari mereka yang melakukan konversi.
Pilih tingkat kepercayaan (90%, 95%, atau 99%) dan pilih uji satu-ekor atau dua-ekor.
Baca keputusan di bagian atas panel hasil dan periksa detailnya untuk nilai p, skor z, peningkatan, dan interval kepercayaan.
Klik salah satu preset contoh di bagian bawah input untuk melihat bagaimana hasil pemenang jelas, hasil ambig, dan uji dengan volume pengunjung rendah terlihat.

Fitur

Uji z dua proporsi — uji kebermaknaan dengan varian terkumpul, standar untuk membandingkan tingkat konversi.
Nilai p eksak — dihitung dari fungsi distribusi normal kumulatif menggunakan pendekatan erf yang presisi tinggi.
Satu-ekor atau dua-ekor — pilih berdasarkan apakah Anda hanya peduli pada B yang lebih baik dari A atau pada perbedaan apa pun.
Interval kepercayaan — baik untuk perbedaan absolut (dalam poin persentase) maupun untuk peningkatan relatif.
Keputusan cerdas — membedakan antara data tidak cukup, tidak ada perbedaan nyata, dan perbedaan yang membutuhkan lebih banyak sampel.
Pemecahan visual — batang untuk tingkat konversi dan gambaran umum distribusi trafik agar Anda bisa melihat alokasi yang tidak seimbang.
100% sisi klien — angka-angka eksperimen Anda tetap berada di browser, tidak ada yang diunggah.

IKLAN · HAPUS?

 Tanya Jawab Umum

Apa itu kebermaknaan statistik dalam uji A/B?

Kebermaknaan statistik adalah probabilitas bahwa perbedaan yang diamati antara dua varian disebabkan oleh efek nyata, bukan kebetulan. Ambang batas konvensional adalah nilai p di bawah 0.05, artinya kurang dari 5% kemungkinan perbedaan yang diamati akan muncul jika kedua varian benar-benar sama.
Apa arti sebenarnya dari nilai p?

Nilai p adalah probabilitas melihat perbedaan sebesar yang Anda amati (atau lebih besar) jika dua varian benar-benar berperilaku sama. Nilai p yang kecil (misalnya, 0.01) berarti hasil tersebut sangat tidak mungkin terjadi jika hipotesis nol benar, yang merupakan bukti bahwa dua varian berperilaku berbeda. Nilai p bukan probabilitas bahwa B lebih baik dari A.
Kapan sebaiknya menggunakan uji satu-ekor atau dua-ekor?

Gunakan uji dua-ekor ketika Anda ingin mendeteksi perbedaan apa pun antara A dan B, termasuk B yang lebih buruk. Gunakan uji satu-ekor ketika Anda memiliki hipotesis arah (B lebih baik dari A) yang sudah ditentukan sebelum eksperimen dilakukan, dan Anda tidak akan bertindak jika hasilnya berlawanan. Uji dua-ekor adalah pilihan default yang lebih aman untuk kebanyakan eksperimen produk.
Apa perbedaan antara peningkatan absolut dan relatif?

Peningkatan absolut adalah perbedaan murni dalam tingkat konversi yang dinyatakan dalam poin persentase (misalnya, dari 5% menjadi 6% adalah peningkatan absolut 1 poin persentase). Peningkatan relatif menyatakan perubahan tersebut sebagai persentase dari tingkat awal (dari 5% menjadi 6% adalah peningkatan relatif 20%). Peningkatan relatif adalah angka yang biasanya disebutkan oleh para pemasar, tetapi peningkatan absolut yang menentukan dampak dolar pada volume trafik tertentu.