A/B test örneklem hesaplama

Bir A/B testi güvenilir bir sonuç vermek için kaç ziyaretçi ister ve kaç hafta sürer? Mevcut oranınızı ve yakalamak istediğiniz en küçük artışı girin.

Girdiğiniz rakamlar tarayıcınızda kalır; hiçbir yere gönderilmez ve kaydedilmez.

Sonuç

Varyant başına ziyaretçi
21.109
Toplam ziyaretçi
42.218
Yakalanacak oran
%2,4
Süre (tam hafta)
3

%95 güven (iki yönlü) ve %80 güçle. Testi 3 tam hafta yürütün ve bu sayıya ulaşmadan sonucu okumayın.

Formül

  • p₁ = mevcut oran · p₂ = p₁ × (1 + göreli artış) · p̄ = (p₁ + p₂) ÷ 2
  • n = [1,96 × √(2 × p̄ × (1 − p̄)) + 0,84 × √(p₁ × (1 − p₁) + p₂ × (1 − p₂))]² ÷ (p₂ − p₁)²
  • süre = 2 × n ÷ haftalık ziyaretçi, yukarı doğru tam haftaya yuvarlanır

İki oranı karşılaştıran standart örneklem formülü. Güven düzeyi %95 (iki yönlü, z = 1,96) ve güç %80 (z = 0,84) sabittir. n, her bir varyanta düşmesi gereken ziyaretçi sayısıdır; ziyaretçiler iki varyanta eşit dağıtılır.

Örnek

Mevcut dönüşüm oranı %2, yakalamak istediğiniz en küçük göreli artış %20 olsun: hedef oran %2,4. Formül varyant başına 21.109 ziyaretçi verir; iki varyant için toplam 42.218.

Teste haftada 20.000 ziyaretçi giriyorsa 42.218 ÷ 20.000 = 2,11 eder; test tam 3 hafta yürütülür.

Sonuç nasıl okunur

  • Sayı test başlamadan belirlenir ve o sayıya ulaşmadan sonuç okunmaz. Ara sonuçlara bakıp testi erken bitirmek, aslında olmayan bir farkı kazanan ilan etme olasılığını artırır.
  • Daha küçük bir farkı yakalamak çok daha fazla ziyaretçi ister: yakalanacak artışı yarıya indirmek gereken örneklemi yaklaşık dört katına çıkarır.
  • Haftanın günleri farklı davrandığı için test tam haftalarla yürütülür. Sonuç aylar gösteriyorsa bu etkiyi bu sayfada test etmek gerçekçi olmaz; daha büyük bir değişikliği ya da daha çok ziyaret alan bir sayfayı deneyin.
  • %80 güç, gerçekten var olan bu büyüklükteki bir farkın beş testten birinde yine de gözden kaçabileceği anlamına gelir.

Sık sorulanlar

Bu hesap hakkında en sık sorulanlar. Sorunuz burada yoksa yazın, bir iş günü içinde cevaplayalım.

A/B testi için kaç ziyaretçi gerekir?

Mevcut dönüşüm oranınıza ve yakalamak istediğiniz farka bağlıdır. Oran düştükçe ve fark küçüldükçe gereken sayı hızla artar. Örneğin %2’lik bir oranda %20’lik göreli artışı %95 güven ve %80 güçle yakalamak için varyant başına yaklaşık 21 bin ziyaretçi gerekir.

A/B testi ne kadar sürmeli?

Gereken toplam ziyaretçi sayısına ulaşana kadar ve her zaman tam haftalarla. Hafta içi ve hafta sonu ziyaretçileri farklı davrandığı için yarım haftada biten bir test yanıltabilir. Trafiğiniz bol olsa bile en az bir tam hafta, tercihen iki hafta yürütmek sağlıklıdır.

%95 güven ve %80 güç ne demek?

%95 güven, iki sürüm arasında aslında fark yokken testin fark varmış gibi sonuç verme olasılığının %5 ile sınırlandığını söyler. %80 güç ise gerçekten sizin belirlediğiniz büyüklükte bir fark varsa testin onu %80 olasılıkla yakalayacağı anlamına gelir. İkisi de A/B testlerinde yaygın kullanılan değerlerdir.

İlgili rehberler

Projenizi
anlatın.

Formu doldurun ya da doğrudan yazın; görüşme gününü birlikte belirleriz.

İlk görüşmeyi Detmore’un kurucusu Deniz Sezer yapar.

İlk görüşme ücretsiz · Bir iş gününde yanıt · 2 ila 3 günde yazılı teklif · NDA hazır

Neye ihtiyacınız var? birden fazla seçebilirsiniz

Ad, e-posta ve telefon zorunludur.

İletişim

Bir iş günü içinde dönüyoruz.