A/B test örneklem hesaplama
Bir A/B testi güvenilir bir sonuç vermek için kaç ziyaretçi ister ve kaç hafta sürer? Mevcut oranınızı ve yakalamak istediğiniz en küçük artışı girin.
Sonuç
- Varyant başına ziyaretçi
- 21.109
- Toplam ziyaretçi
- 42.218
- Yakalanacak oran
- %2,4
- Süre (tam hafta)
- 3
%95 güven (iki yönlü) ve %80 güçle. Testi 3 tam hafta yürütün ve bu sayıya ulaşmadan sonucu okumayın.
Formül
- p₁ = mevcut oran · p₂ = p₁ × (1 + göreli artış) · p̄ = (p₁ + p₂) ÷ 2
- n = [1,96 × √(2 × p̄ × (1 − p̄)) + 0,84 × √(p₁ × (1 − p₁) + p₂ × (1 − p₂))]² ÷ (p₂ − p₁)²
- süre = 2 × n ÷ haftalık ziyaretçi, yukarı doğru tam haftaya yuvarlanır
İki oranı karşılaştıran standart örneklem formülü. Güven düzeyi %95 (iki yönlü, z = 1,96) ve güç %80 (z = 0,84) sabittir. n, her bir varyanta düşmesi gereken ziyaretçi sayısıdır; ziyaretçiler iki varyanta eşit dağıtılır.
Örnek
Mevcut dönüşüm oranı %2, yakalamak istediğiniz en küçük göreli artış %20 olsun: hedef oran %2,4. Formül varyant başına 21.109 ziyaretçi verir; iki varyant için toplam 42.218.
Teste haftada 20.000 ziyaretçi giriyorsa 42.218 ÷ 20.000 = 2,11 eder; test tam 3 hafta yürütülür.
Sonuç nasıl okunur
- Sayı test başlamadan belirlenir ve o sayıya ulaşmadan sonuç okunmaz. Ara sonuçlara bakıp testi erken bitirmek, aslında olmayan bir farkı kazanan ilan etme olasılığını artırır.
- Daha küçük bir farkı yakalamak çok daha fazla ziyaretçi ister: yakalanacak artışı yarıya indirmek gereken örneklemi yaklaşık dört katına çıkarır.
- Haftanın günleri farklı davrandığı için test tam haftalarla yürütülür. Sonuç aylar gösteriyorsa bu etkiyi bu sayfada test etmek gerçekçi olmaz; daha büyük bir değişikliği ya da daha çok ziyaret alan bir sayfayı deneyin.
- %80 güç, gerçekten var olan bu büyüklükteki bir farkın beş testten birinde yine de gözden kaçabileceği anlamına gelir.
Sık sorulanlar
Bu hesap hakkında en sık sorulanlar. Sorunuz burada yoksa yazın, bir iş günü içinde cevaplayalım.
A/B testi için kaç ziyaretçi gerekir?
Mevcut dönüşüm oranınıza ve yakalamak istediğiniz farka bağlıdır. Oran düştükçe ve fark küçüldükçe gereken sayı hızla artar. Örneğin %2’lik bir oranda %20’lik göreli artışı %95 güven ve %80 güçle yakalamak için varyant başına yaklaşık 21 bin ziyaretçi gerekir.
A/B testi ne kadar sürmeli?
Gereken toplam ziyaretçi sayısına ulaşana kadar ve her zaman tam haftalarla. Hafta içi ve hafta sonu ziyaretçileri farklı davrandığı için yarım haftada biten bir test yanıltabilir. Trafiğiniz bol olsa bile en az bir tam hafta, tercihen iki hafta yürütmek sağlıklıdır.
%95 güven ve %80 güç ne demek?
%95 güven, iki sürüm arasında aslında fark yokken testin fark varmış gibi sonuç verme olasılığının %5 ile sınırlandığını söyler. %80 güç ise gerçekten sizin belirlediğiniz büyüklükte bir fark varsa testin onu %80 olasılıkla yakalayacağı anlamına gelir. İkisi de A/B testlerinde yaygın kullanılan değerlerdir.
İlgili rehberler
- Hızlı site neden daha çok satar: LCP, INP ve CLS rehberiCore Web Vitals’ı bir rapor kalemi değil, bir satış kalemi olarak okumak.
- GA4 kurulumu kontrol listesi: mülkten teste adım adımMülkten onay moduna, iç trafikten test adımlarına kadar GA4’ü ilk günden doğru kurmak için sırayla izlenecek maddeler.