A/B Testi Nedir? Web Siteleri İçin Uygulama Örnekleri

A/B testinde hipotez, rastgele atama, örneklem ve karar ölçütünü önceden belirleyin. Düşük trafikte yanıltıcı sonuçlardan kaçınan uygulama rehberi.

A/B testi neyi karşılaştırır?

Benzer ziyaretçiler rastgele farklı sürümlere atanır ve önceden seçilmiş sonuç karşılaştırılır. Bir hafta eski tasarım, sonraki hafta yeni tasarım kullanmak aynı test değildir; trafik ve sezon değişebilir. Testin temel amacı değişikliğin etkisini diğer etkenlerden mümkün olduğunca ayırmaktır.

Hipotezi somutlaştırın

“Yeni tasarım daha iyi” yerine, “teslimat bilgisini satın alma alanında göstermek belirsizliği azaltır” gibi bir gerekçe yazın. Ana metrik ve iade, hata ya da gelir gibi koruyucu metrikleri belirleyin. Her görülen farkı başarı olarak saymayın.

Örneklemi ve bitiş kuralını planlayın

Başlangıç oranı, anlamlı kabul edilen değişim ve hata toleransı gereken örneklemi etkiler. Sürekli sonuç ekranına bakıp ilk olumlu anda durmak yanıltabilir. Kullanılan istatistik yöntemi ve durdurma kuralı testten önce seçilmelidir.

Uygulama hatalarını kontrol edin

Atama tutarlılığı, aynı kişinin sürümler arasında geçmesi, titreme ve ölçüm tekrarları sonucu bozabilir. Trafik dağılımının beklenenden ciddi sapıp sapmadığını inceleyin. Bozuk testten güçlü bir yüzde çıkması güvenilir sonuç değildir.

Trafik azsa başka yöntem seçin

Düşük hacimde test uzun sürebilir veya küçük farkı ayıramayabilir. Kullanılabilirlik testi, destek kayıtları ve bariz teknik sorunları düzeltmek daha verimli olabilir. Deney yapmamak başarısızlık değildir; yanlış kesinlik üretmekten kaçınmaktır.

Karar özeti