A/B Testi nedir?
A/B testi, aynı deneyimin iki sürümünü farklı kullanıcı gruplarına gösterip önceden tanımlanmış bir ölçütü karşılaştırma yöntemidir. Sonuç, test edilen değişiklik ve ölçüt bağlamında yorumlanır. İki sürüm rastgele ve eş zamanlı olarak karşılaştırılabilir gruplara atanır. Birincil başarı ölçütü, test süresi ve izlenecek olumsuz etkiler başlamadan önce tanımlanmalıdır.
Neden önemli?
Tercih tartışmalarını ölçülebilir bir soruya dönüştürür. Yine de neden bir seçeneğin daha iyi çalıştığını anlamak için nitel araştırmaya ihtiyaç duyulabilir. Tek bir sayısal artış her zaman daha iyi deneyim anlamına gelmez; örneğin tıklama artarken tamamlanan başvurular düşebilir. Sonucu örneklem büyüklüğü, belirsizlik ve diğer ölçütlerle birlikte okumak gerekir.
Bir örnekle bakalım.
Bir üyelik çağrısını düşün.
A sürümünde “Ücretsiz başla”, B sürümünde “Hesap oluştur” yazabilir. Ekip, hangi etiketin kayıt tamamlama oranını etkilediğini uygun örneklemle karşılaştırır. Bir etiket daha fazla tıklama alsa bile kayıt tamamlanması veya yanlış beklentiyle açılan oturumlar da izlenmelidir. Böylece yerel bir kazanımın tüm akışa zarar verip vermediği anlaşılır.
Nasıl uygularım?
- 01
Test edeceğin tek değişikliği ve hedef ölçütü belirle.
- 02
Sürümleri karşılaştırılabilir kullanıcılara göster.
- 03
Sonucu örneklem ve bağlam sınırları içinde yorumla.
“Bir ölçüm, doğru soruyla anlam kazanır.