A/B Testi Nasıl Yapılır? Tahminden Kanıta Geçiş Rehberi

E-ticarette "bence bu daha iyi olur" cümlesi çok sık duyulur ve çoğu zaman yanlış çıkar. Kullanıcıların gerçekte nasıl davrandığını sezgiyle bilemeyiz. İşte tam bu noktada A/B testi devreye girer: iki (ya da daha fazla) versiyonu gerçek trafikle karşılaştırıp hangisinin daha iyi dönüştüğünü ölçeriz. Bu yazıda A/B testini baştan sona, sık yapılan hatalardan kaçınarak nasıl yürüteceğinizi anlatıyoruz.

A/B testi tam olarak nedir?

A/B testinde ziyaretçiler rastgele iki gruba ayrılır. Bir grup mevcut versiyonu (A/kontrol), diğer grup değiştirilmiş versiyonu (B/varyant) görür. Aynı dönemde, aynı koşullarda karşılaştırma yaptığınız için sonucu güvenle yorumlayabilirsiniz. Amaç, hangi versiyonun belirlediğiniz hedefte (satış, kayıt, tıklama) daha iyi performans gösterdiğini kanıtlamaktır.

1. İyi bir hipotezle başlayın

Rastgele değişiklik test etmek zaman kaybıdır. İyi bir hipotez şu yapıdadır: "Şunu değiştirirsem, şu nedenle, şu metrik iyileşecek." Örneğin: "Ödeme butonunu 'Devam et' yerine 'Güvenle satın al' yaparsam, güven arttığı için tamamlanan sipariş oranı yükselecek."

Test edilecek fikir bir tahmin değil, gerekçeli bir öngörü olmalıdır.

2. Aynı anda tek şey değiştirin

Hem başlığı hem butonu hem de görseli aynı testte değiştirirseniz, sonuç iyi çıksa bile hangi değişikliğin işe yaradığını bilemezsiniz. Net öğrenme için her testte tek bir değişkeni izole edin. Radikal, çok bileşenli değişiklikler istiyorsanız bu ayrı bir yöntemdir ve ayrı planlanmalıdır.

3. Neyi ölçeceğinizi önceden belirleyin

Testten önce başarı ölçütünü net koyun. Buton tıklaması mı, sepete ekleme mi, tamamlanan satış mı? Yüzeysel metrikler (tıklama) artarken asıl metrik (satış) düşebilir. Bu yüzden mümkünse gelire en yakın metriği ana ölçüt seçin.

4. Yeterli veriyi bekleyin

A/B testinin en yaygın hatası, birkaç günlük veriyle karar vermektir. Küçük örneklemde şans eseri oluşan farklar gerçekmiş gibi görünür. Testi:

1. Yeterli sayıda ziyaretçi ve dönüşüm birikene kadar,
2. Haftanın tüm günlerini kapsayacak makul bir süre boyunca,
3. İstatistiksel anlamlılığa ulaşana kadar sürdürün.

Erken durdurma, testin en sinsi tuzağıdır; "kazanıyor gibi göründü" diye sonlandırılan testler çoğu zaman yanıltır.

5. Sonucu dürüstçe okuyun

Varyant kazandıysa uygulayın. Fark yoksa da değerli bilgi edindiniz demektir: o öğe dönüşümü etkilemiyor, enerjinizi başka yere ayırabilirsiniz. Kaybeden bir test bile "burayı bu yönde değiştirmemem gerekiyormuş" öğretisiyle kâr sayılır.

Nelerin testine değer?

• Ana sayfa ve kategori başlıkları, değer önerisi metinleri.
• Eylem (CTA) butonlarının metni, rengi ve konumu.
• Ürün sayfası düzeni ve görsel sıralaması.
• Ödeme akışı: tek sayfa mı çok adım mı.
• Kargo/iade bilgisinin sunuluş biçimi.

Test için ne kadar trafik gerekir?

Küçük trafikli bir sitede A/B testi yürütmek zordur çünkü anlamlı bir sonuca ulaşmak uzun sürer. Genel bir yaklaşım şudur: mevcut dönüşüm oranınız ve görmeyi umduğunuz iyileşme ne kadar küçükse, gereken örneklem o kadar büyüktür. Çok az ziyaretçiniz varsa, küçük buton değişiklikleri yerine daha büyük etkisi olabilecek köklü değişiklikleri test etmek daha mantıklıdır. Ayrıca ana metrik yerine daha üst huni (sepete ekleme gibi) metrikleri ölçmek, veri birikimini hızlandırır.

Yeterli trafiğiniz yoksa, önce en cesur ve büyük etkili hipotezleri test edin; ince ayarlar için sonra sıra gelir.

Testi doğru koşullarda yürütün

Testin geçerliliği, dış etkenlerin kontrol altında tutulmasına bağlıdır. Şu durumlar sonucu bozabilir:

• Test sırasında başlayan büyük bir indirim ya da kampanya.
• Reklam bütçesinde ani değişiklikler ve bu yüzden gelen farklı kitle.
• Bayram, sezon geçişi gibi davranışı değiştiren özel dönemler.
• Aynı kullanıcının farklı ziyaretlerde farklı versiyon görmesi.

Mümkünse testi mümkün olduğunca "normal" bir dönemde çalıştırın ve bir kullanıcının her zaman aynı versiyonu görmesini sağlayın.

Nitel veriyle niceliği besleyin

A/B testi size "hangi versiyon kazandı" sorusunun cevabını verir ama "neden kazandı" sorusunu her zaman açıklamaz. Bu boşluğu doldurmak için nicel test verisini nitel gözlemle birleştirin. Isı haritaları, kullanıcının nereye tıkladığını ve sayfayı ne kadar aşağı kaydırdığını gösterir. Oturum kayıtları, kullanıcının nerede takıldığını ortaya koyar. Kısa anketler ve gerçek kullanıcılarla yapılan kullanılabilirlik testleri ise "neden" sorusuna doğrudan ışık tutar. Bu iki dünya birleştiğinde, yalnızca kazanan versiyonu değil, kazanma nedenini de öğrenir ve bir sonraki hipotezinizi daha isabetli kurarsınız.

Öğrenmeyi kurumsal hafızaya çevirin

Her testin sonucu, kazansa da kaybetse de kaydedilmelidir. Zamanla oluşan bu birikim, kullanıcılarınız hakkında paha biçilmez bir bilgi bankasına dönüşür. Hangi tür başlıkların işe yaradığı, hangi butonların dönüştürdüğü, hangi akışların terk edildiği — bunlar tek tek küçük görünse de bir araya geldiğinde güçlü bir sezgi ve strateji oluşturur. Test sonuçlarını basit bir belgede tutun: hipotez, ne test edildi, sonuç ve çıkarılan ders.

Sık yapılan hatalar

• Çok küçük örneklemle sonuç ilan etmek.
• Aynı anda çok fazla şey değiştirmek.
• Testi kampanya/indirim gibi dış etkenlerin bozduğu dönemde yapmak.
• İki grubu gerçekten rastgele bölmemek.
• Aynı kullanıcıya farklı ziyaretlerde farklı versiyon göstermek.
• Yalnızca kazananı kutlayıp öğrenmeyi kayıt altına almamak.

A/B testi, e-ticaret optimizasyonunu bir tartışma konusundan bir öğrenme sistemine dönüştürür. Her test, kullanıcılarınızı biraz daha tanımanızı sağlar. Küçük ama düzenli testlerle, zamanla birikimli ve kalıcı bir dönüşüm artışı elde edersiniz. Önemli olan tek bir büyük zafer değil, sürekli öğrenme kültürüdür.