İçeriğe atla
Pazarlama ve ölçüm

A/B testi

A/B testi, iki farklı sürümü aynı dönemde ayrı kitlelere göstererek hangisinin daha iyi sonuç verdiğini rakamla karşılaştırmak için yapılan denemedir.

A/B testinde bir şeyin iki sürümünü hazırlarsınız: A ve B. Örneğin aynı ürün için iki farklı reklam görseli, iki e-posta konu satırı ya da iki farklı buton yazısı. Kitleyi rastgele ikiye bölersiniz; yarısı A'yı, yarısı B'yi görür. Süre bitince hangisinin istediğiniz sonucu, örneğin tıklamayı ya da siparişi daha çok getirdiğine bakarsınız.

Testin değeri, tahmin yerine ölçüm koymasıdır. Hangi cümlenin daha iyi çalışacağı konusunda ekipte herkesin ayrı fikri olabilir; test bu tartışmayı rakamla bitirir. Karşılığında iki kural önemlidir: iki sürüm arasında yalnız bir şey değişmeli ve test, farkın şansa bağlı olmadığını görecek kadar kişiye ulaşmalıdır. Aksi halde sonuç yanıltır ve yanlış karara götürür.

Neden Önemli?

  • Kararları fikre değil veriye dayandırırsınız. Daha iyi çalışan sürüm sizin beğendiğiniz olmayabilir.
  • Küçük değişikliklerin etkisini görebilirsiniz; tek bir başlık ya da görsel sonucu belirgin biçimde değiştirebilir.
  • Kötü çalışan fikri geniş kitleye göstermeden önce küçük bir kitlede fark edersiniz; bütçe boşa gitmez.

Nasıl İşler?

  1. Tek bir soru seçin"Konu satırına ürün adını yazmak açılma oranını yükseltir mi?" gibi net bir soru koyun. Birden fazla şeyi aynı anda sormayın.
  2. Tek bir şeyi değiştirinA ve B arasında yalnızca sınadığınız öğe farklı olsun. Görsel de başlık da değişirse sonucun hangisinden geldiğini bilemezsiniz.
  3. Kitleyi rastgele bölünKişileri iki gruba rastgele ve benzer büyüklükte dağıtın. İki sürüm aynı dönemde yayınlansın ki gün ya da saat farkı sonucu bozmasın.
  4. Yeterince bekleyinBirkaç saatlik ya da birkaç kişilik veriyle karar vermeyin. Önceden belirlediğiniz süre ve kişi sayısı dolana kadar bekleyin.
  5. Kazananı uygulayın ve not edinFark net ise kazanan sürümü kullanın. Farkın çıkmaması da bir sonuçtur. Neyi denediğinizi ve ne bulduğunuzu not edin.

Örnek

Liva Butik, Keten gömlek reklamı için iki görsel hazırlar: A'da gömlek manken üzerinde, B'de düz zeminde. Burak Demir aynı bütçeyi iki reklama eşit böler ve ikisini aynı hafta yayınlar. Selin Kaya yalnız görseli değiştirir, başlık ve fiyat aynı kalır. Hafta sonunda B'nin tıklama oranı biraz yüksektir, ama iki reklamın aldığı tıklama sayısı çok azdır. Burak sonucu kesin saymaz ve testi bir hafta daha uzatır. İkinci haftada fark sürer. Ancak o zaman B'yi ana görsel yapar ve bulguyu not eder.

A/B testi, çok değişkenli test ve önce-sonra karşılaştırması
A/B testiÇok değişkenli testÖnce-sonra karşılaştırma
Ne değişirTek bir öğeBirkaç öğe birlikteGenellikle birden çok şey
KitleAynı anda, iki gruba bölünürAynı anda, çok gruba bölünürFarklı dönemlerdeki aynı kitle
Ne kadar veri isterOrtaÇokAz, ama güvenilirliği düşük
Ne zaman uygunNet bir soruyu sınarkenBüyük trafik varsaHızlı fikir edinmek için

Neyle Karıştırılmamalı?

A/B testi rastgele bir deneme ya da bir ürünü yayına almadan önce çalışıp çalışmadığını kontrol etmek değildir. A/B testinde iki sürüm aynı anda gerçek kitleye gösterilir ve sonuç karşılaştırılır. Sonucu okurken [dönüşüm oranı](/glossary/donusum-orani) ile birlikte bakmak gerekir.

Sık Sorulan Sorular

A/B testi için kaç kişi gerekir?

Sabit bir sayı yoktur. Ne kadar küçük bir fark arıyorsanız o kadar çok kişi gerekir. Mağazalar için pratik kural, testi her iki sürüm için de en azından birkaç yüz kişiye ya da birkaç düzine siparişe ulaşana dek sürdürmektir. Az sayıyla çıkan sonuç çoğunlukla şans eseridir ve tekrarlanmaz.

Aynı anda birden fazla şeyi test edebilir miyim?

Edebilirsiniz, ama o artık A/B testi değil çok değişkenli testtir ve çok daha fazla kitle ister. Küçük bir mağaza için en akıllı yol sırayla ilerlemektir: önce başlığı, sonra görseli, sonra teklifi sınayın. Her turda bir şeyi öğrenir ve bir sonrakine bunu taşırsınız.

Test sonucu net değilse ne yapmalıyım?

Bu da bir bulgudur: sınadığınız şey sonucu fazla etkilemiyor demektir. Testi uzatabilir ya da daha büyük bir değişiklik deneyebilirsiniz. Sonucu yine de tarihi ve koşullarıyla not edin. Kararı gerçek müşteri davranışına bağlamak için dönüşüm oranı ve ROAS gibi ölçüleri de yanında okuyun.

İlgili Terimler