Küçük Dükkanında A/B Test: Hangi Kampanya Daha İyi?
Her hafta test yapmadan yanlış kampanyaya para harcıyorsun — 5 dakikada kurulur, 100 müşteriye kadar ücretsiz.
İki kampanyadan hangisi daha fazla müşteri getiriyor? Bir A/B test bu soruyu sezgiye dayanmadan cevaplar. Müşterilerini rastgele iki gruba bölersin, her gruba farklı bir varyant verirsin ve kim geldi sayarsın. Hesaplama bir bardak altlığına sığar. Burada adım adım yöntemi, kafeden gerçek örnek ve bir farkın ne zaman gerçekten sayıldığını öğreneceksin.
A/B Test Nedir (ve Neden Sezgi Yeterli Değildir)
Müşterilerini rastgele iki gruba bölersin. A Grubu Varyant A'yı alır, örneğin "10 puldan sonra ücretsiz kahve". B Grubu Varyant B'yi alır, örneğin "sonraki alışverişte yüzde 20 indirim". Belirli bir sürenin ardından her gruptan kaç kişinin geri geldiğini sayarsın.
Önemli olan tesadüftür. İndirimi müdavim müşterilere, ücretsiz ürünü yeni müşterilere verirsen, kampanyaları değil müdavim müşterileri yeni müşterilerle karşılaştırırsın. Tesadüf, her iki grubun ortalama olarak eşit olmasını sağlar. Sadece varyant farkı açıklar.
Test olmadan sezgi karar verir: "İndirim iyi gitti, cumartesi çok kalabalıktı." Cumartesinin her zaman kalabalık olduğu göz ardı edilir. A/B test bu sezgiyi bir sayıyla değiştirir.
Kontrol Grubu ile Fark
A/B test iki kampanyayı karşılaştırır. Kontrol grubu bir kampanyayı hiç kampanya olmadığı durumla karşılaştırır. Her ikisi farklı soruları cevaplar:
- Kontrol grubu: Kampanyam hiç işe yarıyor mu, yoksa müşteriler zaten gelir miydi?
- A/B test: İki kampanyadan hangisi daha fazla getiriyor?
Her ikisini bilmek istersen üç grupla çalışırsın: A, B ve kampanya olmayan küçük bir grup. Kontrol grubunun detaylı olarak nasıl işlediğini ve neden bu kadar dürüst olduğunu Pazarlamada Kontrol Grubu yazısında öğrenebilirsin.
Beş Adımda A/B Test
1. Bir soru belirle. Her testte sadece bir şeyi değiştir: ödül, mesaj, saat veya indirim oranı. İki şeyi aynı anda değiştirirsen, sonunda hangisinin işe yaradığını bilemezsin.
2. Rastgele böl. Dijital pul kartlarıyla kolay: çift kart numaraları A Grubuna, tek sayılar B Grubuna. Her iki grup eşit büyüklükte olmalı.
3. Zaman aralığını belirle. Önceden, sonradan değil. Bir kafe için 14 gün yeterli, kuaför için altı hafta daha uygun, çünkü ziyaret aralığı daha uzun.
4. Başarıyı tanımla. Genellikle: zaman aralığında en az bir kez gelen müşterilerin yüzdesi. Alternatif: müşteri başına gelir veya kullanımlar.
5. Değerlendir ve karar ver. Hesaplama şimdi geliyor.
Hesaplama: Kafeden Örnek
300 aktif kartı olan bir kafe, zayıf salı günü için iki push mesajını test ediyor. 150 kart Varyant A'yı alır: "Salı: Her kahveye ücretsiz kurabiye." 150 kart Varyant B'yi alır: "Salı: Her şeyde yüzde 15 indirim."
Dört salı sonra kafe, her gruptan kaç müşterinin en az bir salı geldiğini sayar:
| Grup | Alan | Salı Günü Gelen | Dönüş Oranı |
|---|---|---|---|
| A: Ücretsiz Kurabiye | 150 | 33 | Yüzde 22,0 |
| B: Yüzde 15 İndirim | 150 | 24 | Yüzde 16,0 |
Dönüş oranı formülü:
Dönüş Oranı = Gelen Müşteriler ÷ Alan × 100
Varyant A yüzde 22'de, Varyant B yüzde 16'da. Fark 6 yüzde puan. Başka bir deyişle: Kurabiye, indirimin getirdiğinden yaklaşık yüzde 37 daha fazla müşteri getirdi.
Buna ek olarak: Kurabiye kafenin maliyeti yaklaşık 30 sent, 6 euro'luk bir fatura üzerinde yüzde 15 indirim 90 sent. Varyant A hem daha etkili hem de daha ucuz.
Bir Farkın Ne Zaman Gerçekten Sayıldığı
33'e karşı 24 müşteri kesin görünüyor. Ama grup başına 150 kişide tesadüf bazı müşterileri ileri geri kaydırabilir. Küçük dükkanlar için formül olmadan basit bir kural:
- 3 yüzde puandan az fark: Sonuç yok. Her iki varyant pratik olarak eşit iyi, daha ucuz olanı seç.
- 3 ile 6 yüzde puan arası fark: Bir ipucu, kanıt değil. Testi tekrarla veya zaman aralığını uzat.
- Grup başına en az 100 müşteri ile 6 yüzde puandan fazla fark: Harekete geçmek için yeterince güvenilir.
Gruplar ne kadar küçükse, fark o kadar büyük olmalı. Grup başına 40 müşteri ile 10 yüzde puan bile tesadüf. Bu yüzden küçük dükkanlar için: Çok farklı olan varyantları test et, "yüzde 14'e karşı yüzde 15 indirim" değil. Ve dar bir testi kararını değiştirmeden önce bir kez daha tekrarla.
Küçük Dükkanında Neyi Test Edebilirsin
En iyi testler zaten almak zorunda olduğun kararlar etrafında döner:
- Ödül: Ücretsiz ürün, indirim veya ekstra. Marjına hangi formun uyduğunu Sadakat Programında Doğru Ödül yazısında bulabilirsin.
- Pul sayısı: Ödüle kadar 8 pula karşı 10 pul. Dikkat: Sadece yeni kartlarda test et, mevcut kartları değiştirme.
- Mesaj metni: Tarafsız ("Bugün 2'ye 1") veya kişisel ("Anna, senin salı kahven bekliyor").
- Saat: Sabah 8'de mesaj, 11:30'da mesaj. Öğle müşterileri için bu genellikle içerikten daha büyük fark yaratır.
- Zaman sınırı: Sonu olmayan kampanya, "sadece 14:00'e kadar". Bu tür kısa teklifler için örnekler Flash Kampanyalar altında bulabilirsin.
Kendi Testini Kontrol Et: Adil mi?
Bu soruları Evet veya Hayır ile cevapla:
- Soruyu (neyi test ettiğimi) başlamadan önce belirledim mi?
- Her iki grup eşit büyüklükte ve rastgele bölünmüş mü?
- Zaman aralığını önceden belirledim ve bunu sürdürdüm mü?
- Sadece bir şeyi değiştiriyorum mu (ödül, mesaj, saat)?
- Ekibim her iki grubu eşit muamele ediyor mu (bir varyantı fazla bahsetmiyor)?
- Önceden belirlenmiş ölçüte göre değerlendiriyorum mu (sonradan değiştirilmiyor)?
Her Hayır sonucu testi değersiz kılar. Adil bir test istatistik değil, disiplin gerektirir.
Her Testi Değersiz Kılan Üç Hata
Soruyu sonradan değiştirmek. Dönüş oranı fark göstermezse, aniden gelir karşılaştırılır, o da uymazsa fatura tutarı. Başarı ölçütünü önceden belirle ve buna sadık kal.
Bir varyant öne geçer geçmez testi durdurmak. Üçüncü günde A öncü, onuncu günde B. Belirlenmiş zaman aralığını tamamla.
Grupları eşit olmayan şekilde muamele etmek. Ekip kurabiye kampanyasını kasada bahsederse, indirimi bahsetmezse, kampanyayı değil ekibi test edersin.
Hiçbir Şey Değiştirmezsen Ne Olur
Test olmadan her kampanya sezgiye göre çalışır. Yüzde 15 indirim verirsin, çünkü doğru hissettiriyor, oysa ücretsiz kurabiye daha fazla müşteri getiriyor ve daha az maliyeti var. Her hafta test yapmadan yanlış kampanyaya para harcıyorsun. Hiç karşılaştırmadığın için fark etmezsin.
Bir A/B test ile iki hafta sonra hangi varyantın işe yaradığını bilirsin. Para tasarrufu yaparsın, daha fazla müşteri getirirsin ve kararları sezgi yerine sayılarla alırsın.
Sonuç
Küçük dükkanında A/B test bilim değil, disiplindir: bir soru, rastgele gruplar, sabit zaman aralığı, bir hesaplama. Dijital pul kartlarıyla kart numaralarını bölme ve taramaları değerlendirme için zaten kontrol panelinde var. Şimdi başla: stampa ile test 5 dakikada kurulur, ücretsiz 100 aktif müşteriye kadar, kredi kartı gerektirmez, aylık iptal edilebilir.