Kazı kazan mı daha iyi, çark mı? Daha büyük bir ödül daha fazla kayıt mı getirir, yoksa sadece daha fazla ödül avcısı mı? Telefon numarası istemeli misiniz, istememeli misiniz? Bunu öğrenmenin en güvenilir yolu kampanyalarınızı A/B testine tabi tutmaktır. Tahmin yürütmek yerine iki versiyonu birbiriyle karşılaştırılabilir kişi gruplarına gösterir, kararı sonuçlara bırakırsınız.
Bu rehberde önce neyi test etmeniz gerektiğini, kaç kişiye ihtiyacınız olduğunu, ödül, format ve form testlerini nasıl kuracağınızı ve sonuçları kendinizi kandırmadan nasıl okuyacağınızı anlatıyoruz.
Kampanyalarda A/B testi: temel bilgiler
A/B testi, tek bir noktada farklılaşan iki versiyonu karşılaştırır. A versiyonu mevcut kampanyanızdır (kontrol grubu). B versiyonu ise ödül gibi tek bir şeyi değiştirir. Geri kalan her şey aynı kalır: hedef kitle, zamanlama, kanal ve tasarım.
Bir testi yapmaya değer kılan üç kural vardır:
- Her seferinde tek bir şeyi değiştirin. Hem ödülü hem formatı değiştirirseniz farkı hangisinin yarattığını bilemezsiniz.
- Kitleyi rastgele bölün. İki grup birbiriyle karşılaştırılabilir olmalıdır. Masaüstü ve mobil ya da pazartesi ve cuma ayrımı rastgele bir bölme değildir.
- Metriği başlamadan önce belirleyin. Kazananı belirleyecek tek bir sayı seçin; örneğin kayıt oranı (kayıtlar ÷ ziyaretler).
Oyunlaştırılmış bir kampanyada trafik nasıl bölünür?
Scratcher'da yerleşik bir A/B bölme özelliği bulunmuyor. Bu nedenle testi, kampanyanın iki kopyasını oluşturup trafiği kişileri kampanyaya yönlendiren kanalda bölerek yürütürsünüz. Bu, çoğu zaman zaten en temiz kurulumdur:
- Bülten. Çoğu e-posta aracı bir gönderimi rastgele bölebilir. Bir versiyona A kampanyasının, diğerine B kampanyasının bağlantısını koyun.
- Ücretli sosyal medya ve arama reklamları. Aynı hedefleme ve bütçeye sahip, her biri kendi kampanyasına bağlanan iki reklam ya da reklam seti oluşturun. Birçok reklam platformunun bunun için kendi bölünmüş test özelliği vardır.
- QR kodları ve basılı materyaller. Aynı mağazalarda dönüşümlü afiş, broşür veya fişlerde iki farklı QR kodu kullanın.
- Web sitesi pop-up'ları. Pop-up'ları sayfaya, alan adına ve cihaza göre hedefleyebilirsiniz; bu yüzden en temiz test, karşılaştırılabilir sayfalar veya bölümler arasında yapılır. Sonucu rastgele bir bölmeye göre biraz daha temkinli değerlendirin.
Bunların hiçbiri mümkün değilse A ve B'yi art arda gelen dönemlerde yayınlayabilirsiniz. Bu en zayıf seçenektir, çünkü mevsimler, hafta günleri ve başka yerlerde yürüyen kampanyalar sonucu etkiler. Bu yüzden yalnızca büyük farklar için kullanın.
Önce neyi test etmeli?
Neredeyse her şeyi test edebilirsiniz, ancak bazı değişiklikler diğerlerinden çok daha önemlidir. En çok kişiyi etkileyen ve en çok paraya mal olan kararlarla başlayın:
- Ödül. Kazanılabilecek şey, genellikle katılımı belirleyen en büyük etkendir.
- Form. Alan sayısı, oyunculardan kaçının kayda dönüşeceğini belirler.
- Format. Hızlı bir şans oyunu mu, yoksa bilgi yarışması ya da beceri oyunu mu?
- Davet. İnsanları başlamaya teşvik eden başlık, buton metni veya e-posta konu satırı.
- Pop-up'lar için zamanlama ve yerleşim: belirli bir gecikmeden sonra, kaydırmada, çıkış niyetinde veya tıklamada.
Renkleri ve küçük metin değişikliklerini sonraya bırakın. Kampanya ölçeğindeki kitlelerde, bunlar sonucu ölçülebilecek kadar nadiren değiştirir.
Örneklem büyüklüğünün temelleri
En yaygın test hatası, kazananı çok erken ilan etmektir. Küçük sayılarda rastgele dalgalanmalar bir versiyonu kolayca daha iyi gösterebilir.
Kaç kişiye ihtiyacınız olduğu üç şeye bağlıdır:
- Mevcut dönüşüm oranınız. Eylem ne kadar nadirse o kadar çok kişiye ihtiyacınız olur.
- Önemsediğiniz en küçük fark. Küçük bir artışı tespit etmek, büyük bir artışı tespit etmekten çok daha fazla ziyaretçi gerektirir.
- Ne kadar emin olmak istediğiniz. Çoğu test %95 güven düzeyi kullanır.
Hesabı elle yapmanıza gerek yok. Evan Miller'ın örneklem büyüklüğü hesaplayıcısı gibi ücretsiz bir araç, versiyon başına kaç ziyaretçiye ihtiyacınız olduğunu söyler. Mevcut dönüşüm oranınızı ve harekete geçmenizi sağlayacak en küçük artışı girmeniz yeterli.
Çıkan sonuç alacağınızdan daha fazla trafik gerektiriyorsa belirsiz bir test yürütmeyin. Bunun yerine daha büyük bir değişikliği test edin ya da testi birkaç kampanyada birleştirin.
Ücretsiz A/B test hesaplayıcısı, ihtiyacınız olan örneklem büyüklüğünü hesaplar ve test bittiğinde farkın gerçek olup olmadığını söyler.
Ödüllü ve ödülsüz versiyonu test etmek
Hangi ödülün en iyi çalıştığını test etmeden önce, ödülün hedef kitleniz için önemli olup olmadığını test etmek faydalı olabilir. Örneğin:
- A: Herkesin küçük bir indirim kodu kazandığı bir çark
- B: Aynı çark, ancak indirim kodu yerine tüm katılımcılar için bir büyük ödül çekilişi
Yalnızca kayıtlara bakmayın. Sadece ödülü isteyen pek çok kişiyi çeken bir ödül, size sonrasında etkileşimi düşük, uzun bir liste bırakabilir. Kampanyadan sonra her iki grubu birkaç hafta takip edin ve şunları karşılaştırın:
- E-posta açılma ve tıklama oranları
- Abonelikten çıkmalar
- Satın almalar veya kod kullanımları
Scratcher'da ödülleri ayrıntılı biçimde kontrol edersiniz: anında kazanmalar, çekilişler, benzersiz indirim kodları ve barkodlar, her birinden kaç tane ve ne zaman kazanılabileceği. Bu sayede A ile B arasında diğer her şeyi aynı tutmak kolaylaşır.
Birbirine karşı test etmeye değer ödül fikirleri:
- Kendi ürününüz ve hediye kartı
- Tek bir büyük ödül ve çok sayıda küçük ödül
- Herkese indirim kodu ve birkaç kişiye çekiliş
- Teselli ödülü olan ve olmayan versiyon
Formatı test etmek
Format, insanların markanızla ne kadar zaman geçirdiğini ve onlar hakkında ne öğrendiğinizi etkiler. Tipik karşılaştırmalar:
- Kazı kazan ve çarkı çevir. İkisi de hızlı şans oyunlarıdır. Daha fazla kayıt istiyorsanız iyi bir ilk test.
- Şans oyunu ve bilgi yarışması. Bilgi yarışması daha uzun sürer ama insanlara ürünlerinizi tanıtır; verilen cevaplar da size neleri sevdiklerini gösterir.
- Tek oyun ve takvim. Takvim, insanları defalarca geri getirir. Yalnızca ilk gün sayılarını değil, toplam kayıtları ve tekrar ziyaretleri karşılaştırın.
Formatları test ederken ödülü, formu ve daveti aynı tutun. 40'tan fazla format arasından seçim yapın ve tasarımın sonucu çarpıtmaması için her iki versiyonda aynı şablon stilini kullanın.
Form uzunluğunu test etmek
Eklediğiniz her alan size bazı katılımcılara mal olur. Ancak telefon numarası veya doğum günü gibi bazı alanlar bu kayba değebilir. Test, değip değmediğini size gösterir.
Örnek test:
- A: Ad ve e-posta
- B: Ad, e-posta ve telefon numarası
Her ikisini de ölçün:
- Kayıt oranı (kayıtlar ÷ oyuncular)
- Kayıt başına değer. Telefon numarası SMS ile satış yapmanızı sağlıyorsa B, hacimde kaybetse bile değerde kazanabilir.
Tek farkın ek alan olması için onay metnini her iki versiyonda da aynı tutun.
Sonuçları okumak
Test planladığınız örneklem büyüklüğüne ulaştığında iki versiyonu, başta seçtiğiniz metrik üzerinden karşılaştırın.
- Anlamlılığı kontrol edin. Farkın gerçek olma olasılığını görmek için aynı hesaplayıcıyı veya bir anlamlılık hesaplayıcısını kullanın.
- Hunin tamamına bakın. Ziyaretler → oyuncular → kayıtlar → takip eylemleri. Bir versiyon bir adımda kazanıp sonrakinde kaybedebilir.
- Sürprizleri kontrol edin. Reklamlardan biri daha fazla bütçe mi aldı? E-postalardan biri daha çok spam klasörüne mi düştü? Bölme adil değilse sonuç da adil değildir.
- Öğrendiklerinizi not edin, kazanan olmasa bile. "Ödül fark yaratmadı" da faydalı bir sonuçtur.
Scratcher'ın istatistikleri, her kampanya için ziyaretleri, oyuncuları, kayıtları ve kazananları, insanların nereden geldiğiyle birlikte neredeyse gerçek zamanlı olarak gösterir. A ve B ayrı kampanyalar olduğu için onları yan yana karşılaştırabilirsiniz. Her ikisini Google Analytics'te veya reklam platformunuzda da takip edebilirsiniz. Takip etmeye değer metriklerin tam listesi için oyunlaştırma pazarlaması KPI'ları yazımıza göz atın.
Test kaydı şablonu
Ekibin aynı testleri tekrarlamak yerine zamanla bilgi biriktirmesi için her testin basit bir kaydını tutun. Bu yapıyı bir elektronik tabloya kopyalayın:
| Alan | Örnek |
|---|---|
| Test adı | Ödül: indirim kodu ve büyük ödül çekilişi |
| Hipotez | Herkese indirim kodu, büyük ödül çekilişinden daha fazla kayıt getirir |
| A versiyonu | Çark, herkese %10 indirim kodu |
| B versiyonu | Çark, 500 € değerinde bir hediye kartı için çekiliş |
| Birincil metrik | Kayıt oranı (kayıtlar ÷ ziyaretler) |
| İkincil metrikler | Kod kullanımları, 30 gün sonraki e-posta tıklamaları |
| Trafik bölme | Bülten, rastgele 50/50 bölme |
| Gereken örneklem büyüklüğü | Hesaplayıcıdan |
| Başlangıç ve bitiş tarihleri | [tarihler] |
| Sonuç | [A / B / belirgin fark yok] |
| Sonraki adımımız | [karar] |
Tek bir testle başlayın
Başlamak için bir test programına ihtiyacınız yok. Bir sonraki kampanyanızı seçin, en emin olmadığınız kararı (genellikle ödül) belirleyin ve trafiği bülteninizde veya reklamlarınızda bölün. İyi kurgulanmış tek bir test, on tahminden daha fazlasını öğretir.
Web sitesi ziyaretçilerini dönüştürmek için daha fazla fikir mi istiyorsunuz? Yüksek dönüşüm sağlayan pop-up'lar rehberimizi okuyun, oyunlu pop-up'ların nasıl çalıştığını görün ya da Scratcher'ı 14 gün ücretsiz deneyin ve A ile B versiyonlarınızı bugün oluşturun.
