Vai skrāpējamā kartīte ir labāka par ratu? Vai lielāka balva piesaista vairāk reģistrāciju vai tikai vairāk balvu mednieku? Vai prasīt tālruņa numuru vai ne? Kampaņu A/B testēšana ir drošākais veids, kā to noskaidrot. Tā vietā, lai minētu, jūs parādāt divas versijas salīdzināmām cilvēku grupām un ļaujat izšķirt rezultātiem.
Šajā ceļvedī paskaidrots, ko testēt vispirms, cik daudz cilvēku nepieciešams, kā iestatīt balvu, formātu un formu testus un kā interpretēt rezultātus, nemaldinot sevi.
Kampaņu A/B testēšana: pamati
A/B tests salīdzina divas kaut kā versijas, kas atšķiras vienā aspektā. Versija A ir jūsu pašreizējā kampaņa (kontrolversija). Versijā B tiek mainīta viena lieta, piemēram, balva. Viss pārējais paliek nemainīgs: auditorija, laiks, kanāls un dizains.
Trīs noteikumi padara testu vērtīgu:
- Mainiet vienu lietu vienlaikus. Ja maināt gan balvu, gan formātu, jūs nezināsiet, kas tieši radīja atšķirību.
- Sadaliet auditoriju nejauši. Abām grupām jābūt salīdzināmām. Dators pret mobilo vai pirmdiena pret piektdienu nav nejauša sadale.
- Izvēlieties rādītāju pirms sākuma. Nosakiet vienu skaitli, kas izšķirs uzvarētāju, piemēram, reģistrāciju īpatsvaru (reģistrācijas ÷ apmeklējumi).
Kā sadalīt datplūsmu spēļotai kampaņai
Scratcher nav iebūvētas A/B sadales, tāpēc testu veicat, izveidojot divas kampaņas kopijas un sadalot datplūsmu kanālā, kas cilvēkus tur novirza. Bieži vien tas tik un tā ir tīrākais risinājums:
- Jaunumu vēstule. Lielākā daļa e-pasta rīku ļauj nejauši sadalīt izsūtni. Vienā versijā ievietojiet saiti uz kampaņu A, otrā – uz kampaņu B.
- Maksas sociālie mediji un meklēšana. Izveidojiet divas reklāmas vai reklāmu kopas ar vienādu mērķauditoriju un budžetu, katru ar saiti uz savu kampaņu. Daudzām reklāmu platformām šim nolūkam ir sava testēšanas funkcija.
- QR kodi un drukātie materiāli. Izmantojiet divus QR kodus uz pārmaiņus izvietotiem plakātiem, skrejlapām vai čekiem tajos pašos veikalos.
- Vietnes uznirstošie logi. Uznirstošos logus var mērķēt pēc lapas, domēna un ierīces, tāpēc tīrākais tests ir starp salīdzināmām lapām vai sadaļām. Šādu rezultātu vērtējiet nedaudz piesardzīgāk nekā nejaušas sadales rezultātu.
Ja neviena no šīm iespējām nav pieejama, A un B var palaist secīgos periodos. Tā ir vājākā iespēja, jo rezultātu ietekmē sezonas, nedēļas dienas un citas kampaņas, tāpēc izmantojiet to tikai lielu atšķirību pārbaudei.
Ko testēt vispirms
Testēt var gandrīz jebko, taču dažas izmaiņas ir daudz nozīmīgākas par citām. Sāciet ar lēmumiem, kas ietekmē visvairāk cilvēku un izmaksā visdārgāk:
- Balva. Tas, ko cilvēki var laimēt, parasti visvairāk nosaka dalību.
- Forma. Lauku skaits nosaka, cik spēlētāju kļūs par reģistrētiem.
- Formāts. Ātra veiksmes spēle pret viktorīnu vai prasmju spēli.
- Ielūgums. Virsraksts, pogas teksts vai e-pasta temats, kas mudina sākt.
- Laiks un novietojums uznirstošajiem logiem: pēc aiztures, ritinot, pirms aiziešanas vai pēc klikšķa.
Krāsas un sīkas teksta izmaiņas atlieciet uz vēlāku laiku. Ar kampaņas lieluma auditoriju tās reti ietekmē rezultātu tik daudz, lai to varētu izmērīt.
Izlases lieluma pamati
Visbiežākā testēšanas kļūda ir pasludināt uzvarētāju pārāk agri. Ar maziem skaitļiem nejaušs troksnis viegli var likt vienai versijai izskatīties labākai.
Nepieciešamais cilvēku skaits ir atkarīgs no trim lietām:
- Jūsu pašreizējais konversijas rādītājs. Jo retāka darbība, jo vairāk cilvēku nepieciešams.
- Mazākā jums būtiskā atšķirība. Lai konstatētu nelielu pieaugumu, vajag daudz vairāk apmeklētāju nekā lielam.
- Cik pārliecināti vēlaties būt. Lielākā daļa testu izmanto 95 % ticamību.
Aprēķini nav jāveic ar roku. Bezmaksas rīks, piemēram, Evan Miller izlases lieluma kalkulators, parāda, cik apmeklētāju nepieciešams katrai versijai. Ievadiet pašreizējo konversijas rādītāju un mazāko pieaugumu, uz kura pamata rīkotos.
Ja izrādās, ka vajag vairāk datplūsmas, nekā jums būs, neveiciet neskaidru testu. Tā vietā testējiet lielāku izmaiņu vai apvienojiet testu vairākās kampaņās.
Bezmaksas A/B testa kalkulators aprēķina nepieciešamo izlases lielumu un pēc testa pasaka, vai atšķirība ir reāla.
Testēšana: balva pret bez balvas
Pirms testējat, kura balva darbojas vislabāk, ir vērts pārbaudīt, vai balvai jūsu auditorijai vispār ir nozīme. Piemēram:
- A: Rats, kurā ikviens laimē nelielu atlaides kodu
- B: Tas pats rats ar galvenās balvas izlozi visiem dalībniekiem un bez atlaides koda
Skatieties ne tikai uz reģistrācijām. Balva, kas piesaista daudz cilvēku, kuri vēlas tikai balvu, var dot garu sarakstu ar zemu iesaisti pēc tam. Dažas nedēļas pēc kampaņas sekojiet abām grupām un salīdziniet:
- E-pastu atvēršanas un klikšķu rādītājus
- Abonēšanas atteikumus
- Pirkumus vai kodu izmantošanu
Scratcher ļauj detalizēti pārvaldīt balvas: tūlītējos laimestus, izlozes, unikālus atlaides kodus un svītrkodus, kā arī to, cik daudz no katra var laimēt un kad. Tas ļauj viegli saglabāt visu pārējo identisku starp A un B.
Balvu idejas, kuras vērts salīdzināt:
- Jūsu produkts pret dāvanu karti
- Viena liela balva pret daudzām mazām
- Atlaides kods visiem pret izlozi dažiem
- Mierinājuma balva pret bez mierinājuma balvas
Formāta testēšana
Formāts ietekmē, cik ilgi cilvēki pavada laiku ar jūsu zīmolu un ko jūs par viņiem uzzināt. Tipiski salīdzinājumi:
- Skrāpējamā kartīte pret „Griez ratu”. Abas ir ātras veiksmes spēles. Labs pirmais tests, ja vēlaties vairāk reģistrāciju.
- Veiksmes spēle pret viktorīnu. Viktorīna aizņem vairāk laika, taču iepazīstina cilvēkus ar jūsu produktiem, un atbildes atklāj, kas viņiem patīk.
- Viena spēle pret kalendāru. Kalendārs liek cilvēkiem atgriezties daudzas reizes. Salīdziniet kopējo reģistrāciju skaitu un atkārtotus apmeklējumus, ne tikai pirmās dienas skaitļus.
Testējot formātus, saglabājiet balvu, formu un ielūgumu identisku. Izvēlieties no vairāk nekā 40 formātiem un abām versijām izmantojiet vienādu veidnes stilu, lai dizains neizkropļotu rezultātu.
Formas garuma testēšana
Katrs pievienotais lauks atbaida daļu dalībnieku. Taču daži lauki, piemēram, tālruņa numurs vai dzimšanas diena, var būt šī krituma vērti. Testēšana parāda, vai tā ir.
Testa piemērs:
- A: Vārds un e-pasts
- B: Vārds, e-pasts un tālruņa numurs
Mēriet abus:
- Reģistrāciju īpatsvaru (reģistrācijas ÷ spēlētāji)
- Vienas reģistrācijas vērtību. Ja tālruņa numurs ļauj pārdot ar SMS palīdzību, B var uzvarēt vērtības ziņā, pat ja zaudē apjoma ziņā.
Abās versijās saglabājiet vienādu piekrišanas tekstu, lai vienīgā atšķirība būtu papildu lauks.
Rezultātu interpretēšana
Kad tests sasniedzis plānoto izlases lielumu, salīdziniet abas versijas pēc iepriekš izvēlētā rādītāja.
- Pārbaudiet nozīmīgumu. Izmantojiet to pašu kalkulatoru vai nozīmīguma kalkulatoru, lai redzētu, vai atšķirība, visticamāk, ir reāla.
- Skatiet visu piltuvi. Apmeklējumi → spēlētāji → reģistrācijas → turpmākās darbības. Versija var uzvarēt vienā posmā un zaudēt nākamajā.
- Meklējiet pārsteigumus. Vai vienai reklāmai bija lielāks budžets? Vai viens e-pasts biežāk nonāca surogātpasta mapē? Ja sadale nebija godīga, arī rezultāts nav.
- Pierakstiet, ko uzzinājāt, pat ja uzvarētāja nav. „Balva neradīja atšķirību” ir noderīgs rezultāts.
Scratcher statistika gandrīz reāllaikā rāda katras kampaņas apmeklējumus, spēlētājus, reģistrācijas un uzvarētājus, kā arī to, no kurienes cilvēki atnākuši. Tā kā A un B ir atsevišķas kampaņas, tās var salīdzināt blakus. Abas varat sekot arī Google Analytics vai savā reklāmu platformā. Pilnu sekošanas vērtu rādītāju sarakstu atradīsiet mūsu rakstā par spēļošanas mārketinga KPI.
Testu žurnāla veidne
Vediet vienkāršu žurnālu par katru testu, lai komanda laika gaitā uzkrātu zināšanas, nevis atkārtotu tos pašus testus. Nokopējiet šo struktūru izklājlapā:
| Lauks | Piemērs |
|---|---|
| Testa nosaukums | Balva: atlaides kods pret galvenās balvas izlozi |
| Hipotēze | Atlaides kods visiem dod vairāk reģistrāciju nekā galvenās balvas izloze |
| Versija A | Rats, 10 % kods visiem |
| Versija B | Rats, izloze par vienu 500 € dāvanu karti |
| Galvenais rādītājs | Reģistrāciju īpatsvars (reģistrācijas ÷ apmeklējumi) |
| Papildu rādītāji | Kodu izmantošana, e-pastu klikšķi pēc 30 dienām |
| Datplūsmas sadale | Jaunumu vēstule, nejauša sadale 50/50 |
| Nepieciešamais izlases lielums | No kalkulatora |
| Sākuma un beigu datumi | [datumi] |
| Rezultāts | [A / B / nav skaidras atšķirības] |
| Ko darīsim tālāk | [lēmums] |
Sāciet ar vienu testu
Lai sāktu, nav vajadzīga testēšanas programma. Paņemiet savu nākamo kampaņu, izvēlieties vienu lēmumu, par kuru esat vismazāk pārliecināti – parasti tā ir balva –, un sadaliet datplūsmu savā jaunumu vēstulē vai reklāmās. Viens labs tests iemāca vairāk nekā desmit minējumi.
Vēlaties vairāk ideju, kā konvertēt vietnes apmeklētājus? Izlasiet mūsu ceļvedi par augstas konversijas uznirstošajiem logiem, uzziniet, kā darbojas spēļu uznirstošie logi, vai izmēģiniet Scratcher bez maksas 14 dienas un izveidojiet versiju A un B jau šodien.
