A/B-testing
A/B-testing er et kontrollert forsøk der brukere fordeles tilfeldig mellom to varianter av for eksempel en nettside, e-post eller annonse. Resultatene sammenlignes på et forhåndsdefinert mål.
Hva er A/B-testing?
I en A/B-test får én gruppe variant A og en annen variant B i samme tidsrom. Avtal hovedmålet, ønsket minste effekt og hvordan usikkerhet og testlengde skal vurderes før dere starter.
Metoden brukes i CRO. Variantene kan ha flere forskjeller, men da måler testen den samlede endringen. En multivariat test undersøker kombinasjoner av flere elementer for å skille effektene og samspillet mellom dem.
Et eksempel fra B2B
Tenk deg to versjoner av en demoknapp: «Book demo» versus «Få en 20-minutters gjennomgang». Ellers er siden lik.
Besøkende fordeles tilfeldig mellom knappene. Teamet sammenligner andelen som faktisk bestiller møte etter den avtalte testperioden. Resultatet kan også være for usikkert til å kåre en vinner.
Vanlige feil
- Å stoppe testen for tidlig.
- Å teste uten hypotese eller primær metrikk.
- Å endre flere elementer og hevde at testen viser hvilket enkelt element som ga utslaget.
Nard
Tester som lærer dere noe
Ved lav trafikk anbefaler vi å starte med brukerintervjuer og konkrete problemer på landingssiden. Flere annonsevisninger løser ikke automatisk mangelen på nok konverteringer til en pålitelig test.
Se hvordan vi jobber med annonsering →Kilder
Ofte spurt
Nok til å oppdage en relevant forskjell med akseptabel usikkerhet. Små B2B-sider må ofte vente lenger, eller teste i annonser med høyere volum.
A/B-testing sammenligner to varianter som helheter. Multivariate tester varierer kombinasjoner av flere elementer for å undersøke enkelteffekter og samspill. Det krever vanligvis mer trafikk.
Ja. Emnelinjer og CTA er vanlige tester. Sørg for at listene er store nok og at dere måler riktig handling.