A/B testing
Laatst aangepast: 17-08-2023Een A/B test is een vorm van splittesten waarin je meerdere varianten tegen elkaar kunt testen, om te zien welke variant de beste conversie heeft. Het doel is om middels de test te meten welke voorgestelde donatiebedragen het meeste opleveren en daardoor de conversie te verhogen.
Inhoud artikel
Zie hier ook de uitleg zoals gegeven op de Kentaa Academy van 20 januari 2022
Baseline
Instellen donatiebedragen
Je kunt binnen het Kentaaplatform A/B testen op de donatieflow. Via Instellingen > Instellen donatiebedragen kun je verschillende voorgestelde donatiebedragen instellen. Het huidige ingestelde bedrag is je baseline. De baseline is de basis waarvan je meet en waarmee je de splittesten vergelijkt.
Als iemand een donatie doet dan zie je de voorgestelde donatiebedragen:
Daar kunnen ook nog teksten in staan om meer duiding te geven wat je met het bedrag doet. Bijvoorbeeld:
Bij het aanpassen van de donatiebedragen moet je onderaan aangeven of je de huidige baseline wilt behouden, of dat je een nieuwe baseline wilt maken.
Als je een nieuwe baseline aanmaakt dan begint deze vanaf dat moment met meten. Alle resultaten daarvan zie je via Instellingen > A/B testing. Als je de huidige baseline behoudt dan worden de aanpassingen wel meegenomen, maar blijft de baseline qua meting intact. Dat is handig als je bijvoorbeeld een typfoutje gemaakt hebt en die aan wilt passen.
Informatie over baseline
Als je naar Instellingen > A/B testing gaat zie je de huige baseline altijd bovenaan staan:
Je ziet hier:
- Actief sinds
Het moment waarop de gekozen bedragen in zijn gesteld - Gekozen bedragen
De gekozen donatiebedragen. Als je eroverheen beweegt zie je ook de omschrijving - Aantal bezoeken
Het aantal bezoekers dat op het donatieformulier is gekomen - Aantal donaties
Het aantal keren dat de donatie is afgerond - Conversie
Het percentage bezoekers die de donatie afronden - Gemiddeld donatiebedrag
Het gemiddelde bedrag dat gedaan wordt per donatie - Dagen actief
Het aantal dagen waarop deze donatiebedragen zo staan - Prestatie
Je ziet hier of dat het de baseline of een splittestgroep is
Je kunt op het tandwieltje en vervolgens op details bekijken om meer specifieke informatie over de donaties te zien:
Dat is allemaal informatie over de huidige baseline.
A/B test
Instellen test
Je start een A/B test door op "start A/B test" te klikken. Alle huidige ingestelde gegevens worden dan automatisch ingevuld:
In de A/B test kunnen varianten worden opgeven voor:
- de bedragen
- de volgorde van de bedragen
- de mouse-over tekst.
Je kunt twee typen A/B test doen:
- Testen tegen huidige baseline
Hierbij wijzig je alleen Groep A of Groep B, waardoor je test tegen de huidige baseline - Twee aparte groepen testen
Hierbij wijzig je zowel Groep A als B, waarbij je twee nieuwe groepen tegen elkaar test.
Vanaf dat moment zien donateurs random de voorgestelde bedragen die bij Groep A of B horen. Stel je hebt deze bedragen ingesteld:
En je klikt op opslaan dan begint de test:
Vanaf dat moment krijgen bezoekers die naar het donatieformulier gaan ofwel de donatiebedragen zoals die bij A ingesteld staan te zien, of van B. Die krijg je random te zien. Je kunt de voorgestelde donatiebedragen niet aanpassen terwijl er een A/B test loopt.
Resultaten test
Je kunt een test zelf afbreken door naar het tandwieltje boven de test te gaan en te kiezen voor 'Afbreken'. En anders wordt deze automatisch gestopt als er 100 donaties gedaan zijn aan beide groepen. Omdat je random een groep kunt krijgen kan het zijn dat er aan de ene groep bijvoorbeeld 130 donaties gedaan zijn en bij de andere 100.
Als de test gestopt is dan komen de resultaten hiervan in de geschiedenis te staan, zoals bijvoorbeeld bij deze test die handmatig af is gebroken:
Het interpreteren van de resultaten is ook belangrijk. Het kan lijken dat een bepaalde groep beter resultaat oplevert, maar als er een hele hoge donatie bij de ene groep zit vertekent dat het beeld. We adviseren deze kritisch te bekijken en je kunt ervoor kiezen een van de groepen die een betere conversie heeft in te stellen als nieuwe baseline via Instellingen > Instellen donatiebedragen.