AB test calculator – Statistische Significantie Berekenen

Q: Waar staat AB testen voor?

In een AB test vergelijk je twee varianten tegen elkaar: variant A en variant B. A is het origineel (ook bekend als de controlepagina) en B is een duplicatie van A, maar met een kleine wijziging. Het is ook mogelijk om meer varianten te testen (C, D, E … enz.), maar voor statistisch significante resultaten raden we aan om A tegen B te testen.

Q: Hoe voer je een AB test uit?

Om een AB test uit te voeren heb je een originele of controlepagina (variant A) nodig. Als je variant A klaar hebt, moet je deze dupliceren en vervolgens iets kleins op de pagina aanpassen voor het maken van variant B. Dit kan een klein stukje tekst zijn, een header, een knop, een call-to-action of de kleur of stijl van het gebruikte lettertype. Gedurende een periode van niet minder dan een week moet je deze twee varianten aan een vergelijkbaar publiek laten zien. Aan de hand van de gegevens, die in de loop van de week zijn verzameld, kun je bepalen welke variant de hoogste conversie genereert en dus de winnende variant is.

Q: Voor hoe lang moet een AB test worden uitgevoerd?

Je moet een AB test uitvoeren zo lang als nodig is om statistisch significante resultaten te krijgen. Het aantal gebruikerssessies is cruciaal. Als een webpagina 1 miljoen bezoekers per dag heeft, kan de AB test binnen enkele uren duidelijke resultaten opleveren. Voor een webpagina, die 2 bezoekers per dag ontvangt, kan het een jaar duren voordat statistisch significante resultaten worden weergegeven. Gebruikersgedrag verschilt doorgaans gedurende de week, daarom raden we aan om gedurende ten minste een volledige week AB tests uit te voeren.

Q: Wat is statistische significantie?

Statistische significantie is de waarschijnlijkheid dat de reden waarom de ene variant sterker is dan de andere, wordt veroorzaakt door iets anders dan toeval. Het betekent dat je er betrouwbaar van kunt uitgaan dat de winnende variant sterker is vanwege de wijzigingen die je hebt aangebracht.

Een AB test uitvoeren in 4 stappen

Een AB test is een experiment waarbij twee versies (A en B) van een pagina worden vergeleken. De twee pagina's, die worden vergeleken, moeten identiek zijn, met uitzondering van één variant die het gedrag van een gebruiker kan beïnvloeden. Het doel van de test is om te bepalen welke pagina beter presteert.

Stap 1

Voer het aantal bezoekers en totale conversies in voor variant A

Stap 2

Voer het aantal bezoekers en totale conversies in voor variant B (en C en D indien nodig)

Stap 3

Selecteer Berekenen om de varianten te vergelijken

Stap 4

In het resultatenvak zie je welke variant de winnaar is

Hoe je een AB test kunt uitvoeren

Om een AB test uit te voeren, moet je twee pagina’s (pagina A en pagina B) vergelijken met elk een ander afzonderlijk element. Pagina A is de originele pagina en staat bekend als de controlepagina. Pagina B moet identiek zijn aan pagina A, maar met een kleine aanpassing.

De beste elementen om aan te passen, zijn degenen die conversies stimuleren en je bezoekers tot actie aanzetten. Om een statistisch significant testresultaat te krijgen, moet je slechts ÉÉN element op de pagina tegelijk wijzigen. Als je meerdere elementen wijzigt, weet je niet welke wijziging heeft gewerkt en welke niet.

Gemeenschappelijke elementen om te wijzigen, zijn onder meer:

Headline
CTA-knop
Ad copy
Product copy
Afbeelding

Binnen al deze elementen zou je ook kunnen overwegen om wijzigingen aan te brengen aan:

de kleur
het lettertype
het ontwerp

De pagina, die hogere conversies oplevert, is de winnende variant. Hoe meer je je pagina optimaliseert, hoe hoger je conversieratio zal zijn.

Als je pagina’s klaar zijn, moet de helft van je verkeer naar de controlepagina (pagina A) worden geleid en de andere helft naar de gewijzigde pagina (pagina B).

Wat is een A/B betrouwbaarheidsscore?

De betrouwbaarheidsscore is een manier om de betrouwbaarheid van een schatting te meten. Als de betrouwbaarheidsscore hoog is, betekent dit dat de resultaten statistisch significant zijn, en je er op kunt vertrouwen dat deze resultaten het gevolg zijn van de wijzigingen die je hebt aangebracht, en niet alleen het resultaat zijn van een willekeurig toeval.

95-100%	Je AB test is statistisch significant, gefeliciteerd! Je moet de winnende variant implementeren.
90-95%	Je AB test is waarschijnlijk niet statistisch significant. Je kunt de winnende variant voorzichtig implementeren, maar het is veiliger om eerst een andere AB test te proberen.
<90%	Je AB test is niet statistisch significant. Implementeer de winnende variant niet.

Veel gestelde vragen

Waar staat AB testen voor?

In een AB test vergelijk je twee varianten tegen elkaar: variant A en variant B. A is het origineel (ook bekend als de controlepagina) en B is een duplicatie van A, maar met een kleine wijziging. Het is ook mogelijk om meer varianten te testen (C, D, E … enz.), maar voor statistisch significante resultaten raden we aan om A tegen B te testen.

Hoe voer je een AB test uit?

Om een AB test uit te voeren heb je een originele of controlepagina (variant A) nodig. Als je variant A klaar hebt, moet je deze dupliceren en vervolgens iets kleins op de pagina aanpassen voor het maken van variant B. Dit kan een klein stukje tekst zijn, een header, een knop, een call-to-action of de kleur of stijl van het gebruikte lettertype. Gedurende een periode van niet minder dan een week moet je deze twee varianten aan een vergelijkbaar publiek laten zien. Aan de hand van de gegevens, die in de loop van de week zijn verzameld, kun je bepalen welke variant de hoogste conversie genereert en dus de winnende variant is.

Voor hoe lang moet een AB test worden uitgevoerd?

Je moet een AB test uitvoeren zo lang als nodig is om statistisch significante resultaten te krijgen. Het aantal gebruikerssessies is cruciaal. Als een webpagina 1 miljoen bezoekers per dag heeft, kan de AB test binnen enkele uren duidelijke resultaten opleveren. Voor een webpagina, die 2 bezoekers per dag ontvangt, kan het een jaar duren voordat statistisch significante resultaten worden weergegeven. Gebruikersgedrag verschilt doorgaans gedurende de week, daarom raden we aan om gedurende ten minste een volledige week AB tests uit te voeren.

Wat is statistische significantie?

Statistische significantie is de waarschijnlijkheid dat de reden waarom de ene variant sterker is dan de andere, wordt veroorzaakt door iets anders dan toeval. Het betekent dat je er betrouwbaar van kunt uitgaan dat de winnende variant sterker is vanwege de wijzigingen die je hebt aangebracht.

Probeer nu onze gratis AB test calculator