Wanneer je een multivariate test voor een pagina gaat opzetten, houd rekening met onderstaande tips om op een snelle en betrouwbare manier significante testresultaten te genereren.

1. Test niet te veel tegelijkertijd.

Test niet te veel elementen en varianten tegelijkertijd. Het combinaties wat gevormd wordt, kan zeer hard oplopen.

Bijvoorbeeld:

Element 1: 2 varianten
Element 2: 2 varianten
Totaal aantal combinaties: 2 x 2 = 4 combinaties

Element 1: 3 varianten
Element 2: 4 varianten
Element 3: 3 varianten
Totaal aantal combinaties: 3 x 4 x 3 = 36 combinaties.

Zeker bij een tool als Google Website Optimizer, waarbij alle combinaties daadwerkelijk getest worden, zal je benodigde tijd om een significant testresultaat te genereren zeer snel toenemen. Wanneer je meer combinaties creëert, zul je meer bezoek (is vaak meer tijd) nodig hebben om significante test resultaten te genereren.

2. Test een pagina die veel bezoek genereert

Wanneer een pagina meer bezoek genereert, heb je sneller resultaat. Je zult eerder genoeg conversies verzameld hebben voor al je te testen combinaties.

3. Overweeg een groter percentage bezoek van je pagina mee te nemen.

Je kunt er voor kiezen om niet al je bezoek mee te nemen in een experiment. Zeker als je een gewaagde verandering gaat testen, wil je misschien niet al je bezoek testen om een deel van het risico uit te sluiten. Maar zoals gezegd zorgt meer bezoek voor sneller resultaat. Wanneer je pagina weinig bezoek genereert, neem dan een groot percentage van je bezoek mee in het experiment.

4. Kies een doel dat vaak bereikt wordt.

Wanneer je een conversiedoel kiest dat niet vaak bereikt wordt, kan je test zeer lang duren. Het aantal conversies voor een combinatie moet namelijk groot genoeg zijn om een betrouwbaar resultaat te genereren.

Bijvoorbeeld:

Combinatie 1: 100 bezoeken, 3 conversies
Combinatie 2: 100 bezoeken, 6 conversies

Dit lijkt een significant verschil. Combinatie 2 scoort twee keer zo goed als combinatie 1. Echter wanneer combinatie 1 een conversie meer genereert, is je resultaat voor combinatie 2 nog maar anderhalf keer zo goed. Dit is geen betrouwbaar resultaat.

Test daarom bijvoorbeeld in plaats van het kopen van een product, het toevoegen van het product aan een winkelwagentje.

5. Plaats niet te veel tussenliggende pagina’s tussen doel en testpagina

Wanneer er meerdere pagina’s tussen je testpagina en doel liggen, zijn er veel andere factoren die je conversie kunnen beïnvloeden. Sluit deze factoren uit door bij voorkeur een doelpagina te kiezen, die direct na je testpagina bereikt wordt.

6. Houd rekening met de combinaties die gevormd kunnen worden

Een klassiek voorbeeld: rode tekst op rode achtergrond. Zelf hebben wij laatst een test opgezet, waarbij getest werd met de productnaam in de koptekst of in de subkop die beiden direct onder elkaar stonden. 1 combinatie zou dan twee keer de productnaam kunnen worden, wat geen gewenste combinatie was. Een eenvoudige oplossing hiervoor was dat we de kop en subkop als 1 sectie testen.

7. Test grote verschillen

Bijvoorbeeld:

Koptekst 1: Multivariate testen zorgen voor meer website conversie.

Koptekst 2: Multivariate testen zorgen voor veel meer website conversie.

Dit verschil is zo klein dat de kans klein is dat de ene koptekst veel beter zal werken dan de andere en dus dat er een significant verschil gevonden zal worden. Een vuistregel is dat een verschil binnen 8 seconden zichtbaar moet zijn. Het is daarom vaak ook niet handig om een verschil te testen dat zich onder de paginavouw bevindt.

8. Segmenteer je bezoekers

Een bepaalde koptekst kan voor een bezoekerssegment beter werken dan voor een ander. Houd bijvoorbeeld rekening met het onderscheid tussen nieuwe en terugkerende bezoekers. Houd rekening met de herkomstbron van bezoekers, bijvoorbeeld je email nieuwsbrief of een AdWords campagne. Houd rekening met verschillende browsers, verbindingssnelheid, etcetera.

9. Houd rekening met uitgestelde conversie

Soms kan een bepaalde variant direct veel conversies genereren, maar werkt op de langere termijn een andere variant beter: bezoekers komen terug en doen alsnog een aankoop. Je kunt uit je webstatistieken achterhalen hoeveel tijd er gemiddeld tussen zit dat de bezoekers de eerste keer op je website komen en dat zij een aankoop doen. Trek daarom niet te snel conclusies!

10. Houd rekening met omgevingsfactoren

Breng eventuele omgevingsfactoren in kaart en houd rekening met de invloed van deze factoren op je test. Een variant of combinatie die tijdens de kerstperiode goed werkt, hoeft in de zomer niet goed te werken.Een aantal omgevingsfactoren die van invloed kunnen zijn, zijn:

• Het weer
• Vakanties
• Feestdagen (kerst, Valentijn)
• Marketingacties
• Negatieve/ positieve publiciteit over je bedrijf/ product.

Tenslotte kan ik je aanraden om te blijven testen:

1. Dingen veranderen
2. Het kan altijd beter!