Naar hoofdinhoud

Wat is een e-mail-A/B-test? Een evenementvoorbeeld

Bij een e-mail-A/B-test stuur je verschillende versies naar aparte groepen geschikte ontvangers om te zien of een geplande wijziging lijkt te helpen. Voor een evenement kun je twee onderwerpregels voor dezelfde registratiemail vergelijken. De test beantwoordt een gerichte vraag en garandeert geen extra ticketverkoop. Ook de conclusie dat het bewijs te zwak is om te kiezen kan nuttig zijn.

De redactie van Boletolibre

Gepubliceerd

Tekstloos diagram van twee e-mailvarianten voor gescheiden groepen, gevolgd door één vergelijkingspunt.
Vergelijk één geplande wijziging met dezelfde publieksregel en dezelfde definitie van resultaat.

Wat een e-mail-A/B-test vergelijkt

Begin met één publiek, één doel en twee versies: A en B. Houd aanbod, goedgekeurde evenementfeiten, bestemming en meetperiode gelijk. Verander alleen het element uit de hypothese, bijvoorbeeld onderwerpregel, afzendernaam, inhoud of verzendtijd. De e-maildienst moet geschikte ontvangers tussen versies kunnen verdelen en de uitkomsten afzonderlijk tonen. Een automatisch label „winnaar” volgt uitsluitend de ingestelde maatstaf en regels van die dienst. Het bewijst niet wat elke ontvanger verkiest en voorspelt geen ander evenement.[1]

  • Een controle vóór verzending vraagt of de mail werkt en de feiten kloppen. De A/B-test vergelijkt twee al aanvaardbare keuzes.
  • Een A/B-test van de landingspagina verandert de bestemming. Houd die apart als je het effect van de e-mail wilt begrijpen.

Kies een vraag waarop je kunt handelen

Een goede vraag benoemt het besluit na verzending: „Levert een onderwerp met de registratiedeadline meer relevante bezoeken op dan een onderwerp over de hoofdspreker?” Beide versies moeten waarheidsgetrouw en geschikt zijn voor hetzelfde publiek. Een kleine woordkeuze testen heeft weinig zin zolang link, taal of belangrijke evenementdetails nog niet zijn goedgekeurd; herstel die eerst. Stel een urgente operationele mededeling niet uit om betrokkenheid te optimaliseren. Verstuur de juiste instructie tijdig via het afgesproken kanaal.

  • Je kunt de nadruk in het onderwerp, de volgorde van twee bevestigde voordelen of een knoptekst naar dezelfde actieve pagina vergelijken.
  • Houd prijs, beschikbaarheid, locatie en toegankelijkheidsinformatie gelijk, tenzij juist een van die feiten binnen een goedgekeurde gecontroleerde test valt.

Schrijf de hypothese vóór de varianten

Noteer publiek, de ene wijziging, verwachte richting en reden. „Voor genodigden van [Evenement] krijgt een onderwerp dat de registratieactie noemt meer relevante klikken dan een thematisch onderwerp, omdat de volgende stap duidelijker is” is toetsbaar. Schrijf A en B volledig uit, inclusief preheadertekst, zodat geen tweede wijziging ongemerkt binnensluipt. Verander je onderwerp én berichttekst, dan weet je niet wat effect had. Maak A niet expres zwak: beide versies moeten bruikbaar zijn. Controleer ze met dezelfde bron van goedgekeurde evenementfeiten en stuur voor beide een testmail voor productiecontrole.[1]

  • Hypothese: publiek + één gewijzigd element + primaire uitkomst + reden.
  • Vast te houden: wat gelijk blijft, wie de feiten heeft goedgekeurd en welke bestemming wordt gebruikt.

Maak de groepen vergelijkbaar

Pas voor A en B dezelfde geschiktheidsregel toe. Toestemming, taal, evenementinteresse en uitsluitingen leg je vast vóór de toewijzing. Kan de verzender willekeurig verdelen, gebruik dat dan in plaats van bewust verschillende soorten mensen te kiezen. Controleer het actuele abonnement en de instellingen: testfuncties, verdeling en automatische winnaarsregels verschillen. Stuur niet beide versies naar dezelfde persoon en noem dat een groepsvergelijking. Vergelijk bij meerdere talen binnen een passende taalgroep of leg de taalmix per versie vast; anders kan een vertaalverschil op een e-maileffect lijken.[1][2]

  • Leg geschikte ontvangers en uitsluitingen vóór de start vast; wijzig ze niet nadat je de cijfers ziet.
  • Bij weinig ontvangers is de uitkomst eerder een aanwijzing dan een zekere algemene conclusie.

Kies een uitkomst die bij het besluit past

Kies vooraf één primaire maatstaf met dezelfde definitie voor A en B. Bij een onderwerptest kunnen unieke klikken op de registratielink per bezorgde mail passen, als de verzender die rapporteert. Een voltooide registratie ligt dichter bij het evenementdoel, maar gebruik die alleen als je haar betrouwbaar aan de toegewezen versie kunt koppelen zonder dubbeltelling. Een klik is geen verkocht ticket, en een verkocht ticket is geen ingecheckte bezoeker. Noteer noemer, periode en gegevensbron bij elk cijfer. Uitschrijvingen en antwoorden kunnen aanvullende signalen zijn, maar wijzig de winnaarsregel niet nadat de resultaten zichtbaar zijn.[1][3][4]

  • Openingen zijn een kwetsbare hoofdmaatstaf: privacyfuncties kunnen trackingpixels vooraf laden zonder dat iemand leest.
  • Beveiligingssoftware en linkvoorbeelden kunnen klikken en openingen opblazen. Bekijk de filtering van de verzender en wees voorzichtig met kleine verschillen.

Behandel verzending als een operationele overdracht

Vóór de start keurt de evenementverantwoordelijke publiek, beide versies en meetregel goed. De e-mailbeheerder bevestigt de verdeling en rapportage bij de gekozen leverancier. Doorloop voor beide versies het echte pad van ticketkeuze tot bevestiging. Staat de publieke evenementpagina op Boletolibre.com, gebruik dan de werkelijke URL en controleer dat pad; dit zegt niets over een A/B-functie van Boletolibre. Kies een beoordelingsmoment waarop de uitkomst vóór het einde van een tijdgevoelig aanbod kan ontstaan. Leg vast wie de verzending mag stoppen als feiten, link of voorraad veranderen. Volg de huidige instructies van de leverancier; niet elke dienst verzendt automatisch een „winnaar” naar de rest.[2]

  • Evenementgoedkeuring: feiten, publiek, verschil en stopvoorwaarden.
  • Operationele goedkeuring: configuratie, bestemming, rapportexport en verzendtoestemming.

Lees de uitkomst zonder overdrijving

Noteer op het afgesproken moment per versie het toegewezen of bezorgde aantal, de primaire gebeurtenissen, het percentage en ontbrekende gegevens. Vergelijk dezelfde maat over dezelfde periode. Meer ruwe klikken kunnen simpelweg door meer bezorgde mails komen. Lijkt B beter, kijk dan of de bezoeken nuttig waren en of het verschil groot genoeg is voor het volgende besluit. Kleine groepen en kleine verschillen kunnen onbeslist zijn; opnieuw testen is een geldig besluit. Veranderen prijs, voorraad, bestemming, programma of geschiktheid tijdens de test, markeer de uitkomst dan als verstoord in plaats van een winnaarslabel als bewijs te zien.[3][4]

  • Bewaar de oorspronkelijke hypothese bij de waarnemingen; herschrijf de vraag niet naar de uitkomst.
  • Besluit: overnemen voor een vergelijkbare volgende mail, schoner herhalen of niets wijzigen.

Voorbeeld van een registratiemail

Een conferentieteam heeft een goedgekeurde registratiemail en wil weten of het onderwerp het programma of het registreren moet benadrukken. A luidt „Bekijk het programma van [Evenement]”; B „Registratie voor [Evenement] is open”. Preheadertekst, bericht, ticketbestemming en verzendcontext blijven gelijk. De leverancier verdeelt geschikte abonnees. De primaire maat is unieke registratielinkklikken per bezorgde mail. Het team beoordeelt voltooide registraties alleen als versie en bestelling betrouwbaar zijn te verbinden. Als B meer klikken krijgt zonder die koppeling, luidt de conclusie „meer klikken”, niet „meer verkopen”. Bij een gering verschil kan het team herhalen.

  • Gebruik deze onderwerpen pas na vervanging van het invulveld en controle van programma, beschikbaarheid en toestemming.
  • Veranderen evenementfeiten onderweg, noteer wanneer en waar: het onderwerp is dan niet meer het enige verschil.

Wat de test niet aantoont

Eén verzending onthult geen blijvend „beste” onderwerp voor alle evenementen. De uitkomst hangt af van publiek, aanbod, taal, seizoen en meting. Ongelijke bezorging, een kapotte bestemming, dubbele ontvangers, gewijzigde ticketvoorraad of geautomatiseerde bezoeken kunnen de vergelijking vertekenen. De test vervangt geen controle van toestemming en uitschrijven, redactie of productiecontrole van beide versies. Bij een noodzakelijke servicemelding of correctie gaan juistheid en tijdige bezorging voor.

  • Leid geen individuele bedoeling af uit een gezamenlijk percentage.
  • Claim geen omzetstijging op basis van klikken of meer registraties op basis van openingen.

Leg test en besluit vast

Het bewerkbare werkblad bewaart hypothese, publieksregel, goedgekeurde teksten, bestemming, hoofdmaatstaf, waargenomen aantallen en eindbesluit op één plek. Het is een Engelstalig werkmodel: pas velden aan de leverancier aan en vertaal de definitieve mail per publieksgroep. De keuze „geen conclusie” zorgt dat ook een kleine of verstoorde test een bruikbaar dossier oplevert.

Werkblad voor ontwerp en besluit van de e-mail-A/B-test downloaden (Markdown, Engels)

Bronnen en verder lezen

  1. About A/B TestsMailchimp · Geraadpleegd
  2. Create an A/B TestMailchimp · Geraadpleegd
  3. Apple Mail Privacy Protection FAQsMailchimp · Geraadpleegd
  4. About Bot Activity and Bot FilteringMailchimp · Geraadpleegd