a / B testen is iets wat je nu moet doen—vooral wanneer kleine verbeteringen van bijvoorbeeld 1% of 2% indrukwekkende omzetverbeteringen kunnen opleveren.
Wat is a / B-test?
voordat we ingaan op de details van een verbazingwekkende A/B testing framework, laten we gewoon een stap terug te nemen en ervoor te zorgen dat we allemaal op dezelfde pagina als het hebben over A/B testen in het algemeen., A / B testen in digitale marketing en conversie optimalisatie, ook gespeld als A / B testen, of a / B testen, is het proces van het testen van twee versies van een webpagina of app met gecontroleerde verschillen.
de pagina ‘ s worden willekeurig aan gebruikers gepresenteerd. Als prestatiegegevens worden verzameld, worden de pagina ‘ s geanalyseerd om te bepalen welke versie beter presteert.
Wat zijn de voordelen van A/B-tests?
het testen van variaties van een website of app met statistische rigor kunt u meten en optimaliseren van uw pagina om ervoor te zorgen dat u het maximaliseren van conversies., Of je nu een wijziging in de koptekst test of alleen de kleur van een knop, vertrouw niet op theorie om deze beslissingen te begeleiden, test het en laat de gegevens de besluitvorming sturen.
laten we een snelle wiskunde doen om een beeld te schetsen van de impact die het kan hebben.
stel je voor dat je product verkoopt aan $ 100 en je hebt 10.000 bezoeken per maand aan uw webpagina. 3% van hen converteren, het genereren van $30.000 aan inkomsten voor dat ene product.
U A / B test een aantal wijzigingen aan de pagina, en uw test laat u zien dat uw nieuwe paginaversie uw conversiepercentage met 3% verbetert (dus nu converteer je 3,09% van de bezoekers)., Minder dan 0,1% extra conversies klinkt niet als veel, maar je hebt net gegenereerd een extra $900 per maand aan inkomsten. Zelfs als je stopt met testen op dat punt, heb je $10.800 jaarlijkse omzet
toegevoegd als je blijft testen, en test nog twee keer met hetzelfde resultaat van een 3% verbetering in conversiepercentage, gaat je conversiepercentage omhoog met 9.3% (1.03 * 1.03 * 1.03). Het is net als samengestelde rente. Uw eerste maand op de nieuwe conversieratio heeft een incrementele conversiewaarde van $ 2,782. Over een jaar, dit zal resulteren in een incrementele $33.382.,
in dit specifieke voorbeeld leidde de test tot meer dan een maand aan incrementele inkomsten.
houd er rekening mee dat dit gebeurt wanneer het verkeer constant blijft. Je hebt niet geïnvesteerd in een hoger volume van advertenties, meer content distributie e-mails, sitewide SEO, of iets anders dat uw verkeer zou groeien. Je krijgt gewoon meer waarde uit het verkeersvolume dat je al krijgt. Je optimaliseert voor $ – waarde van elke bezoeker.
welke soorten A / B-tests leveren resultaten op?
Er zijn tal van metrics en zelfs gebieden van gegevens om te verkennen., Hier zijn 3 manieren waarop we split testen kunnen gebruiken om ervoor te zorgen dat we de best mogelijke conversiepercentages hebben.
Prijsexperimenten
vroeger bestond er een marketingtheorie dat prijzen eindigend op 7 daadwerkelijk beter werden geconverteerd dan enig ander getal. Waarom? Omdat het hebben van een prijs die eindigt met 0 (nul) is bewezen te algemeen te zijn, niet specifiek genoeg, 9 werd algemeen gebruikt. Toen de prijzen eindigend op 9 werd zo gewoon dat het niet wakker een opmerkelijke positieve reactie meer, en heeft geen invloed op een omrekeningskoers. Waarom denk je dat de prijzen nu op 7 eindigen?,
de 7 werd oorspronkelijk bewezen met een A/B-test, waarbij de prijs werd getest om het beste optimalisatiepunt te vinden. Dat is wat de gegevens gesuggereerd, en je kunt het nog steeds zien in sommige Saas prijzen.
Dit is misschien niet de juiste aanbeveling voor uw website en uw publiek. Het is een goed idee om uw eigen tests uit te voeren, en vind het nummer dat het beste converteert voor u in het bijzonder. Gebruik best practices en kennis uit de industrie om te begeleiden wat u probeert, maar laat uw eigen A/B-testgegevens de beslissing drijven.,
kleurtheorie
een ander voorbeeld van het testen van A / B-versies van een website of specifieke pagina is de kleur van de CTA.
Geel was lange tijd een populaire favoriet. Nogmaals, dankzij een B-test, toonden gegevens aan dat gele knoppen beter geconverteerd. Sindsdien heeft de industrie meer kleuren getest.
gegevens van meer diepgaande testen suggereren dat het meer gerelateerd is aan het contrast tussen achtergrond en CTA. Niet per se geel net hoe opvallend de CTA is binnen de context van de pagina., Maar, het is altijd een goed idee om variaties te testen en te zien wat werkt voor uw specifieke CTA in de context van uw specifieke branding.
Mouse Tracking
iets zo eenvoudig als het volgen van de reis van de gebruiker op een webpagina kan leiden tot grote bruikbare CRO data. Waar richten bezoekers hun tijd en aandacht op? Waar komen ze op de pagina als ze besluiten om te vertrekken?
Er is een verscheidenheid aan mouse tracking en heat map software die u laten zien waar precies op de pagina uw gebruiker het grootste deel van hun tijd doorbrengt, en waar ze drop-off., Door het testen van de interactie van de gebruiker met uw website op deze manier, kunt u de gegevens te bepalen functie lay-outs, CTA plaatsingen, enz.
Met deze kennis kun je onderbouwde beslissingen nemen om je tests te ontwerpen en de resultaten van die veranderingen te meten.
heuristische analyse
Het is niet genoeg om een goed uitziende webpagina of app te ontwerpen; de pagina moet ook het publiek overtuigen om de gewenste actie te voltooien.
heuristiek zijn empirische vuistregels of best practices die in het verleden zijn getest en worden geïmplementeerd om UX-ontwerpen te produceren., Echter, elke pagina, product en dienst is uniek. In plaats van ervoor te zorgen dat uw pagina past bij de best practice in de industrie, dat wil zeggen best practice die afkomstig is van iemand anders ‘ s testen, is het zinvol om elementen zoals uw call to action plaatsing en conversiepercentages in real time te testen. Laat het ontwerp van uw website data driven.
het belang van het gebruik van een A/B Testing Framework
Je kunt niet zomaar overhaast A/B testen. Een lukrake aanpak leidt tot mislukking.,
als je net als de meeste bedrijven bent, heb je maar zoveel middelen en zoveel geld, dus moet je leren prioriteiten te stellen—soms meedogenloos. Als je dat niet kunt, zal je groei uiteindelijk stagneren, of je begint te krimpen. A / B testen is de snelste, gemakkelijkste en meest kosteneffectieve manier om te ontdekken hoe je meer verkeer kunt rijden, meer leads kunt genereren, meer omzet kunt genereren. Als je wilt slagen met A / B-testen, moet je van tevoren een strategie en prioriteiten ontwikkelen—wat lastig kan zijn om te doen.
Hier bij McGaw.io we hebben het VICE A/B test framework ontworpen., Met behulp van dit framework kunnen we veel voorkomende A/B-testfouten voorkomen die worden veroorzaakt door een gebrek aan strategie en organisatie.
in dit bericht, gaan we door het VICE framework en breken precies uit hoe het werkt. We onderzoeken hoe u de VICE-aanpak kunt gebruiken om uw doelen te maximaliseren (zoals inkomsten of aanmeldingen van gebruikers) zonder meer geld te hoeven uitgeven aan het verkeer. Tegen het einde, zult u begrijpen hoe u dit framework in uw eigen bedrijf te gebruiken, zodat u kunt profiteren van alles wat A/B testen te bieden heeft.,
het belang van het maken van hypothesen
als je een kijkje neemt op de McGaw.io blog, Je zult zien dat we al de basisprincipes van hoe je kunt beginnen met A/B testen, zoals wat te testen en welke tools te gebruiken.
de focus van dit bericht is om te onderzoeken hoe u A/B—tests kunt uitvoeren die meer kans maken op gunstige resultaten-en de sleutel om dat te bereiken is ons VICE Framework en Template voor A/B-tests.
voordat u in een A / B-test duikt, moet u eerst een aantal hypothesen vormen.,hypothesen zijn in wezen wat je denkt dat er zal gebeuren als gevolg van het maken van bepaalde veranderingen.
wanneer we het VICE Framework gebruiken, gebruiken we hypothesen als uitgangspunt. Het genereren van hypothesen is belangrijk, want zonder hen, uw experimenten zal missen richting. Het is een goed idee om van tevoren met een breed scala aan hypothesen te komen. Het hebben van een verscheidenheid aan hypothesen opgesteld zal uw vermogen om snel testen te implementeren in de toekomst te verbeteren, het verhogen van de snelheid waarmee u kunt verhogen website conversies.,
u moet ten minste één hypothese maken voor elk element van een pagina die u wilt testen.
Pro Tip: onthoud van het testen van A/B meer dan één element van een pagina op een bepaald moment. Het testen van meerdere elementen van een pagina in een keer maakt het moeilijk om erachter te komen welke veranderingen daadwerkelijk leiden tot bepaalde resultaten.
Pro Tip: onthoud van het testen van A/B meer dan één element van een pagina op een bepaald moment. Het testen van meerdere elementen van een pagina in een keer maakt het moeilijk om erachter te komen welke veranderingen daadwerkelijk leiden tot bepaalde resultaten.,
Pro Tip: Hoewel het nuttig kan zijn om wat achtergrondkennis te hebben over wat goed werkt bij het uitvoeren van tests, hoeft u niet altijd de beste praktijken te volgen. In sommige gevallen, kunt u merken dat het maken van radicale veranderingen en gaan tegen de beste praktijken eigenlijk leidt tot betere conversies.
de VICE-aanpak
als het gaat om A / B testen, is het belangrijk om een aantal snelle overwinningen onder je riem te krijgen.
wanneer u zorgt voor laaghangend fruit, bent u in een betere positie om tijd te besteden aan de meer uitdagende experimenten die u wilt graven in., Plus, hoe eerder je een aantal winnende A / B-tests, hoe meer je zult winnen van de compounding verbeteringen die komen met het verbeteren van conversies.
Pro Tip: Als u klantenwerk doet, kan het genereren van snelle wins nog belangrijker zijn, omdat het u de mogelijkheid geeft om te bewijzen dat A / B testen de moeite waard is om op te focussen.
met dat in gedachten, Hoe kunt u de laaghangende vrucht identificeren en de experimenten of hypothesen bepalen die het meest waarschijnlijk zullen werken?
zeker, een kristallen bol kan hier nuttig zijn, maar de kans is groot dat je er geen hebt.
niettemin, hier bij McGaw.,io, we denken dat we het op een na beste ding hebben, de VICE aanpak.
VICE staat voor:
- V – Velocity
- I – Impact
- C – vertrouwen
- e – ease
het idee hier is dat je je hypothesen scoort van 0-10 (10 is de hoogste/meest voorkeur), in relatie tot elk van de bovenstaande factoren.
dan tel je deze scores op zodat je een “totaal hebt.”
haal de VICE Framework template hier!,
Dit totaal helpt de waarschijnlijkheid uit te werken dat een hypothese of experiment resultaten oplevert in vergelijking met alle andere tests die u op een site of pagina wilt uitvoeren. Als u op zoek bent naar een aantal snelle overwinningen te genereren, kan het nuttig zijn om prioriteit te geven aan de tests die de hoogste scores hebben.
Hier is een overzicht van hoe ons framework er in actie uitziet, met de VICE-sectie gemarkeerd:
als we inzoomen en een kijkje nemen, kunt u zien hoe we hypothesen vormen, elke categorie scoren en de totalen optellen.,
elk van deze categorieën vertegenwoordigt verschillende factoren die u moet verantwoorden bij het uitvoeren van een A/B-test. Laten we eens een kijkje op elk van hen, zodat u kunt geven het zo nauwkeurig mogelijk een score mogelijk.
snelheid
snelheid is de snelheid waarmee een test kan worden uitgevoerd.
uw snelheid score moet gebaseerd zijn op twee belangrijke factoren: (1) hoeveel verkeer een pagina krijgt en (2) Hoe merkbaar een verandering zal zijn.
hoeveel verkeer
In het algemeen, hoe meer verkeer een website binnenbrengt, hoe sneller een test kan worden uitgevoerd., Meer verkeer betekent meer gegevens, en meer gegevens betekent dat het minder tijd kost om uit te werken of de resultaten statistisch significant zijn (iets wat we later zullen behandelen).
wanneer we scoren voor Velocity, integreren we met Google Analytics om het meest nauwkeurige Aantal mogelijk te krijgen (wilt u dat wij uw VICE framework integreren in google, neem dan contact met ons op.). Snelheid wordt ingesteld op basis van de hoeveelheid verkeer die door een pagina gaat. Als een pagina 50.000 mensen per week krijgt, kunnen we snel statistische significantie bereiken., Als een pagina slechts 500 hits per week krijgt, zal het langer duren voordat u voldoende gegevens hebt om zeker te zijn van de resultaten
stoutmoedigheid van verandering
Het bereiken van statistische significantie gaat niet alleen over hoeveel mensen naar uw website komen. Het gaat ook over hoe groot of merkbaar de verandering die u test is. Hoe minder merkbaar de verandering, hoe minder kans het is om het gedrag van de gebruiker te beïnvloeden, dus hoe langer het duurt voordat uw test statistische significantie bereikt., Als u bijvoorbeeld de navigatietekst bijwerkt naar een vetgedrukt lettertype, zal het aantal klikken dat u krijgt waarschijnlijk niet dramatisch toenemen—dus het zal langer duren om een niveau te bereiken waar u er zeker van kunt zijn dat de verandering een verschil maakt.
Als u echter een dramatische verandering maakt, kunt u sneller statistische significantie bereiken. Bijvoorbeeld, meer gebruikers gaan merken een gloednieuwe call-to-action knop, dus je moet genoeg gegevens te krijgen om vertrouwen in uw resultaten in een kortere hoeveelheid tijd.,
zie het als volgt: als de test dramatischer is of polariseert naar de ervaring van de gebruiker, dan moet je verwachten dat de snelheid hoger is omdat je sneller een verschil ziet.
andere factoren
Het is ook belangrijk om verkeersnummers te bekijken in relatie tot het aantal opties dat er op een bepaalde pagina zijn. Hoe meer opties (zoals links) er zijn, hoe langer het over het algemeen zal duren om de test te voltooien.
en op basis van uw bedrijf of uw verkoopcyclus zijn er andere factoren waarmee u mogelijk rekening moet houden., Voor een voorbeeld, als de verkoopcyclus voor een van uw producten is zes weken lang, zult u niet in staat zijn om zelfs een kleine test in een week te voltooien.
probeer rekening te houden met uw individuele zakelijke beperkingen bij het scoren van snelheid.
Impact
Impact is hoeveel een verandering zal bijdragen aan een verbetering van conversies.wanneer u overweegt welke Impactscore een bepaalde hypothese moet geven, is het belangrijk om eerst aan uw doel te denken. Als uw doel is om het gebruik van een gratis proefperiode te verhogen, dan eventuele wijzigingen op de gratis proefpagina zou een hogere Impact score te krijgen., Als u wilt e-mail capture te verhogen om uw sales team meer leads te geven, geef een hogere score aan de hypothesen die waarschijnlijk van invloed zijn op dat gebied.
zodra u uw doel in gedachten hebt, zijn er drie andere factoren om rekening mee te houden: (1) de vrijmoedigheid van de verandering, (2) de plaatsing van de pagina in de trechter, en (3) uw analytics data.
stoutmoedigheid van verandering
zoals we met Velocity hierboven al zeiden, Hoe meer een verandering merkbaar is voor uw gebruikers, hoe waarschijnlijker het is dat het hun gedrag beïnvloedt., Dramatische veranderingen hebben meestal een hogere impactscore omdat gebruikers meer kans hebben om ze op te merken, en dus hebben ze meer kans om uw conversieratio te beïnvloeden.
plaatsing in de trechter
Het is ook belangrijk om te overwegen waar de pagina zich in de trechter bevindt. In het algemeen zullen pagina ‘ s aan de bovenkant van de trechter vaak meer impact hebben dan die aan de onderkant—simpelweg omdat meer gebruikers ze zullen zien. Zo, bijvoorbeeld, een verandering op de homepage kan een hogere Impact score dan een Diensten pagina te krijgen.
het andere type pagina dat doorgaans een high impact score krijgt, zijn checkout-en prijspagina ‘ s., Impact score moet hoger zijn voor elke plaats waar gebruikers proberen om u geld te geven. Je wilt dat proces zo makkelijk mogelijk maken.
Analytics Data
Tot slot wilt u uw Analytics data bekijken om u te helpen de Impact te scoren (hulp nodig bij het bekijken van uw analytics data, neem contact met ons op). Als u Google Analytics (en dat zou u moeten zijn) en Google Ecommerce gebruikt, kunt u de waarde van een pagina in uw trechter zien. Hoe hoger de pagina waarde in Google Analytics, hoe hoger de Impact score moet zijn.,
als u echt cool wilt worden, hebben we een geheim VICE-framework dat we direct kunnen integreren in uw Google Analytic-account en de impact van Velocity-advertenties kunnen weergeven op basis van de nummers die u in Google Analytics hebt. Neem contact met ons op als je geweldig wilt zijn.
vertrouwen
vertrouwen is hoe u denkt over de kans dat een bepaalde hypothese gunstige resultaten oplevert.
Hoe meer u weet over dit type testen, hoe nauwkeuriger u zult zijn als het gaat om het vooraf voorschrijven van betrouwbaarheidswaarderingen., Dat is omdat, hoewel A / B testen de neiging om te werken op een geval-per-geval basis, zult u merken dat er gemeenschappelijke problemen die vaak kunnen worden opgelost met behulp van gemeenschappelijke oplossingen. Een voorbeeld hiervan is de opname van een testimonial op een bestemmingspagina.
als je gloednieuw bent in testen, denk er dan niet over na en geef het je beste gok. Door het proces van het creëren van hypothesen en het opschrijven van uw vertrouwen, zult u snel een beter begrip voor welke tests zijn waarschijnlijk succes hebben.,
Als u begint met het maken van voorspellingen, kan het nuttig zijn om bij te houden hoe u en uw team het doen als het gaat om het voorspellen—niet als een soort straf (A/B testen kan kieskeurig zijn, zelfs voor een expert), maar als een leermogelijkheid. Vaak, kunt u patronen in uw vertrouwen scores te zien. Misschien overschat iemand in je team altijd de impact van kleur, of onderschat iemand anders het belang van de homepage.,
als iemand consequent meer correcte gissingen krijgt dan de rest van het team, is het misschien zelfs een goed idee om een iets hoger aantal te geven aan de tests waar ze een hoog vertrouwen in hebben.
omdat we een bedrijf zijn dat gedreven wordt door data, bouwen we een model dat rekening houdt met prestaties uit het verleden en automatisch de scores van ons team vermindert of verhoogt indien nodig. Dat is misschien een beetje overdreven voor de meeste bedrijven, maar je kunt het algemene principe toepassen zonder dat je het in een formule hoeft te kwantificeren., Laat het ons weten als je een beta tester wilt zijn van deze nieuwe tool 🙂
Ease
Ease is het niveau van technische vaardigheid dat nodig is om een verandering aan te brengen.
Whew. We zijn bijna klaar. Gelukkig is gemak meestal de makkelijkste categorie om te scoren. Je hoeft alleen maar te overwegen wie je nodig hebt om de verandering te maken en hoeveel tijd het hen zal kosten. Vraag jezelf af of een van de aanpassingen met betrekking tot een specifiek experiment kan worden gemaakt door iemand in je team of als je nodig hebt om een ontwikkelaar of ontwerper aan boord.,
Split testing tools zoals Optimizely of Visual Website Optimizer maken het gemakkelijk voor marketeers om eenvoudige wijzigingen aan te brengen, zoals het verwijderen van een knop of het veranderen van een kop. Echter, het wijzigen van de hele stijl van een pagina of zelfs het toevoegen van nieuwe pagina ‘ s aan een website kan veel ingewikkelder zijn.
veranderingen zoals deze zullen waarschijnlijk de hulp van een ontwikkelaar en misschien zelfs een copywriter nodig hebben om de taak goed gedaan te krijgen. Wees niet bang om ze te lus in en krijg een meer accurate score hier.
als je eenmaal hebt bepaald wie je nodig hebt om een bepaalde test uit te voeren, overweeg dan hoe lang het zal duren., Als u een ontwikkelaar te betalen voor uren en uren van het werk, of huur een externe aannemer, of verlies een lid van uw marketing team voor een week, geef de test een lager gemak score. Als het niet veel tijd in beslag neemt en je slechts één lid van je team nodig hebt, geef het een hogere score.
valideren van succes
het VICE framework maakt het een stuk gemakkelijker om het proces van het correct A / B testen van de verschillende elementen van een website te doorlopen zonder overweldigd te raken., Echter, het kader kan u niet beschermen tegen de fouten in de beoordeling die u zou kunnen maken wanneer het proberen om te bepalen of een experiment succesvol was of niet.
in sommige gevallen kan het lijken alsof u verbeterde conversies hebt, maar na verloop van tijd, kunnen de wijzigingen niet leiden tot een consistente toename van conversies. Om jezelf te beschermen tegen een dergelijke situatie, moet u ervoor zorgen dat uw resultaten statistisch significant worden geacht.
als ze statistisch niet significant zijn, kan wat je denkt dat een verbetering is in feite gewoon een flash-in-the-pan resultaat zijn., Idealiter zouden uw experimenten een statistische significantie van ten minste 95% moeten hebben. Door de statistische significantie van uw resultaten te controleren en ervoor te zorgen dat ze boven de 95% scoren, kunt u betrouwbaar bepalen of u een winnende variatie op uw handen hebt en of de veranderingen de moeite waard zijn.
nu, als je niet wiskundig geneigd bent of het concept van statistische significantie je bang maakt-maak je geen zorgen. We hebben de Effin A/B-testcalculator gemaakt. Deze eenvoudige Chrome-extensie kan worden gebruikt om te bepalen of uw resultaten statistisch significant zijn of niet.,
Het is zeer eenvoudig te gebruiken. Het enige wat je hoeft te doen is in uw verkeer en conversie nummers en de tool zal uw resultaten te tonen. Geen behoefte om te knoeien met ingewikkelde formules!
natuurlijk bent u vrij om andere tools en methoden te gebruiken. Wat je ook doet, zorg ervoor dat u altijd de statistische significantie van uw resultaten te controleren alvorens te beslissen over een winnende variatie.
conclusie
het uitvoeren van A / B-experimenten kan zeer overweldigend worden, zeer snel. Met onze ondeugdelijke aanpak kun je dat echter voorkomen., Op voorwaarde dat u de tijd die nodig is om te komen met hypothesen, alles wat je hoeft te doen is gebruik maken van de VICE-aanpak om erachter te komen waar je moet concentreren.
zodra u een aantal gegevens met betrekking tot de test hebt gegenereerd, controleert u de statistische significantie ervan. Afhankelijk van het resultaat dat wordt geretourneerd, weet u of de wijzigingen de moeite waard zijn. A / B-testen is iets dat je zo snel mogelijk wilt doen, dus probeer snel actie te ondernemen op wat je hebt geleerd.
zeker, het is mogelijk dat je de dingen de eerste keer niet goed krijgt—maar de VICE-aanpak zal zeker de kans op mislukking en verspilde moeite verminderen.,