A/B testing este ceva ce trebuie să faci acum—mai ales atunci când îmbunătățiri mici de 1% sau 2% poate produce venituri impresionante îmbunătățiri pe linie.
ce este testarea A / B?
înainte de a intra în specificul unui cadru uimitor de testare A/B, să facem doar un pas înapoi și să ne asigurăm că suntem cu toții pe aceeași pagină atunci când vorbim despre testarea A/B în general., Testarea A / B în marketingul digital și optimizarea conversiilor, scrisă și ca testare A/B sau testare A/B, este procesul de testare a două versiuni ale unei pagini web sau aplicații cu diferențe controlate.
paginile sunt prezentate utilizatorilor la întâmplare. Pe măsură ce datele de performanță sunt colectate, paginile sunt analizate pentru a determina ce versiune are performanțe mai bune.
care sunt beneficiile testării A / B?testarea variațiilor unui site web sau a unei aplicații cu rigoare statistică vă permite să măsurați și să optimizați pagina pentru a vă asigura că maximizați conversiile., Indiferent dacă testați o modificare a antetului sau doar culoarea unui buton, nu vă bazați pe teorie pentru a ghida aceste decizii, a le testa și a permite datelor să conducă la luarea deciziilor.
să facem niște matematică rapidă pentru a picta o imagine a impactului pe care îl poate avea.
Imaginați-vă că produsul dvs. se vinde la 100 USD și aveți 10.000 de vizite pe lună pe pagina dvs. web. 3% dintre ei se convertesc, generând venituri de $30,000 pentru acel produs.
testați A / B unele modificări ale paginii, iar testul dvs. vă arată că noua versiune a paginii îmbunătățește rata de conversie cu 3% (deci acum convertiți 3,09% din vizitatori)., Mai puțin de 0.1% conversii suplimentare nu sună prea mult, dar tocmai ați generat venituri suplimentare de $900 pe lună. Chiar dacă opriți testarea în acel moment, ați adăugat venituri anuale de 10.800 USD
dacă continuați testarea și testați încă de două ori cu același rezultat al unei îmbunătățiri de 3% a ratei de conversie, rata de conversie crește cu 9.3% (1.03 * 1.03 * 1.03). Este foarte mult ca și cum ar fi compus interes. Prima lună la noua rată de conversie va avea o valoare de conversie incrementală de $2,782. Peste un an, acest lucru va duce la o incrementală $33,382.,
în acest exemplu special, testarea a condus la venituri incrementale în valoare de mai mult de o lună.vă rugăm să rețineți că acest lucru se face cu traficul rămas constant. Nu ați investit în volum mai mare de anunțuri, mai multe e-mailuri de distribuție a conținutului, SEO la nivel de sitewide sau orice altceva care ar crește traficul. Doar obțineți mai multă valoare din volumul de trafic pe care îl obțineți deja. Sunteți optimizarea pentru $ – valoarea fiecărui vizitator.
ce tipuri de testare A/B oferă rezultate?
există numeroase valori și chiar zone de date de explorat., Iată 3 modalități prin care putem folosi testarea divizată pentru a ne asigura că avem cele mai bune rate de conversie posibile.
experimente de stabilire a prețurilor
a existat o teorie de marketing conform căreia prețurile care se termină în 7 s-au convertit de fapt mai bine decât orice alt număr. De ce? Deoarece având un preț care se termină cu 0 (zero) sa dovedit a fi prea general, nu suficient de specific, 9 a devenit frecvent utilizat. Apoi, prețurile care se termină în 9 au devenit atât de comune încât nu mai stârnesc un răspuns pozitiv notabil și nu afectează o rată de conversie. Deci, de ce crezi că Vezi prețurile care se termină în 7 acum?,
7 a fost dovedit inițial cu un test A / B, unde prețurile au fost testate pentru a găsi cel mai bun punct de optimizare. Aceasta este ceea ce au sugerat datele și îl puteți vedea în continuare în unele prețuri SaaS.este posibil ca aceasta să nu fie recomandarea potrivită pentru site-ul dvs. web și pentru publicul dvs. Este o idee bună pentru a rula propriile teste, și pentru a găsi numărul care convertește cel mai bine pentru tine, în special. Utilizați cele mai bune practici și cunoștințe din industrie pentru a ghida ceea ce încercați, dar lăsați-vă propriile date de testare A/B să conducă decizia.,
teoria culorilor
Un alt exemplu de testare a versiunilor A/B ale unui site web sau ale unei pagini specifice este culoarea CTA.
galbenul a fost un favorit popular pentru o lungă perioadă de timp. Din nou, datorită unei teste B, datele au arătat că butoanele galbene s-au convertit mai bine. De atunci, industria a testat mai multe culori.
datele de la teste mai aprofundate sugerează că este mai mult legat de contrastul dintre fundal și CTA. Nu neapărat galben doar cum ochi prinderea CTA este în contextul paginii., Dar, este întotdeauna o idee bună să testați variațiile și să vedeți ce funcționează pentru CTA-ul dvs. specific în contextul brandingului dvs. specific.
urmărirea Mouse-ului
ceva la fel de simplu ca urmărirea călătoriei utilizatorului pe o pagină web poate duce la date CRO acționabile excelente. Unde își concentrează vizitatorii timpul și atenția? Unde ajung pe pagină când decid să plece? există o varietate de software de urmărire a mouse-ului și de hartă a căldurii care vă arată exact unde pe pagină utilizatorul își petrece cea mai mare parte a timpului și unde renunță., Prin testarea interacțiunii utilizatorului cu site-ul dvs. web în acest mod, puteți permite datelor să determine layout-urile de caracteristici, plasările CTA etc.cu acest tip de cunoștințe, puteți lua decizii educate pentru a vă proiecta testele și a măsura rezultatele acestor modificări.
analiză euristică
nu este suficient să proiectați o pagină web sau o aplicație cu aspect bun; pagina trebuie, de asemenea, să convingă publicul să finalizeze acțiunea dorită. Euristicile sunt reguli empirice sau cele mai bune practici care au fost testate în trecut și sunt implementate pentru a produce modele UX., Cu toate acestea, fiecare pagină, produs și serviciu este unic. Mai degrabă decât doar asigurându-pagina dvs. se potrivește cu cele mai bune practici industriale, adică cele mai bune practici care vine de la altcineva e de testare, este logic pentru a testa elemente, cum ar fi apelul la acțiune plasament și ratele de conversie în timp real. Lăsați designul site-ului dvs. web să fie condus de date.
importanța utilizării unui cadru de testare A / B
nu vă puteți grăbi doar în testarea A/B. O abordare întâmplătoare va duce la eșec.,dacă sunteți ca majoritatea companiilor, aveți doar atât de multe resurse și atât de mulți bani, deci trebuie să învățați să acordați prioritate—uneori fără milă. Dacă nu puteți, creșterea dvs. va stagna în cele din urmă sau veți începe să vă micșorați. Testarea A / B este cea mai rapidă, mai ușoară și mai rentabilă modalitate de a descoperi cum să conduci mai mult trafic, să generezi mai multe oportunități, să creezi mai multe vânzări. Dacă doriți să reușiți cu testarea A / B, trebuie să dezvoltați o strategie și priorități din timp—ceea ce poate fi dificil de făcut.
aici la McGaw.io, am proiectat ceva ce numim cadrul de testare VICE A / B., Folosind acest cadru, suntem capabili de a evita o mulțime de comune eșecuri de testare A/B, care sunt cauzate de lipsa de strategie și organizare.
în acest post, vom trece prin cadrul VICE și vom descompune exact cum funcționează. Vom explora modul în care poți folosi abordarea VICE pentru a-ți maximiza obiectivele (cum ar fi veniturile sau înscrierile utilizatorilor) fără a fi nevoie să cheltuiești mai mulți bani pentru a conduce traficul. Până la sfârșit, veți înțelege cum să utilizați acest cadru în propria afacere, astfel încât să puteți beneficia de tot ceea ce A/B testing are de oferit.,
Importanța Creării de Ipoteze
Dacă vă uitați la McGaw.io blog, veți vedea că deja ne-am acoperit elementele de bază ale cum puteți începe cu testarea a/B, cum de a testa și ce instrumente de utilizat. Obiectivul acestui post este de a explora modul în care puteți efectua teste A/B care sunt mai susceptibile de a produce rezultate benefice—și cheia pentru a realiza acest lucru este cadrul nostru VICE și șablonul pentru testarea A/B.înainte de a vă arunca cu capul în orice testare A/B, trebuie mai întâi să formați câteva ipoteze.,
ipotezele sunt, în esență, ceea ce credeți că se va întâmpla ca urmare a unor modificări.
când folosim cadrul VICE, folosim ipotezele ca punct de plecare. Generarea de ipoteze este importantă, deoarece fără ele, experimentele dvs. vor lipsi de direcție. Este o idee bună să veniți cu o gamă largă de ipoteze înainte de timp. Având o varietate de ipoteze aliniate vă va îmbunătăți capacitatea de a implementa rapid teste în viitor, crescând rata la care puteți crește conversiile site-urilor web.,trebuie să creați cel puțin o ipoteză pentru fiecare element al unei pagini pe care doriți să o testați.
Sfat Pro: să se abțină de la A / B Testarea mai mult de un element al unei pagini la un moment dat. Testarea mai multor elemente ale unei pagini simultan face greu să ne dăm seama care schimbări duc de fapt la anumite rezultate.
Sfat Pro: să se abțină de la A / B Testarea mai mult de un element al unei pagini la un moment dat. Testarea mai multor elemente ale unei pagini simultan face greu să ne dăm seama care schimbări duc de fapt la anumite rezultate.,
Sfat Pro: deși poate fi util să aveți cunoștințe de bază cu privire la ceea ce funcționează bine atunci când executați teste, nu trebuie să urmați întotdeauna cele mai bune practici. În unele cazuri, s-ar putea să constatați că a face schimbări radicale și a merge împotriva celor mai bune practici duce de fapt la conversii mai bune.
abordarea VICE
când vine vorba de testarea A/B, este important să obțineți câteva câștiguri rapide sub centură.
atunci când aveți grijă de fructe agățat scăzut, sunteți într-o poziție mai bună de a petrece timp pe experimente mai dificile pe care doriți să sape în., În plus, cu cât aveți mai devreme câteva teste A/B câștigătoare, cu atât veți câștiga mai mult din îmbunătățirile compuse care vin cu îmbunătățirea conversiilor. sfat Pro: dacă lucrați la client, generarea câștigurilor rapide poate fi și mai importantă, deoarece vă oferă posibilitatea de a dovedi că testarea A/B merită să vă concentrați. având în vedere acest lucru, cum puteți identifica fructele agățate scăzute și puteți determina experimentele sau ipotezele care sunt cel mai probabil să funcționeze?sigur, o minge de cristal ar putea fi de ajutor aici, dar șansele sunt că nu aveți una. cu toate acestea, aici, la McGaw.,io, credem că avem cel mai bun lucru—abordarea viciului.
VICE-standuri pentru:
- V – Viteza
- am – Impact
- C – Încredere
- E – Ușurința
Ideea aici este că scorul dvs. de ipoteze de la 0 la 10 (10 fiind cel mai mare/cel mai preferat), în raport cu fiecare din factorii de mai sus.
tu apoi tally sus aceste scoruri, astfel încât să aveți un ” total.”
Obțineți șablonul de cadru VICE aici!,
Acest total ajută lucra probabilitatea unei ipoteze sau a experimentului a produce rezultate atunci când în comparație cu toate celelalte teste vrei pentru a rula pe un site sau pagină. Dacă doriți să generați câteva câștiguri rapide, poate fi util să acordați prioritate testelor care au cele mai mari scoruri.
Iată o prezentare generală a ceea ce arată cadrul nostru în acțiune, cu secțiunea VICE evidențiată:
dacă mărim și aruncăm o privire mai atentă, puteți vedea cum formăm ipoteze, marcăm fiecare categorie și numărăm totalurile.,
fiecare dintre aceste categorii reprezintă diferiți factori de care trebuie să țineți cont atunci când executați un test A / B. Să aruncăm o privire mai atentă la fiecare, astfel încât să puteți da un scor cât mai precis posibil.
Velocity
Velocity este viteza cu care poate fi rulat un test.
scorul dvs. de viteză ar trebui să se bazeze pe doi factori principali: (1) Cât de mult trafic o pagină este obtinerea și (2) Cât de notabil o schimbare va fi.
cât de mult trafic
în general, cu cât mai mult trafic aduce un site web, cu atât mai rapid poate fi rulat un test., Mai mult trafic înseamnă mai multe date, iar mai multe date înseamnă că va dura mai puțin timp pentru a afla dacă rezultatele sunt semnificative statistic (lucru pe care îl vom acoperi mai târziu).
când obținem scorul pentru Velocity, ne integrăm cu Google Analytics pentru a obține cel mai precis număr posibil (doriți să integrăm cadrul dvs. de VICE în google, contactați-ne.). Viteza este stabilită în funcție de cantitatea de trafic care trece printr-o pagină. Dacă o pagină primește 50.000 de persoane pe săptămână, putem atinge semnificația statistică destul de repede., Dacă o pagină primește doar 500 de accesări pe săptămână, va dura mai mult timp pentru a avea suficiente date pentru a avea încredere în rezultate
îndrăzneala schimbării
atingerea semnificației statistice nu este doar despre câți oameni vin pe site-ul dvs. web. Este, de asemenea, despre cât de mare sau notabilă este schimbarea pe care o testați. Cu cât schimbarea este mai puțin vizibilă, cu atât este mai puțin probabil să influențeze comportamentul utilizatorului, deci cu atât va dura mai mult ca testul dvs. să atingă semnificația statistică., De exemplu, dacă actualizați textul de navigare la un font îndrăzneț, probabil că nu va crește numărul de clicuri pe care le obțineți dramatic—deci va dura mai mult pentru a ajunge la un nivel în care puteți fi sigur că schimbarea face diferența.
dacă, totuși, faceți o schimbare dramatică, puteți ajunge mai rapid la semnificația statistică. De exemplu, mai mulți utilizatori vor observa un nou buton de apel la acțiune, deci ar trebui să obțineți suficiente date pentru a avea încredere în rezultatele dvs. într-un timp mai scurt.,
gândiți-vă astfel: dacă testul este mai dramatic sau polarizant pentru experiența utilizatorului, atunci ar trebui să vă așteptați ca viteza să fie mai mare, deoarece veți vedea o diferență mai rapidă.
alți factori
De asemenea, este important să se uite la numerele de trafic în raport cu cât de multe opțiuni există pe o anumită pagină. Cu cât există mai multe opțiuni (cum ar fi link-urile), cu atât mai mult va dura, în general, pentru a finaliza testul. și în funcție de afacerea dvs. sau de ciclul dvs. de vânzări, există alți factori de care ar trebui să țineți cont., De exemplu, dacă ciclul de vânzări pentru unul dintre produsele dvs. durează șase săptămâni, nu veți putea finaliza nici măcar un mic test într-o săptămână.încercați să luați în considerare constrângerile dvs. individuale de afaceri atunci când notați viteza.
Impact
impactul este cât de mult o schimbare va contribui la o îmbunătățire a conversiilor.
când vă gândiți ce scor de Impact pentru a da o anumită ipoteză, este important să vă gândiți mai întâi la obiectivul dvs. Dacă obiectivul dvs. este de a crește utilizarea unei încercări gratuite, atunci orice modificare de pe pagina de încercare gratuită ar obține un scor de Impact mai mare., Dacă doriți să creșteți captura de e-mail pentru a oferi echipei dvs. de vânzări mai multe oportunități, acordați un scor mai mare ipotezelor care ar putea avea impact asupra zonei respective.odată ce ai în minte obiectivul, trebuie să iei în considerare alți trei factori: (1) îndrăzneala schimbării, (2) plasarea paginii în pâlnie și (3) datele tale analitice.după cum am menționat cu Velocity mai sus, cu cât o schimbare este mai vizibilă pentru utilizatorii dvs., cu atât este mai probabil să le influențezi comportamentul., Modificările dramatice au, de obicei, un scor de impact mai mare, deoarece utilizatorii au mai multe șanse să le observe și, prin urmare, sunt mai susceptibili să vă afecteze rata de conversie.
plasare în pâlnie
De asemenea, este important să luați în considerare unde se află pagina în pâlnie. În general, paginile din partea de sus a pâlniei vor avea adesea mai mult impact decât cele din partea de jos—pur și simplu pentru că mai mulți utilizatori le vor vedea. Deci, de exemplu, o modificare pe pagina principală ar putea obține un scor de Impact mai mare decât o pagină de servicii.
celălalt tip de pagină care are de obicei un scor mare de impact sunt paginile de plată și de stabilire a prețurilor., Scorul de Impact ar trebui să fie mai mare pentru orice loc în care utilizatorii încearcă să vă dea bani. Vrei să faci acest proces cât mai ușor posibil.în cele din urmă, veți dori să vă uitați la datele dvs. de analiză pentru a vă ajuta să obțineți impactul (aveți nevoie de ajutor privind datele dvs. de analiză, contactați-ne). Dacă utilizați Google Analytics (și ar trebui să fiți) și Google Ecommerce, puteți vedea valoarea unei pagini în pâlnie. Cu cât valoarea paginii este mai mare în Google Analytics, cu atât scorul de Impact ar trebui să fie mai mare.,dacă doriți să obțineți foarte cool, avem un cadru Secret VICE pe care le putem integra direct în contul dvs. Contactați-ne dacă doriți să fiți uimitori.încrederea este modul în care vă simțiți despre șansele unei ipoteze date care produce rezultate favorabile.
Cu cât știți mai multe despre acest tip de testare, cu atât veți fi mai exact când vine vorba de prescrierea ratingurilor de încredere înainte de timp., Asta pentru că, chiar dacă testarea A/B tinde să funcționeze de la caz la caz, veți găsi că vor exista probleme comune care pot fi adesea rezolvate folosind soluții comune. Un exemplu în acest sens ar putea fi includerea unei mărturii pe o pagină de destinație.
dacă sunteți nou la testare, nu vă gândiți prea mult și dați-i cea mai bună estimare. Prin procesul de creare a ipotezelor și de scriere a încrederii dvs., veți obține rapid o înțelegere mai bună pentru care testele sunt susceptibile de a avea succes.,pe măsură ce începeți să faceți predicții, poate fi util să urmăriți cum vă descurcați dvs. și echipa dvs. atunci când vine vorba de prezicere—nu ca un fel de pedeapsă (testarea A/B poate fi dificilă chiar și pentru un expert), ci ca o oportunitate de predare. De multe ori, puteți vedea modele în scorurile de încredere. Poate cineva din echipa ta supraestimează întotdeauna impactul culorii sau altcineva subestimează importanța paginii de pornire.,
Dacă cineva este în mod constant mai multe presupuneri corecte, atunci restul echipei, ar putea fi chiar o idee bună să dea un număr ușor mai mare la testele au mare încredere.deoarece suntem o companie condusă de date, construim un model care ia în considerare performanțele anterioare și reduce sau mărește automat scorurile echipei noastre, după cum este necesar. Acest lucru ar putea fi puțin peste bord pentru majoritatea companiilor, dar puteți aplica principiul general fără a fi nevoie să îl cuantificați într-o formulă., Spuneți-ne dacă doriți să fiți un tester beta al acestui nou instrument 🙂
ușurință
ușurința este nivelul de calificare tehnică care va fi necesar pentru a face o schimbare.
Whew. Aproape am terminat. Din fericire, ușurința este de obicei cea mai ușoară categorie de înscris. Trebuie doar să ia în considerare care aveți nevoie pentru a face schimbarea și cât de mult timp le va lua. Întrebați-vă dacă vreuna dintre ajustările legate de un experiment specific poate fi făcută de cineva din echipa dvs. sau dacă va trebui să aduceți un dezvoltator sau un designer la bord., instrumente de testare Split, cum ar fi Optimizely sau Visual Website Optimizer face mai ușor pentru marketing pentru a face modificări simple, cum ar fi eliminarea unui buton sau schimbarea unui titlu. Cu toate acestea, modificarea întregului stil al unei pagini sau chiar adăugarea de noi pagini pe un site web poate fi mult mai complicată.
astfel de modificări vor necesita probabil ajutorul unui dezvoltator și poate chiar al unui copywriter pentru a face treaba corect. Nu vă fie frică să le buclați și să obțineți un scor mai precis aici.după ce ați stabilit cine trebuie să execute un anumit test, luați în considerare cât timp le va lua., Dacă trebuie să plătiți un dezvoltator pentru ore și ore de muncă sau să angajați un contractant extern sau să pierdeți un membru al echipei dvs. de marketing timp de o săptămână, acordați testului un scor de ușurință mai mic. Dacă nu va dura mult timp și ai nevoie doar de un membru al echipei tale, dă-i un scor mai mare.
validarea succesului
cadrul VICE face mult mai ușor să parcurgi procesul de testare corectă A/b a diferitelor elemente ale unui site web fără a fi copleșit., Cu toate acestea, cadrul nu vă poate proteja de erorile de judecată pe care le-ați putea face atunci când încercați să determinați dacă un experiment a avut succes sau nu.
în unele cazuri, poate părea că ați îmbunătățit conversiile, dar în timp, modificările pot să nu producă o creștere consistentă a conversiilor. Pentru a vă proteja de o astfel de situație, trebuie să vă asigurați că rezultatele dvs. sunt considerate semnificative din punct de vedere statistic.
dacă nu sunt semnificative statistic, ceea ce credeți că este o îmbunătățire ar putea fi, de fapt, doar un rezultat flash-in-the-pan., În mod ideal, experimentele dvs. ar trebui să aibă o semnificație statistică de cel puțin 95%. Verificând semnificația statistică a rezultatelor dvs. și asigurându-vă că acestea înregistrează peste 95%, puteți determina în mod fiabil dacă aveți o variație câștigătoare pe mâini și dacă modificările merită păstrate.
acum, dacă nu sunteți înclinat matematic sau conceptul de semnificație statistică vă sperie—nu vă faceți griji. Am creat calculatorul de testare Effin A / B. Această extensie simplă Chrome poate fi utilizată pentru a determina dacă rezultatele dvs. sunt sau nu semnificative statistic.,
este foarte ușor de utilizat. Tot ce trebuie să faceți este să puneți numerele de trafic și de conversie, iar Instrumentul vă va afișa rezultatele. Nu este nevoie să vă încurcați cu formule complicate! desigur, sunteți liber să utilizați alte instrumente și metode. Orice ai face, doar asigurați-vă că verificați întotdeauna semnificația statistică a rezultatelor înainte de a decide cu privire la o variație câștigătoare.
concluzie
efectuarea experimentelor A / B poate deveni foarte copleșitoare, foarte repede. Folosind abordarea noastră viciu, cu toate acestea, puteți preveni acest lucru., Cu condiția să petreci timpul necesar pentru a veni cu ipoteze, tot ce trebuie să faci este să folosești abordarea viciului pentru a-ți da seama unde ar trebui să te concentrezi. după ce ați generat unele date legate de test, verificați semnificația statistică a acestuia. În funcție de rezultatul returnat, veți ști dacă modificările merită păstrate. Testarea A / B este ceva ce veți dori să faceți cât mai curând posibil, așa că încercați să acționați rapid asupra a ceea ce ați învățat. sigur, s—ar putea să nu faceți lucrurile corect prima dată-dar abordarea viciului va reduce cu siguranță șansele de eșec și efort irosit.,