A/B-testaus on jotain sinun täytyy olla tekee juuri nyt—varsinkin kun pieniä parannuksia sanoa 1% tai 2% voi tuottaa vaikuttava tuloja parannuksia ruodussa.
mikä on A / B-testaus?
Ennen kuin pääsemme yksityiskohtiin hämmästyttävä A/B-testaus puitteet, katsotaanpa ottaa askel taaksepäin ja varmistaa, että olemme kaikki samalla sivulla, kun puhutaan A/B-testaus yleensä., A/B-testaus digitaalisen markkinoinnin ja muuntaminen optimointi, myös kirjoitettu niin A/B-testaus, tai A/B-testaus on prosessi testaus kaksi versiota verkkosivun tai sovelluksen ohjattu eroja.
sivut esitellään käyttäjille satunnaisesti. Kun suoritustiedot kerätään, sivut analysoidaan sen selvittämiseksi, mikä versio toimii paremmin.
mitä hyötyä A / B-testauksesta on?
testaamalla verkkosivuston tai sovelluksen variaatioita tilastollisella tiukkuudella voit mitata ja optimoida sivusi varmistaaksesi, että maksimoit muunnokset., Olitpa testaamassa otsikon muutosta tai vain napin väriä, älä luota teoriaan näiden päätösten ohjaamiseksi, testaa sitä ja anna tietojen ajaa päätöksentekoa.
Let ’ s do some quick math to paint a picture of the impact it can have.
Kuvittele tuotteesi myyvän 100 dollaria ja sinulla on 10 000 käyntiä kuukaudessa verkkosivullasi. 3% heistä muuntaa, tuottaa $30,000 tuloja, että yksi tuote.
Voit A/B testata joitakin muutoksia sivulle, ja testi osoittaa, että uusi sivu versio parantaa muuntokurssi 3% (nyt olet muuntaa 3.09% kävijöistä)., Alle 0,1% lisämuunnokset ei kuulosta paljon, mutta olet juuri tuottanut lisää $900 kuukaudessa tuloja. Vaikka et lopeta testaus tässä vaiheessa, olet lisännyt $10,800 vuotuinen liikevaihto
Jos pidät testaus, ja testi kaksi kertaa sama tulos 3% parannus tulosprosentti, tulosprosentin nousee 9.3% (1.03 * 1.03 * 1.03). Se on kuin lisäisi kiinnostusta. Ensimmäinen kuukausi uudella muuntokurssilla on inkrementaalinen muuntoarvo $2,782. Yli vuoden, tämä johtaa inkrementaalinen $33,382.,
tässä nimenomaisessa esimerkissä, testaus johti yli kuukauden verran lisätuloiksi.
huomaa, että tämä on tehty liikenne pysyi muuttumattomana. Et sijoittanut suurempaan määrään mainoksia, enemmän sisällön jakelua sähköposteja, sitewide SEO, tai mitään muuta, joka kasvattaisi liikennettä. Saat lisäarvoa jo saamastasi liikennemäärästä. Optimoit $ – arvon jokaiselle kävijälle.
millaisilla A / B-testeillä saadaan tuloksia?
tutkittavana on lukuisia mittareita ja jopa datan alueita., Tässä on 3 tapaa, joilla voimme käyttää split testaus varmistaa meillä on parhaat muuntokurssit mahdollista.
Hinnoittelu Kokeiluja
– Siellä käytetään olla markkinoinnin teoriaa, että hinnat päättyy 7 todella muunnetaan parempi kuin mikään muu numero. Miksi? Koska hinta, joka päättyy 0 (nolla) on osoittautunut liian yleinen, ei ole riittävän täsmällinen, 9 tuli yleisesti käytetty. Sitten hinnat päättyy 9 tuli niin yleinen, että se ei ole lietsoa merkittävä myönteinen vastaus enää, ja ei vaikuta vaihtokurssi. Miksi luulet, että hinnat päättyvät nyt seitsemään?,
7 todistettiin alun perin A / B-testillä, jossa hinnoittelu testattiin parhaan optimointipisteen löytämiseksi. Näin datassa ehdotettiin, ja sen näkee edelleen jossain SaaS-hinnoittelussa.
tämä ei välttämättä ole oikea suositus sivustollesi ja yleisöllesi. On hyvä tehdä omat testit ja löytää numero, joka parhaiten muuntaa sinulle erityisesti. Käytä parhaita käytäntöjä ja alan osaamista ohjataksesi, mitä yrität, mutta anna Oman A / B-testaustietosi ajaa päätöstä.,
väriteoria
toinen esimerkki verkkosivuston tai tietyn sivun A / B-versioiden testaamisesta on CTA: n väri.
Keltainen oli pitkään suosittu suosikki. Jälleen, kiitos B-testaus, tiedot osoittivat, että keltaiset painikkeet muunnetaan paremmin. Sittemmin ala on testannut värejä enemmän.
perusteellisemman testauksen tiedot viittaavat siihen, että se liittyy enemmän taustan ja CTA: n väliseen kontrastiin. Ei välttämättä keltainen miten katseenvangitsija CTA on yhteydessä sivun., Mutta, se on aina hyvä idea testata muunnelmia ja nähdä, mikä toimii oman erityisen CTA yhteydessä tietyn tuotemerkin.
Hiiriseuranta
jokin niinkin yksinkertainen asia kuin käyttäjän matkan seuraaminen verkkosivulla voi johtaa suureen actionable CRO-dataan. Mihin vierailijat keskittävät aikansa ja huomionsa? Mihin he pääsevät sivulla, kun he päättävät lähteä?
On olemassa erilaisia hiiren seuranta-ja heat map-ohjelmisto, joka näyttää sinulle millä sivulla käyttäjä viettää suurimman osan ajastaan, ja jos ne pudottaa pois., Testaamalla käyttäjän vuorovaikutusta verkkosivustosi kanssa tällä tavalla, voit antaa tietojen määrittää ominaisuusasetteluja, CTA-harjoitteluja jne.
tämän tyyppinen tieto, voit tehdä koulutettuja päätöksiä, suunnitella testejä ja mitata tuloksia näistä muutoksista.
heuristinen analyysi
ei riitä hyvän näköisen verkkosivun tai sovelluksen suunnitteluun, vaan sivun on myös saatava yleisö toteuttamaan haluttu toiminta.
heuristiikka ovat empiirisiä nyrkkisääntöjä tai parhaita käytäntöjä, joita on testattu aiemmin ja jotka on toteutettu UX-mallien tuottamiseksi., Jokainen sivu, tuote ja palvelu on kuitenkin ainutlaatuinen. Pikemminkin kuin vain varmistaa oman sivun sopii alan parhaiden käytäntöjen, eli paras käytäntö, joka on peräisin jonkun toisen testaus, on järkevää testata elementtejä, kuten kehotus toimia sijoitus-ja vaihtokurssit reaaliajassa. Anna suunnittelu sivustosi on data driven.
A/B-Testauskehyksen
käytön tärkeyttä ei voi vain kiirehtiä A / B-testaukseen. Sattumanvarainen lähestymistapa johtaa epäonnistumiseen.,
Jos olet kuten useimmat yritykset, sinulla on vain niin paljon varoja ja niin paljon rahaa, joten sinun täytyy oppia priorisoimaan—joskus häikäilemättä. Jos et pysty, kasvusi pysähtyy tai alat kutistua. A/B-testaus on nopein, helpoin ja kustannustehokkain tapa tutustu miten ajaa enemmän liikennettä, tuottaa enemmän myyntiä, luoda enemmän myyntiä. Jos haluat onnistua A / B—testauksessa, sinun on kehitettävä strategia ja prioriteetit etukäteen-mikä voi olla hankalaa.
Täällä McGaw.io, olemme suunnitelleet jotain, me kutsumme VICE A/B-testaus puitteet., Käyttämällä tätä kehystä, voimme välttää paljon yhteisiä A / B testaus epäonnistumisia, jotka johtuvat strategian ja organisaation puutteesta.
tässä viestissä käydään läpi VICE framework ja puretaan tarkalleen, miten se toimii. Tutkimme, miten voit käyttää VICE-lähestymistapaa maksimoidaksesi tavoitteesi (kuten tulot tai käyttäjätunnukset) ilman, että sinun tarvitsee käyttää enemmän rahaa liikenteen ajamiseen. Loppuun mennessä, ymmärrät miten käyttää tätä kehystä omassa liiketoiminnassasi, jotta voit hyötyä kaikesta, että A / B testaus on tarjota.,
miten Tärkeää on Luoda Hypoteeseja
Jos olet katsomaan McGaw.io blogi, näet, että olemme jo perusasiat, miten voit saada alkoi kanssa A/B-testaus, kuin mitä testata ja mitä välineitä käytetään.
painopiste tämä viesti on tutkia, miten voit suorittaa A/B-testit, jotka ovat todennäköisesti tuottaa myönteisiä tuloksia—ja avain saavuttamiseksi että on meidän VICE Framework ja Malli A/B-Testaus.
ennen kuin sukellat mihinkään A / B-testaukseen, sinun on ensin muodostettava joitakin hypoteeseja.,
hypoteesit ovat pohjimmiltaan sitä, mitä luulet tapahtuvan tiettyjen muutosten seurauksena.
VICE Frameworkia käyttäessämme käytämme lähtökohtana hypoteeseja. Hypoteesien luominen on tärkeää, koska ilman niitä kokeistasi puuttuu suunta. On hyvä keksiä etukäteen monenlaisia hypoteeseja. Ottaa erilaisia hypoteeseja rivissä parantaa kykyäsi nopeasti toteuttaa testejä tulevaisuudessa, lisäämällä nopeutta, jolla voit nostaa verkkosivuilla muunnoksia.,
sinun tulisi luoda vähintään yksi hypoteesi jokaiselle testattavan sivun alkuaineelle.
Pro Vihje: pidättäydy A / B testaamasta useampaa kuin yhtä sivun elementtiä kulloinkin. Testaaminen useita osia sivun kerralla tekee vaikeaksi selvittää, mitkä muutokset todella johtavat tiettyihin tuloksiin.
Pro Vihje: pidättäydy A / B testaamasta useampaa kuin yhtä sivun elementtiä kulloinkin. Testaaminen useita osia sivun kerralla tekee vaikeaksi selvittää, mitkä muutokset todella johtavat tiettyihin tuloksiin.,
Pro Tip: Vaikka se voi olla hyödyllistä saada jonkinlaista taustatietoa siitä, mikä toimii hyvin, kun käynnissä testejä, aina ei tarvitse noudattaa parhaita käytäntöjä. Joissakin tapauksissa saatat huomata, että radikaalien muutosten tekeminen ja parhaiden käytäntöjen vastainen toiminta johtaa itse asiassa parempiin käännytyksiin.
VICE Approach
A / B-testeissä on tärkeää saada pikavoittoja vyön alle.
Kun hoidat alhainen roikkuu hedelmiä, olet paremmassa asemassa viettää aikaa enemmän haastavia kokeiluja haluat kaivaa., Plus, mitä nopeammin sinulla on joitakin voittaa A / B testit, sitä enemmän voit saada compounding parannuksia, jotka tulevat parantaa tuloksia.
Pro Tip: Jos olet tehnyt asiakkaalle työtä, tuottaa nopeita voittoja voi olla jopa tärkeämpää, koska se antaa sinulle mahdollisuuden todistaa, että A/B-testaus on syytä keskittyen.
miten voit tunnistaa matalat roikkuvat hedelmät ja määrittää ne kokeet tai hypoteesit, jotka todennäköisimmin toimivat?
Toki kristallipallosta voisi olla tässä apua, mutta kertoimet ovat, ettei sellaista ole.
Kuitenkin, täällä McGaw.,meillä on paras vaihtoehto. VICE-lähestymistapa.
VICE tarkoittaa:
- V – Velocity
- I – Vaikutus
- C – Luottamus
- E – Helppous
Ajatus tässä on, että voit pisteet hypoteeseja 0-10 (10 on korkein/edullisin), suhteessa kuhunkin edellä mainituista tekijöistä.
sitten kasaat nämä pisteet niin, että sinulla on ”yhteensä.”
Get the VICE Framework template here!,
Tämä yhteensä auttaa treenata todennäköisyyttä hypoteesin tai kokeilu tuottaa tuloksia verrattuna kaikki muut testit, jotka haluat suorittaa internet-sivusto tai sivu. Jos haluat luoda joitakin nopeita voittoja, se voi olla hyödyllistä priorisoida testit, jotka ovat korkeimmat pisteet.
Tässä on yleiskatsaus siitä, mitä meidän kehys näyttää in action, VARAPUHEENJOHTAJA kohta esille:
Jos me zoomata ja katsoa tarkemmin, voit nähdä, kuinka meidän hypoteeseja, pisteet kunkin luokan, ja laskea summat.,
Kukin näistä ryhmistä edustaa eri tekijöitä, jotka sinun täytyy huomioon, kun käynnissä/B-testi. Katsotaanpa tarkemmin kunkin jotta voit antaa sille niin tarkka pisteet kuin mahdollista.
nopeus
nopeus on nopeus, jolla testi voidaan suorittaa.
Oman nopeuden pisteet pitäisi perustua kaksi päätekijää: (1) kuinka paljon liikennettä sivulle on tulossa ja (2) miten havaittavissa muutos tulee olemaan.
kuinka paljon liikennettä
yleensä, mitä enemmän liikennettä sivusto tuo, sitä nopeammin testi voidaan suorittaa., Enemmän liikennettä tarkoittaa enemmän dataa, ja enemmän dataa tarkoittaa se vie vähemmän aikaa selvittää, jos tulokset ovat tilastollisesti merkittäviä (jotain me kattaa myöhemmin).
Kun me pisteet Velocity, me integroida Google Analytics-saat eniten tarkka määrä on mahdollista (haluavat integroida VARAPUHEENJOHTAJA framework google, ota meihin yhteyttä.). Nopeus on asetettu perustuu liikenteen määrä, joka menee läpi sivun. Jos sivu saa 50 000 ihmistä viikossa, osumme tilastolliseen merkitykseen melko nopeasti., Jos sivu on vain saada 500 annosta viikossa, se kestää kauemmin voit saada tarpeeksi tiedot olla varma, että tulokset
Rohkeus muuttaa
Saavuttaa tilastollista merkitsevyyttä ei ole vain siitä, kuinka monet ihmiset tulevat sivustoosi. Kyse on myös siitä, kuinka suuri tai noticable muutos testaat on. Mitä vähemmän muutos on havaittavissa, sitä epätodennäköisempää on vaikuttaa käyttäjän käyttäytymiseen, joten mitä kauemmin kestää, että testisi saavuttaa tilastollisen merkityksen., Esimerkiksi, jos päivität navigointi teksti lihavoitu fontti, joka ei todennäköisesti lisätä määrää napsautuksia saat dramaattisesti—niin se kestää kauemmin päästä tasolle, jossa voit olla varma, että muutos on tehdä ero.
Jos kuitenkin teet dramaattisen muutoksen, pääset tilastolliseen merkitykseen nopeammin. Esimerkiksi yhä useammat käyttäjät tulevat huomaamaan upouuden call-to-action-painikkeen, joten sinun pitäisi saada tarpeeksi tietoa ollaksesi varma tuloksistasi lyhyemmässä ajassa.,
Ajattele sitä näin: jos testi on enemmän dramaattinen tai polarisoivasta käyttäjän kokemus, sinun pitäisi odottaa, että Nopeus on suurempi, koska näet eron nopeammin.
Muut tekijät
on myös tärkeää tarkastella liikennemääriä suhteessa siihen, kuinka monta vaihtoehtoa tietyllä sivulla on. Mitä enemmän vaihtoehtoja (kuten linkkejä) on, sitä kauemmin testin suorittaminen yleensä kestää.
ja liiketoimintasi tai myyntisyklisi perusteella on muita tekijöitä, jotka sinun on ehkä otettava huomioon., Jos esimerkiksi yhden tuotteesi myyntisykli on kuusi viikkoa pitkä, et pysty tekemään edes pientä testiä viikossa.
yritä ottaa huomioon yksittäiset liiketoimintasi rajoitukset, kun pisteytys nopeus.
Vaikutus
Vaikutus on, kuinka paljon muutosta tulee osaltaan parantamaan tuloksia.
kun miettii, mitä Impact score antaa tietyn hypoteesin, on tärkeää ensin ajatella tavoitteesi. Jos tavoitteena on lisätä ilmaisen kokeiluversion käyttöä, kaikki muutokset ilmaiskokeilusivulla saisivat suuremman Vaikutusarvosanan., Jos haluat lisätä email capture antaa myyntitiimillesi enemmän johtolankoja, anna suurempi pistemäärä hypoteeseille, jotka todennäköisesti vaikuttavat kyseiselle alueelle.
Kun sinulla on tavoite mielessä, on olemassa kolme muita tekijöitä, harkitsemaan: (1) rohkeus, muutos, (2) sijoittaminen sivun suppilo, ja (3) analytics-tietoja.
muutoksen rohkeus
kuten edellä mainittiin nopeuden kanssa, mitä selvempi muutos on käyttäjillä, sitä todennäköisemmin se vaikuttaa heidän käyttäytymiseensä., Dramaattisia muutoksia on yleensä suurempi vaikutus pisteet, koska käyttäjät ovat todennäköisesti huomaa niitä, ja siten ne ovat todennäköisesti vaikuttaa tulosprosentti.
sijoitus suppilossa
on myös tärkeää miettiä, missä sivu on suppilossa. Yleensä suppilon yläreunan lähellä olevat sivut vaikuttavat usein enemmän kuin alhaalla olevat—yksinkertaisesti siksi, että useammat käyttäjät näkevät ne. Niinpä esimerkiksi kotisivun muutos voisi saada suuremman Vaikutuspisteen kuin palvelusivu.
muunlainen sivu, joka tyypillisesti saa suuren iskukohteen, ovat kassan ja hinnoittelun sivut., Impact Scoren pitäisi olla korkeampi missä tahansa paikassa, jossa käyttäjät yrittävät antaa sinulle rahaa. Haluat tehdä prosessista mahdollisimman helpon.
Analytics-Tiedot
Lopuksi, sinun kannattaa katso Analytics-tietojen avulla voit pisteet Vaikutus (tarvitsevat apua katsomalla analytics-tietoja, ota yhteyttä). Jos käytät Google Analytics (ja sinun pitäisi) ja Google Ecommerce, voit nähdä sivun arvoa suppilo. Mitä suurempi sivuarvo Google Analyticsissa on, sitä suurempi Vaikutusarvosanan pitäisi olla.,
Jos haluat saada todella siistiä, meillä on salainen PAHE puitteet, joilla voimme integroida suoraan Google Analyticsin tili ja vetää Velocity mainoksen Vaikutus perustuu numeroita, sinulla on Google Analytics. Ota yhteyttä, jos haluat olla hämmästyttävä.
Luottamus
Luottamus on, miten sinusta tuntuu, kun mahdollisuudet koska hypoteesi tuottaa suotuisia tuloksia.
enemmän tiedät noin tämäntyyppisiä testaus, tarkempi olet, kun se tulee määrättäessä luottamusta arvioinnista etuajassa., Vaikka A/B-testaus toimii yleensä tapaus tapaukselta perusteella, huomaat, että on yhteisiä ongelmia, jotka voidaan usein ratkaista käyttämällä yhteisiä ratkaisuja. Esimerkki tästä voi olla suosittelun sisällyttäminen laskeutumissivulle.
Jos olet testaukseen upouusi, älä mieti sitä liikaa ja anna sille paras arvauksesi. Kautta prosessi luoda hypoteeseja ja kirjallisesti itseluottamusta, voit nopeasti saada paremman käsityksen, joka testit ovat todennäköisesti menestys.,
Kun alkaa tehdä ennusteita, se voi olla hyödyllistä pitää kirjaa siitä, kuinka sinä ja tiimisi ovat tekemässä, kun se tulee ennustaa—ei niin jonkinlainen rangaistus (A/B-testaus voi olla nirso jopa asiantuntija), mutta opetuksen mahdollisuus. Usein itseluottamuspisteissä näkyy kuvioita. Ehkä joku tiimisi aina yliarvioi vaikutuksia väri tai joku muu aliarvioi merkitystä kotisivu.,
Jos joku on jatkuvasti saada enemmän oikeita arvauksia sitten loput joukkue, se saattaa jopa olla hyvä idea antaa hieman suurempi määrä testit niillä on suuri luottamus.
Koska olemme yritys, ohjaa tiedot, me rakentaa malli, joka kestää past performance huomioon ja vähentää automaattisesti tai kuoppia meidän joukkueen tulokset kuin on tarpeen. Se voi olla hieman yli laidan useimmille yrityksille,mutta voit soveltaa yleistä periaatetta ilman määrällistä kaavaa., Kerro meille, jos haluat olla beta testaaja tämä uusi työkalu 🙂
Helppous
Helppous on tekninen taito, joka on tarpeen tehdä muutoksia.
Whew. Olemme melkein valmiita. Onneksi helppous on yleensä helpoin luokka tehdä maali. Sinun tarvitsee vain miettiä, kuka sinun täytyy tehdä muutos, ja kuinka paljon aikaa se vie heidät. Kysy itseltäsi, voiko johonkin tiettyyn kokeiluun liittyviä muutoksia tehdä joku tiimistäsi tai jos sinun täytyy ottaa mukaan kehittäjä tai suunnittelija.,
Split testaustyökalut kuten Optimizely tai Visual Website Optimizer tekevät markkinoijille helpoksi tehdä yksinkertaisia muutoksia, kuten poistaa painikkeen tai vaihtaa otsikkoa. Koko sivun tyylin muokkaaminen tai jopa uusien sivujen lisääminen verkkosivustolle voi kuitenkin olla paljon monimutkaisempaa.
tämänkaltaiset muutokset vaativat todennäköisesti kehittäjän ja ehkä jopa copywriterin apua, jotta homma saadaan hoidettua kunnolla. Älä pelkää kytkeä niitä ja saada tarkempi pisteet täällä.
kun olet selvittänyt, kenen on suoritettava tietty testi, mieti, kuinka kauan se kestää., Jos joudut maksamaan kehittäjälle tuntien ja tuntien työstä tai palkkaamaan ulkopuolisen urakoitsijan tai menettämään markkinointitiimisi jäsenen viikoksi, anna testille pienempi helppouden pistemäärä. Jos se ei vie paljon aikaa ja tarvitset vain yhden jäsenen tiimisi, antaa sille enemmän pisteitä.
Validointi Menestys
VICE kehys tekee, se on paljon helpompi käydä läpi prosessi oikein A/B-testaus eri osien verkkosivuilla saamatta ylityöllistettyjä., Kuitenkin framework voi suojella sinua virheitä tuomion, saatat tehdä, kun yrittää selvittää, jos kokeilu oli onnistunut vai ei.
joissakin tapauksissa, se voi näyttää ikään kuin olet parantunut tuloksia, mutta ajan myötä muutokset saattavat epäonnistua tuottamaan johdonmukaista lisätä konversioita. Suojautua tällainen tilanne, sinun täytyy varmistaa, että tulokset ovat tilastollisesti merkittäviä.
Jos he eivät ole tilastollisesti merkittäviä, mitä luulet on parannus voisi itse asiassa olla vain flash-in-the-pan tulos., Ihanteellista olisi, että kokeiden tilastollinen merkitys olisi vähintään 95%. Tarkistamalla tulosten tilastollisen merkityksen ja varmistamalla, että ne ovat yli 95%, voit luotettavasti määrittää, onko sinulla voittava vaihtelu käsissäsi ja onko muutokset syytä pitää.
Nyt, jos et ole matemaattisesti taipuvainen tai käsite tilastollinen merkitsevyys pelottaa sinua—älä huoli. Olemme luoneet Effin A / B-Testilaskimen. Tämän yksinkertaisen Chrome-laajennuksen avulla voidaan määrittää, ovatko tuloksesi tilastollisesti merkitseviä.,
Se on erittäin helppo käyttää. Kaikki mitä sinun tarvitsee tehdä, on laittaa liikenteen ja muuntaminen numerot ja työkalu näyttää tuloksia. Ei tarvitse pelleillä monimutkaisilla kaavoilla!
tietenkin voit vapaasti käyttää muita työkaluja ja menetelmiä. Mitä tahansa teetkin, varmista, että aina tarkistaa tilastollinen merkitys tuloksia ennen kuin päätät voittavan muunnelman.
Johtopäätös
Suorittaa A/B-kokeilut, voi tulla hyvin suuri, hyvin nopeasti. Käyttämällä meidän VICE lähestymistapa, kuitenkin, voit estää sen., Jos käytät tarvittavan ajan keksiäksesi hypoteeseja, sinun tarvitsee vain käyttää VICE-lähestymistapaa selvittääksesi, mihin sinun pitäisi keskittyä.
kun olet tuottanut joitakin testiin liittyviä tietoja, tarkista sen tilastollinen merkitys. Palautetusta tuloksesta riippuen tiedät, kannattaako muutokset pitää. A / B testaus on jotain, että haluat tehdä mahdollisimman pian, joten yritä ryhtyä toimiin, mitä olet oppinut nopeasti.
Varmasti, et ehkä ole saada asiat oikein ensimmäisellä kerralla—mutta VICE lähestymistapa on ehdottomasti leikata alas todennäköisyys epäonnistumisen ja turhaa.,