Ghid de testare A/B: 15 experimente pe care ar trebui să le facă orice site
Majoritatea testelor A/B eșuează — nu pentru că CRO nu funcționează, ci pentru că echipele testează lucrurile greșite. Un cadru de prioritizare pentru teste care cresc constant rata de conversie.
Majoritatea testelor A/B nu dau niciun rezultat. Nu pentru că ipoteza era greșită, ci pentru că nu aveau destul trafic ca să poată da vreunul.
Matematica pe care nimeni nu o face înainte
Ca să detectezi o îmbunătățire de 10% pornind de la o rată de conversie de 2%, ai nevoie de aproximativ 30.000 de vizitatori per variantă. Pentru o îmbunătățire de 5%, de patru ori mai mult.
Dacă pagina ta primește 2.000 de vizitatori pe lună, un test corect ar dura peste doi ani. Orice concluzie tras mai devreme e zgomot.
Calculează asta înainte de test. Dacă numărul e imposibil, nu face testul — fă o schimbare argumentată și treci mai departe.
Ce testezi când nu ai trafic
Schimbări mari, nu mici. O pagină complet nouă față de cea veche poate produce diferențe de 30–50%, care se detectează cu mult mai puțini vizitatori decât 5%.
Etape cu volum mare. Nu testa pagina de mulțumire. Testează pagina pe care intră toată lumea.
Măsoară altfel. Interviuri cu clienți, înregistrări de sesiuni, sondaje la ieșire. Nu dau certitudine statistică, dar dau direcție — iar direcția e ce îți lipsește de fapt.
Greșelile care invalidează testul
Oprirea când arată bine. Rata de conversie fluctuează sălbatic în primele zile. Dacă oprești când varianta B e în față, vei „câștiga" mereu și nu vei crește niciodată.
Testarea a cinci lucruri odată. Dacă schimbi titlul, imaginea, butonul și prețul, iar rezultatul e bun, nu știi ce a funcționat — deci nu poți repeta.
Durata sub o săptămână. Comportamentul diferă între zilele săptămânii. Un test de marți până joi măsoară marți-joi.
Ignorarea segmentelor. O variantă poate pierde pe total și câștiga clar pe mobil. Media ascunde asta.
Ce faci cu un rezultat neconcludent
Îl accepți. „Nicio diferență" e un rezultat valid și îți spune că ipoteza nu conta. Nu îl transforma în „aproape semnificativ" ca să justifici schimbarea.
Prin ce începi
Nu cu testul. Cu întrebarea „unde pierd cei mai mulți oameni". Uită-te în pâlnie, găsește etapa cu cea mai mare scurgere și testează acolo. Testele pornite din curiozitate nu produc creștere.
Câte ore pe săptămână pierzi pe lucruri repetitive?
În 20 de minute pe Zoom aflăm care dintre ele se pot face singure. Pleci cu răspunsul, indiferent dacă lucrăm împreună sau nu.
Apel gratuit, fără obligații. Pleci cu o listă concretă de probleme și oportunități de automatizare, indiferent dacă alegi sau nu să lucrăm împreună.