Un test A/B este un experiment în care arăți două variante ale aceluiași lucru (un titlu, un preț, un buton, un e-mail) unor grupuri diferite de oameni, în același timp, și compari care variantă dă rezultate mai bune. Metoda înlocuiește părerile cu date, dar funcționează doar dacă testul e gândit corect: o singură schimbare, un obiectiv clar și suficiente persoane pentru ca diferența să nu fie întâmplătoare.
Cum funcționează un test A/B
Pornești de la varianta existentă, numită control (A), și creezi o versiune modificată (B). Împarți vizitatorii sau clienții în două grupuri cât mai asemănătoare, de obicei la întâmplare, și fiecare grup vede doar una dintre variante. Apoi măsori un indicator stabilit dinainte: câți au apăsat un buton, câți au cumpărat, câți au deschis un e-mail. Dacă una dintre variante câștigă clar, o păstrezi. Dacă diferența e mică, nu poți ști dacă este reală sau doar rezultatul norocului.
Pentru a fi util, testul cere disciplină: nu schimbi nimic pe parcurs, nu te uiți la rezultate din oră în oră ca să oprești testul când îți convine și nu pornești mai multe teste care se influențează reciproc. Planificarea și măsurarea unor astfel de încercări sunt prezentate în ghidul despre experimentele de creștere, unde testul A/B apare ca una dintre metode.
Variante de test: o comparație
| Tip de test | Ce compară | Când se potrivește | Limite |
|---|---|---|---|
| Test A/B simplu | Două variante, o singură schimbare | Titluri, butoane, mesaje, prețuri | Cere suficient trafic pentru a arăta o diferență clară |
| Test cu mai multe variante | Trei sau mai multe versiuni ale aceluiași element | Când ai mai multe idei bune pentru același loc | Fiecare variantă primește mai puțini oameni, deci rezultatele vin mai greu |
| Test multivariat | Combinații de mai multe elemente simultan | Pagini cu mult trafic, unde contează interacțiunea între elemente | Complex, necesită foarte multe date |
| Test înainte-și-după | Rezultatele de dinaintea unei schimbări față de cele de după | Când nu poți împărți publicul în două grupuri | Alți factori (sezon, promoții) pot distorsiona comparația |
| Test cu grup restrâns | Varianta nouă la o parte mică din public | Schimbări riscante, de verificat înainte de lansarea completă | Rezultatele pot să nu se aplice întregului public |
Ce poți testa, concret
- titlul unei pagini sau al unei reclame;
- textul sau culoarea unui buton de acțiune;
- subiectul unui e-mail trimis clienților;
- modul de prezentare a prețului sau a unei oferte;
- ordinea pașilor într-un formular de comandă;
- o imagine principală față de alta.
Alege lucruri care pot avea un efect vizibil asupra comportamentului. A testa nuanța unui gri sau o virgulă rar aduce vreo diferență măsurabilă.
Cum pregătești un test corect
- Formulează o ipoteză: „Dacă schimbăm titlul în X, mai mulți vizitatori vor cere o ofertă, pentru că mesajul este mai clar.”
- Alege un singur indicator de succes: acțiunea pe care vrei să o vezi mai des.
- Schimbă un singur element: altfel nu vei ști ce a produs diferența.
- Stabilește durata dinainte: suficient de lungă pentru a include zile obișnuite și, la nevoie, un ciclu complet de cumpărare.
- Împarte publicul la întâmplare: nu pune clienții vechi într-un grup și pe cei noi în altul.
- Nu opri testul mai devreme dacă „pare” că a câștigat o variantă. Rezultatele timpurii induc în eroare.
Câți oameni sunt suficienți
Aceasta este întrebarea la care mulți ezită. Răspunsul depinde de cât de mare este diferența pe care vrei s-o detectezi și de cât de des se întâmplă acțiunea măsurată. Cu cât acțiunea e mai rară și diferența mai mică, cu atât ai nevoie de mai mulți oameni. O firmă cu foarte puțini vizitatori nu poate testa schimbări mici; poate însă testa schimbări mari (o ofertă complet diferită) sau poate folosi alte metode de învățare, precum discuțiile directe cu clienții. Există calculatoare gratuite pentru dimensiunea eșantionului, utile ca ordin de mărime, dar nu garantează nimic.
Greșeli frecvente
Testezi fără o ipoteză
„Hai să vedem ce iese” duce la rezultate imposibil de interpretat. Fără o idee despre de ce ar funcționa o variantă, nu înveți nimic din victorie sau din eșec.
Tragi o regulă dintr-un singur test
Un test îți spune ce s-a întâmplat într-un anumit context. Poate să nu se aplice altui public sau altui moment. Repetă testele importante.
Ignori factorii externi
O campanie de presă, o sărbătoare sau o pană de curent pot schimba comportamentul oamenilor în timpul testului. Notează orice eveniment neobișnuit.
Optimizezi detalii mărunte
Dacă produsul nu rezolvă o problemă reală, nu-l vor salva butoanele de altă culoare. Începe cu testele cu cel mai mare potențial: oferta, mesajul, prețul.
Un exemplu de zi cu zi
O librărie online vrea să afle dacă livrarea gratuită peste un anumit prag crește valoarea comenzilor. Timp de trei săptămâni, jumătate dintre vizitatori văd pragul afișat sus, jumătate nu. Proprietara compară valoarea medie a coșului și numărul de comenzi finalizate. Dacă valoarea coșului crește, dar comenzile scad, nu este clar câștigul; dacă ambele cresc, decizia e simplă. Ce contează aici este că ea a ales în prealabil indicatorul (venitul total pe vizitator) și a hotărât durata, în loc să se uite zilnic la grafice și să se entuziasmeze la primul vârf.
Dacă nu ai suficient trafic, poți testa pe rând: o lună cu varianta A, una cu B, cu atenție la sezon. Metoda este mai puțin precisă, dar mai bună decât nicio măsurare, atâta timp cât ții cont de ce s-a schimbat între perioade.
Ce faci cu rezultatul
Dacă o variantă câștigă clar, o implementezi și notezi ce ai învățat. Dacă nu există diferență, nu e un eșec: ai aflat că schimbarea nu contează și poți muta energia în altă parte. Păstrează un registru al testelor: ipoteza, perioada, rezultatul, decizia. Peste un an, va fi o colecție valoroasă de lecții despre clienții tăi. Pentru alte repere despre creștere și experimente, categoria de creștere grupează materialele pe teme. Fondatorii aflați la început pot începe cu StartupInfo.
