A/B test
Strategie a byznys · Kreativa a web
Porovnání dvou variant reklamy, stránky nebo e-mailu, mezi které se publikum náhodně rozdělí. Vyhraje ta, která přinese lepší výsledek – ne ta, která se víc líbí.
- Jedna změna naráz, hypotéza a pravidlo pro vítěze předem.
- Malý rozdíl potřebuje hodně dat: z 2 na 2,4 % zhruba 21 000 návštěv na variantu.
- Test nechte běžet celé týdny, ne jen pár dní.
Jak A/B test funguje
Publikum se náhodně rozdělí na dvě skupiny. Jedna vidí původní variantu A, druhá upravenou variantu B. Po dostatečném počtu návštěv porovnáte výsledek – konverzní poměr, cenu za konverzi nebo tržby na návštěvu.
Testovat jde reklamy (text, kreativa, nabídka), vstupní stránky i e-maily. Meta má na to vlastní nástroj A/B test, Google Ads experimenty, které rozdělí provoz kampaně.
Jak test připravit
- Hypotéza: co měníte a proč čekáte lepší výsledek („doprava zdarma v nadpisu zvedne CTR“).
- Jedna změna naráz. Když změníte nadpis i obrázek, nevíte, co zabralo.
- Hlavní metrika a pravidlo pro vítěze předem – třeba cena za objednávku a spolehlivost 95 %.
- Velikost vzorku předem. Spočítejte ji v kalkulačce a test neukončujte dřív.
- Celé týdny. Lidé nakupují jinak v pondělí a v sobotu.
Kalkulačka: kolik návštěv test potřebuje
Zadejte současný konverzní poměr, jaké zlepšení chcete poznat a kolik návštěv má stránka týdně. Kalkulačka spočítá, kolik návštěv test potřebuje (spolehlivost 95 %, síla testu 80 %).
Proč malé testy lžou
Když po třech dnech vede varianta B o 30 %, je to často jen náhoda. Čím menší rozdíl hledáte, tím víc dat potřebujete: zlepšení konverzního poměru z 2 na 2,4 % se průkazně ukáže až zhruba po 21 000 návštěvách na variantu.
Malé weby proto netestují barvu tlačítka, ale větší změny – nabídku, cenu dopravy, háček reklamy nebo celou vstupní stránku. Velký rozdíl se ukáže i na menším vzorku.
Co testovat jako první
- Nabídka: doprava zdarma, sleva, dárek, záruka.
- Háček reklamy: první věta nebo první vteřiny videa.
- Vstupní stránka: kategorie, nebo detail produktu; krátká, nebo dlouhá stránka.
- Výzva k akci: konkrétní CTA proti obecnému.
Z praxeNa menších účtech netestujeme drobnosti, ale věci, které můžou výsledek změnit o desítky procent – nabídku, háček a vstupní stránku. Drobné úpravy by při jejich návštěvnosti běžely měsíce.
Časté otázky k A/B testům
Co je A/B test?
Porovnání dvou variant reklamy, stránky nebo e-mailu na náhodně rozděleném publiku.
Jak dlouho má A/B test běžet?
Dokud nemá spočítaný počet návštěv na variantu, a vždy celé týdny. Obvykle aspoň dva týdny.
Kolik návštěv potřebuje A/B test?
Záleží na konverzním poměru a velikosti rozdílu. Zlepšení z 2 na 2,4 % potřebuje zhruba 21 000 návštěv na variantu, velký rozdíl mnohem méně.
Jaký je rozdíl mezi A/B testem a multivariantním testem?
A/B test mění jednu věc ve dvou variantách. Multivariantní test kombinuje víc změn naráz a potřebuje ještě mnohem víc návštěv.