Diskuse o tom, zda má být tlačítko zelené nebo oranžové, zda má nadpis být kratší nebo delší a zda formulář má mít 3 nebo 5 polí, probíhají v každém produktovém týmu. Bez dat tyto debaty nemají konce. A/B testování tuto situaci řeší: místo dohadů o tom, co funguje, nechte rozhodnout samotné uživatele.

Co je A/B testování?

A/B testování (také split testing) je metoda, při níž se dvě verze jednoho prvku – stránky, tlačítka, nadpisu, formuláře – zobrazují různým skupinám uživatelů. Výkon obou verzí se měří pomocí předdefinované metriky (konverzní rate, míra prokliků, čas strávený na stránce) a statisticky vyhodnocuje, která verze je lepší.

Varianta A = kontrolní (stávající verze) Varianta B = testovaná (nová verze s jednou změnou)

Proč A/B testovat?

Jak správně nastavit A/B test?

1. Identifikujte problém

Začněte analýzou dat: kde má váš web největší potenciál ke zlepšení? Kde je vysoký drop-off? Kde nízký CTR?

2. Formulujte hypotézu

Dobrá hypotéza má strukturu: „Věříme, že [změna] povede k [výsledek], protože [důvod]."

Příklad: „Věříme, že přidání záruky vrácení peněz pod tlačítko Koupit povede k vyššímu konverznímu rate produktové stránky, protože uživatelé se obávají rizika nákupu."

3. Definujte primární metriku

Jedna hlavní metrika, podle níž vyhodnotíte výsledek. Sledujte i sekundární metriky, ale výsledek testu určí primární.

4. Nastavte test

Zajistěte, aby rozdíl mezi variantami A a B byl jen jeden. Testujte barvuCTA, nebo text CTA – ne oboje najednou. Změna více prvků zároveň neumožní přisoudit výsledek konkrétní změně.

5. Definujte délku testu a velikost vzorku

Příliš krátký test nebo příliš malý vzorek vedou k nespolehlivým výsledkům. Použijte kalkulátor A/B testů (např. od Optimizely nebo VWO), který vám řekne, kolik uživatelů a jak dlouho potřebujete testovat.

Zlaté pravidlo: minimálně jedna, ideálně dvě a více celých týdnů – kvůli týdenním vzorcům v chování uživatelů.

Statistická signifikance: nejdůležitější číslo

Výsledky A/B testu musí být statisticky signifikantní, aby byly spolehlivé. Standardní práh je 95 % confidence (p < 0,05) – to znamená, že pravděpodobnost, že výsledek je náhoda, je nižší než 5 %.

Nejčastější chyba: zastavit test ve chvíli, kdy varianta B vykazuje lepší výsledky – i když signifikance ještě nedosáhla prahu. Tento jev se nazývá „peeking" a výsledky znehodnocuje.

Co A/B testovat?

UX prvky s největším potenciálem:

Nástroje pro A/B testování

Nejčastější chyby v A/B testování

  1. Testování příliš mnoha věcí najednou – výsledky jsou neinterpretovatelné
  2. Předčasné ukončení testu – čekejte na statistickou signifikanci
  3. Ignorování segmentů – výsledek platný celkově může být pro mobilní uživatele opačný
  4. Testování bez hypotézy – bez konkrétního důvodu a očekávání se nevíte, co z výsledku učit
  5. Neprovádění opakovaných testů – jeden test nestačí; výsledky je nutné validovat

Závěr

A/B testování je mocný nástroj, ale jako každý nástroj musí být používán správně. Formulujte hypotézy, testujte systematicky, čekejte na statisticky spolehlivé výsledky a učte se z každého testu – i ze záporných.

Zdroje