Jak nastavit A/B testování

Co je A/B testování a co všechno můžete testovat najdete v této nápovědě.

Nastavit A/B test je jednoduché. V pár krocích si ukážeme, jak na to.

1. V detailu cílené e-mailové kampaně (newsletteru) aktivujte možnost A/B testování.

   

2. Nyní je třeba připravit 2 varianty e-mailu - variantu A a variantu B.

   Nejprve si rozmyslete, co budete v e-mailu testovat. Nejčastěji to bývá předmět kampaně nebo její odesílatel.

   

   
   

3. Na obě testovací skupiny můžete poslat buď stejný nebo rozdílný obsah e-mailu. K tomu právě slouží tyto dvě varianty - A a B.

   V případě, že bude obsah a kreativa obou variant stejná, není nutné ji vytvářet pro obě varianty zvlášť.

   Vytvořte si newsletter pro variantu A. U varianty B pak stačí kliknout na (...) a z nabídky vybrat možnost "Přenést kreativu z Varianty A". Jedním kliknutím přenesete verzi e-mailu varianty A do e-mailu varianty B.

   Stejně tak, pokud se rozhodnete těsně před odesláním pro úpravu e-mailu, proveďte ji pouze v jedné variantě, a kliknutím přeneste upravený e-mail do varianty druhé.

   

   V případě, že chcete e-mail, který budete A/B testovat, přepsat některou z vašich předchozích kampaní, stačí vybrat možnost "Vyplnit z již existující kampaně" a vybrat e-mailovou kampaň, kterou chcete zkopírovat do dané kampaně.

   

   Co znamená varianta "Vytvořit novou kampaň z této varianty"?

   Pokud zvolíte tuto variantu do seznamu kampaní se vám zkopíruje právě ta varianta, jejíž vzhled nebo rozložení budete chtít použít pro další kampaň.

4. Pokud máte připravenou variantu A i B, stačí už pak jen nastavit publikum. A/B testování vychází z definovaného publika v kroku číslo 1.

   

   Nastavte velikost testovacího publika - tedy například varianta A se pošle na náhodných 15 % odběratelů z definovaného publika v prvním kroku, a stejně tak varianta B. Testovací skupina je 30 %.

   Poznámka: Minimální vzorek pro jednu variantu musí být 50 kontaktů. Pokud je vzorek menší, není možné A/B testování spustit.

   Rovnou vyberte, na základě jaké metriky (např. nejvyšší open rate) se má určit vítězná verze A/B testu a po jak dlouhé době se má rozeslat zbytek e-mailů (na zbylých 70 % odběratelů se vítězná varianta e-mailu odešle po 2 hodinách).

   

   
   

5. Pak už jen stačí kampaň odeslat okamžitě nebo její odeslání naplánovat do budoucna.

   

6. V momentě, kdy se všechny e-maily varianty A i B rozešlou, začne běžet odpočet testovací doby, kterou jste nastavili v kroku 4. Po té se vítězná verze automaticky rozešle na zbylou část databáze (70 %).

   Výsledky obou verzí a i celé kampaně najdete v jejím detailu.

A/B testování kampaně také velmi dobře poznáte již v přehledu kampaní v Dashboardu.

Jak velká publika testovat?

Minimální velikost testovacího publikum pro spuštění A/B testu v Leadhubu je 50 příjemců (pro obě varianty je tedy třeba min. 100 příjemců).

Čím ale větší testovací publika bude, tak tím lépe. Záleží samozřejmě na velikosti vaší odběratelské databáze, ale pokud je větší, volte testovací publikum na minimálně 1000+ příjemců pro každou variantu. Ještě lepší je pak vzorek 5000+ odběratelů na variantu.

Důvod: Malé testovací publikum může negativně ovlivnit výsledek celého A/B testování.