A/B testování e-mailových kampaní

Co je A/B testování?

Je metoda, která pomáhá optimalizovat e-mailové kampaně tím, že porovnává dvě varianty e-mailu a zjišťuje, která varianta dosahuje lepších výsledků. Tyto varianty jsou rozeslány pouze na přesně definovanou část publika. Po skončení A/B testu je pak vítězná varianta rozeslána na zbytek, větší část publika.

Jak velká publika testovat?

Minimální velikost testovacího publikum pro spuštění A/B testu v Leadhubu je 50 příjemců (pro obě varianty je tedy třeba min. 100 příjemců).

Čím ale větší testovací publika bude, tak tím lépe. Záleží samozřejmě na velikosti vaší odběratelské databáze, ale pokud je větší, volte testovací publikum na minimálně 1000+ příjemců pro každou variantu. Ještě lepší je pak vzorek 5000+ odběratelů na variantu.

Důvod: Malé testovací publikum může negativně ovlivnit výsledek celého A/B testování.

Jak funguje A/B testování?

Aktivujte u cílené e-mailové kampaně (newsletteru) možnost A/B testování v detailu kampaně.
Připravte si dvě varianty e-mailů (variantu A a variantu B) - například každý s jiným předmětem dané kampaně. Jak snadno zkopírovat jednu variantu do druhé a nevytvářet tak obě varianty úplně od začátku najdete zde.
Vyberte, jak velká budou testovací publika - např. 15 % - tedy varianta A bude poslána na 15 % z definovaného publika, a stejně tak varianta B bude odeslána na 15 % další části tohoto testovacího publika. Tuto část publika náhodně vybere náš systém.
Nastavte, podle které metriky a po jak dlouhé době chcete A/B test vyhodnotit- např. po 2 hodinách a hlavní metrikou bude otevření e-mailu (open rate) - to znamená, že varianta, která bude mít po 2 hodinách vyšší míru otevření, bude tou vítěznou a bude rozposlána na zbytek publika, tedy na 70 % zbývajících odběratelů (testovací část publika tvořila 30 %).

Poznámka: Minimální vzorek pro jednu variantu musí být 50 kontaktů. Pokud je vzorek menší, není možné A/B testování spustit.
Pak už jen celou kampaň spusťte, a A/B testování začíná.