Az A/B tesztelés egy olyan módszer, amellyel egy kampány két vagy több verzióját hasonlíthatod össze, hogy megállapítsd, melyik teljesít jobban. Így nem kell kitalálnod, mi működik – hagyod, hogy a valós látogatói adatok döntsenek.

Az OptiMonkban A/B teszteket futtathatsz a popupjaidon, hogy javítsd a konverziós arányt, gyorsabban növeld az email listádat, és növeld a bevételt.

Hogyan működik?

Amikor A/B tesztet futtatsz, egy kampány forgalma megosztásra kerül a variánsai között. Minden variánst egy különálló látogatói csoportnak jelenítünk meg, és az OptiMonk nyomon követi a legfontosabb metrikákat, hogy meghatározza a nyertest.

A forgalom egyenlő mértékben oszlik meg az összes aktív variáns között – két variáns esetén fele-fele. Amint elegendő adat gyűlik össze, a nyertes verzió veszi át az uralmat.

A/B tesztelés az OptiMonkban: egy kampány variánsai

Az OptiMonk egyfajta A/B tesztet futtat: variánsok egyetlen kampányon belül. Ugyanannak a felugró ablaknak több verzióját hozod létre – eltérő címsorral, képpel, ajánlattal vagy CTA gombbal –, és az OptiMonk megosztja közöttük a forgalmat.

A variánst a kampány Áttekintés lapján adhatod hozzá, a variánsok táblázata alatt, a + A/B teszt variáns hozzáadása gombbal. Három módon hozhatsz létre egyet:

  • Variáns duplikálása — Klónozz egy meglévő designt, hogy módosítsd. Ez a szokásos választás: egy azonos másolat, amelyen egy dolgot módosítasz.
  • Létrehozás AI-jal — Hozz létre egy új designt a szerkesztőben. Egy valóban eltérő design ugyanahhoz a kampányhoz, nem másolat.
  • Kontroll (nincs popup) — Egy visszatartott csoport, amely semmit sem lát.

Leginkább ehhez ajánlott: egyetlen kampányon belüli változtatások tesztelése – szövegmódosítások, design változtatások, eltérő kedvezményajánlatok.

A kontroll (visszatartott) ág

A Kontroll (nincs popup) variáns megér egy külön bekezdést. Ez a forgalmad egy szelete, amely semmilyen kampányt sem lát, és más kérdésre válaszol, mint a többi: nem arra, hogy melyik popup jobb, hanem arra, hogy egyáltalán megéri-e futtatni ezt a popupot.

Mivel a kontrollt pontosan ugyanazokkal a metrikákkal mérjük, mint a designjaidat, a vele szemben leolvasott uplift a kampány saját, hozzáadott hatását mutatja – attribúciós modellezés nélkül. Kampányonként egy kontroll lehetséges.

A két figyelendő szám

Amíg egy teszt fut, a kampány Áttekintés lapján egy zöld A/B teszt fut sáv jelenik meg, amely megnevezi a vezető variánst, és a variánsok táblázata mindkét számot megadja soronként:

  • Növekmény – mennyivel konvertál jobban (vagy rosszabbul) egy variáns a kiindulási alaphoz képest. A kiindulási sor maga egy kötőjelet mutat.
  • Nyerési esély – mennyire megbízható az eredmény, a következő formában megjelenítve: „87% esély a nyerésre” Ez a szám mondja meg, hogy valódi különbséget látsz-e, vagy csak zajt.

Amíg nincs elegendő adat, a sáv ezt írja: Adatgyűjtés folyamatban. a metrikák sáv pedig ezt: Nincs még elég konverzió a növekmény kiszámításához. Ez nem hiba – azt jelenti, hogy „várj még”.

Teszt lezárása: automatikus nyertesek

Nem kell minden nap figyelned a számokat. Kattints a Forgalom oszlopban lévő értékre, hogy megnyisd az A/B teszt beállítások ablakot, ahol a Nyertes automatikus kihirdetése alapértelmezés szerint be van kapcsolva: A teszt automatikus lezárása, amikor egyértelmű nyertes alakul ki.

Csak akkor lép életbe, ha mindhárom feltétel egyszerre teljesül:

Beállítás Alapérték
Declare at … kihirdetés … nyerési esélynél 95%
Min. konverzió 200
Min. futási nap 3

Mindhárom szerkeszthető, és csak az adott kampányra vonatkozik – ha itt módosítod őket, az nem érinti a többi kampányodat. Együtt védenek a leggyakoribb A/B tesztelési hibától: attól, hogy már az első napon, néhány konverzió alapján kihirdeted a nyertest.

A tesztet manuálisan is lezárhatod a Nyertes kihirdetése 95%-nál gombbal a sávban. Ha a vezető variáns még a küszöbérték alatt van, az OptiMonk előbb figyelmeztet: A teszt most történő lezárása olyan nyertest választhat, amely statisztikailag még nem megbízható. – ezután választhatsz a Teszt folytatása vagy a Kihirdetés mégis.

Nem vagy biztos benne, mit tesztelj? Kérdezd meg.

A kampány melletti chat panelen megkérdezheted: „Javasolj egy A/B tesztet, amit futtathatnék” Az OptiMonk először megkérdezi, milyen tesztre gondolsz:

  • Csak a szöveg tesztelése (címsor, CTA…)
  • Az ajánlat / ösztönző megváltoztatása
  • Egy teljesen új design variáns kipróbálása (tovább tart)
  • Meglepj – vegyes ötletek

Ezután konkrét ötleteket javasol előnézetekkel. Mindegyik megnyit egy Variánsok összehasonlítása – a jelenlegi verziódat a javaslat mellett, a Miért működik és a Mi változik résszel – és Variáns hozzáadása gombbal alakíthatod az ötletet a teszt valódi ágává.

Miért érdemes A/B tesztet futtatnod?

  • Hozz adatvezérelt döntéseket – ne találgass, hagyd, hogy a látogatóid megmondják, mi működik.
  • Javítsd a konverziós arányokat – még a kis javulásoknak is nagy hatásuk lehet hosszú távon.
  • Csökkentsd a kockázatot – teszteld a változtatásokat a forgalmad egy részén, mielőtt mindenkire kiterjesztenéd őket.
  • Ismerd meg jobban a közönségedet – minden teszt tanít valamit arról, mi rezonál a látogatóiddal.

Tippek a hatékony A/B teszteléshez

  • Egyszerre csak egy dolgot tesztelj. Ha egyszerre túl sok elemet változtatsz meg, nem fogod tudni, melyik változás okozta a különbséget.
  • Hagyd, hogy a teszted elég ideig fusson. Ne hirdess nyertest túl korán – az automatikus kihirdetés alapértékei (95%, 200 konverzió, 3 nap) jó viszonyítási pontot adnak akkor is, ha manuálisan döntesz.
  • Kezdd a nagy hatású elemekkel. A címsorok, ajánlatok és CTA-k jellemzően a legnagyobb hatással vannak a konverziókra.
  • Két ág jobb, mint öt. Három vagy több variáns esetén tovább tart, míg megbízható eredmény alakul ki, mint kettő esetén.
  • Adj hozzá egy kontrollt, ha a kérdés az, hogy „megéri-e egyáltalán”. Két címsor összehasonlítása megmutatja, melyik címsor nyer; azt, hogy a popup megéri-e a helyét, csak egy visszatartott csoport mutatja meg.