Mennyi extra bevételt hoz valójában a popup-od? Az egyetlen tisztességes módja ennek megválaszolására, hogy a forgalmad egy részét távol tartod a kampánytól, és összehasonlítod az eredményeket. Ezt a részt hívjuk kontrollnak — egy visszatartott csoport, amely semmit sem lát.
Az OptiMonkban nem kell ezt kóddal megoldanod. A kampány A/B tesztjének beépített kontroll ága van:
A terved — látogatók, akik látják a popupot.
Kontroll (nincs popup) — látogatók, akik egyáltalán semmit nem látnak.
A forgalom megoszlik a kettő között, és a kampány Áttekintés lapja megjeleníti a növekményt és a győzelmi esélyt mindegyik ágra. Nincs szükséged Google Analyticsre az összehasonlításhoz — bár ha szeretnéd, ott is kereszt-ellenőrizheted.
A kontroll ág hozzáadása
Nyisd meg a Kampányok menüpontot a bal oldali menüben, és kattints a mérni kívánt kampányra.
Maradj az Áttekintés lapon. A mérőszámsáv alatt látod a variánsok táblázatát a következő oszlopokkal: Forgalom · Variánsok · Aktív · Megjelenítések · Beküldések · Beküldési arány · Növekmény.
Kattints a + A/B teszt variáns hozzáadása gombra a táblázat alatt.
Válaszd az első opciót, Kontroll (nincs popup) — Egy visszatartott csoport, amely semmit sem lát.
Amíg létrejön, ezt látod: Kontroll variáns hozzáadása… és Ez néhány másodpercet igénybe vehet — szinkronizálás az OptiMonkkal.
A kontroll új sorként jelenik meg a táblázatban. Nincs előnézeti képe — a miniatűr helyett ez szerepel: Nem jelenik meg variáns, ami pontosan azt jelenti, amit csinál.
Csak egy kontrollt adhatsz hozzá kampányonként. Ha már van egy, a menüpont szürkén jelenik meg, és ezt írja: Már hozzáadva.
Győződj meg arról, hogy mindkét sor be van kapcsolva. Az Aktív kapcsoló minden sorban azt dönti el, hogy az az ág kap-e forgalmat. Egy kikapcsolt kontroll semmit nem mér.
Hogyan oszlik meg a forgalom
A forgalom egyenlő arányban oszlik meg az összes aktív variáns között: egy tervezéssel és egy kontrollal a látogatóid fele látja a popupot, a másik fele pedig semmit sem lát.
Kattints a százalékra a Forgalom oszlopban az A/B teszt beállítások megnyitásához. Itt, a Forgalom megosztás alatt látod minden aktív variánst a részesedésével és az összesített értékkel. Az Egyenletes elosztás jelölőnégyzet Mindig bekapcsolva állapotban van megjelölve. A forgalom egyenlő arányban oszlik meg az összes aktív variáns között. Az egyéni megosztás még nem elérhető — ha rákattintsz a jelölőnégyzetre, a panel ezt írja: Az egyéni forgalommegosztás még fejlesztés alatt áll. Jelenleg a forgalom mindig egyenlően oszlik meg az aktív variánsok között.
Az eredmény leolvasása
Amint mindkét ág forgalmat kap, a kampány Áttekintés lapja közvetlenül megválaszolja a kérdést.
A táblázat tetején lévő sáv ezt írja: A/B teszt fut és megnevezi a vezetőt:
Design A vezet ennyivel: +14,20% (73% esély a győzelemre)
Mielőtt elegendő adat gyűlik össze, ez szerepel helyette: Adatgyűjtés folyamatban.
A fölötte lévő mérőszámsáv ezt mutatja: Konverziós növekmény mint fő számadat, alatta pedig az esély a győzelemre százalékban (például „87% esély a győzelemre”) szerepel. Ha még nincs elég konverzió, ez jelenik meg: Nincs még elég konverzió a növekmény kiszámításához.
A variánsok táblázatában minden sornak saját Növekmény oszlopa van. A kontroll a viszonyítási alap, így az ő növekmény cellája egy kötőjelet mutat — minden más sor ehhez van mérve. A sorok emellett ezt is megjelenítik: az esély a győzelemre százalékban.
A +18% növekmény a Kontroll (nincs popup) ághoz képest szó szerint azt jelenti: a popupot látó látogatók 18%-kal gyakrabban konvertáltak, mint azok, akik nem látták. Ez a kampány inkrementális hatása, minden attribúciós modellezés nélkül.
A teszt befejezése
Hagyhatod, hogy az OptiMonk befejezze helyetted, vagy megteheted saját magad is.
Automatikusan: Az A/B teszt beállítások panelben a Nyertes automatikus kihirdetése alapértelmezetten be van kapcsolva: Automatikusan lezárja a tesztet, ha egyértelmű nyertes látszik. Az alapértelmezett beállítások: Kihirdetés: 95%, Min. konverzió: 200 és Min. futási nap: 3 — mindhárom feltételnek teljesülnie kell. Ezeket ugyanabban a panelben módosíthatod.
Kézzel. Kattints a Győztes kihirdetése 95%-nál gombra a zöld sávban. Ha a vezető még nem érte el a beállított küszöbértéket, az OptiMonk előbb rákérdez:
Biztosan kihirdeted a nyertest? "Design A" vezet 71%-os nyerési eséllyel — ez a 95%-os küszöbérték alatt van. Ha most befejezed a tesztet, statisztikailag még megbízhatatlan nyertest választhatsz.
Teszt folytatása / Kihirdetés mégis
Ha egyáltalán nincs elég adat az ágak megkülönböztetéséhez, ez jelenik meg helyette: Még nincs elég adat a variánsok megkülönböztetéséhez. Ha most befejezed a tesztet, a „…” marad aktív, a többi pedig csekély vagy semmilyen bizonyíték alapján áll le.
Amikor a kontroll győz, az is egy valós válasz — azt jelenti, hogy ez a konkrét kampány jelenlegi formájában nem hozza meg önmagát. Változtasd meg az ajánlatot vagy a designt, és teszteld újra.
A kontroll eltávolítása
Nyisd meg a ⋮ menüt a kontroll sorának végén, és válaszd a Törlés opciót. A kampány a fennmaradó variánsokkal tovább fut. A kontrollt később bármikor visszaadhatod ugyanabból a + A/B teszt variáns hozzáadása menüből.