Egy kampány a popup több verzióját is tartalmazhatja. Minden verzió egy variáns. Amint kettő vagy több be van kapcsolva közülük, a forgalmad megoszlik köztük. Ez az A/B teszt.
Hol találod a variánsokat
Nyisd meg a kampányt, és maradj az Áttekintés fülön. A metrikák alatt találod a variánstáblázatot, amelyben minden variánsnak saját sora van.
Az asztali nézet táblázatának oszlopai: Forgalom, Variánsok, Aktív, három teljesítményoszlop, és a Növekmény. A teljesítményoszlopok a kampány céljához igazodnak. Az alapértelmezett Feliratkozás célnál ezek a Megjelenítések, a Beküldések és a Beküldési arány. Az Order célnál a Látogatók, a Rendelések és a Rendelési arány.
Minden sorban látod a variáns bélyegképét, nevét, a forgalmi részesedését százalékban, és egy kapcsolót, amellyel be- vagy kikapcsolhatod. Amíg egy variáns még épül, a sorban előnézet helyett ez áll: Építés….
Variáns hozzáadása
A táblázat alatt található az A/B teszt variáns hozzáadása gomb. Ez egy menüt nyit meg:
Kontroll (nincs popup): „Kontroll csoport, ami semmit sem lát”. Ezek a látogatók egyáltalán nem kapnak popupot, így a popupot ahhoz mérheted, mintha semmi sem jelenne meg. Csak egy lehet belőle. Ha már hozzáadtad, a menü ezt írja: Már hozzáadva.
Variáns duplikálása: „Meglévő design klónozása finomításhoz”. Válassz egyet a designjaid közül, és kapsz róla egy elnevezett másolatot, amely rögtön szerkeszthető.
Korábbi koncepció felhasználása: ebből a design sessionből származó kész mockupok, amelyek még nincsenek megépítve. Ez a pont csak akkor jelenik meg, ha van legalább egy ilyen.
Variáns írása: „Új design generálása a designerben”.
Két további út is van:
Minden sor saját menüjében megtalálod ezeket: Átnevezés, Duplikálás, Új design ebből a variánsból és Törlés.
A design session koncepciótábláján kijelölheted a kész koncepciókat, és a {count} hozzáadása A/B variánsként gombbal hozzáadhatod őket egy meglévő kampányhoz.
A kampány-chatből hozzáadott koncepció kikapcsolva érkezik: „A variáns kikapcsolva került a kampányba. Az A/B táblában kapcsolhatod be, ha kész.” Kapcsold be az Aktív oszlopban, amikor szeretnéd, hogy forgalmat kapjon.
A forgalom elosztása
Alapértelmezésben a forgalom egyenlően oszlik el az aktív variánsok között.
Ha ezen változtatnál, kattints a százalékra a Forgalom oszlopban. Ekkor megnyílik az A/B teszt beállítások panel. A Forgalom megosztás alatt írd be minden aktív variánshoz a százalékot, majd kattints a Mentés gombra. Minden variánsnak 1–99% kell, és az összegnek 100%-nak kell lennie. Az egyenlő elosztáshoz jelöld be az Egyenletes elosztás négyzetet.
Ha egy variánst kikapcsolsz, majd később újra bekapcsolod, visszakapja a korábbi részesedését.
Két esetben nem módosítható az arány, és a panel jelzi, miért:
az OptiMonk-kapcsolat még nem támogatja
a kampány egy kísérlet része
Tesztötletek kérése az asszisztenstől
A kampány melletti chat variánsokat is javasolhat. Kérdezz például ilyet: „Javasolj egy A/B tesztet, amit kipróbálhatnék”. Ez az egyik javasolt kérdés. Az asszisztens előbb feltehet néhány kérdést. Utána visszatér néhány megnevezett ötlettel, mindegyikhez előnézettel.
Kattints egy ötletre, és megnyílik a Variánsok összehasonlítása. Az egyik oldalon az Eredeti · jelenlegi van, a másikon a Javaslat, alattuk a Miért működik és a Mi változik. A Variáns hozzáadása gomb létrehozza a variánst a kampányban, utána a gombon ez áll: Hozzáadva. Ha egyik sem tetszik, válaszd ezt: Egyik sem tetszik — mutass más variánsokat.
Variáns szerkesztése
Kattints egy variáns sorára, és megnyílik. A jobb oldali panelen két fül van: az AI chat, ahol szavakkal írod le a változtatást, és a Szerkesztő, ahol kézzel szerkesztesz.
Ebből semmi nem jut el magától a látogatóidhoz. Minden változás piszkozatként mentődik: „Kész, piszkozatként mentve. A látogatók addig a régit látják, amíg nem élesíted.” Az Élesítés gomb teszi élővé a változást.
Ha két variáns még ugyanazt a felépítést használja, a szerkesztő megnyitásakor először másolat készül. Így az egyik variáns szerkesztése soha nem változtatja meg a másikat.
A teszt futtatása
Nincs külön „teszt indítása” gomb. Amint egy élő kampányban két vagy több variáns aktív, a táblázat felett megjelenik egy sáv: A/B teszt fut. Amíg nincs elég adat, ez áll rajta: Adatgyűjtés folyamatban. Utána megnevezi a vezetőt, például „B variáns vezet ennyivel: +12,40% (87% esély a győzelemre)”.
A vezető mindig valamelyik designod. A Kontroll (nincs popup) a viszonyítási alap, ezért nem hirdethető ki győztesnek. Ha a designjaid nem verik a kontrollt, inkább szüneteltesd a kampányt.
A teszt lezárása kézzel
A sávon lévő gomb lezárja a tesztet. A vezető variáns aktív marad, az összes többi kikapcsol, a kontrollt is beleértve.
Ha nincs bekapcsolva az automatikus kihirdetés, a gombon ez áll: Győztes kihirdetése {threshold}%-nál.
Ha be van kapcsolva, a gombon ez áll: Kihirdetés most.
Ha a vezető győzelmi esélye a küszöböd alatt van, vagy még nincs adat, előbb megerősítést kér: Biztosan kihirdeted a nyertest?, a Teszt folytatása és a Kihirdetés mégis gombbal.
Automatikus lezárás
Az A/B teszt beállítások panelen kapcsold be a Nyertes automatikus kihirdetése kapcsolót: „Automatikusan lezárja a tesztet, ha egyértelmű nyertes látszik, és leállítja az egyértelmű vesztest.” Alapból ki van kapcsolva.
A sávról is bekapcsolhatod. Ha a vezető még a küszöb alatt van, a sávon a Figyelés {threshold}%-nál gomb jelenik meg, ez bekapcsolja.
Három feltételt állítasz be:
Kihirdetés … esély a győzelemre (alapból 90%, 50% és 99% között)
Min. konverzió (alapból 100)
Min. futási nap (alapból 3)
Az OptiMonk naponta egyszer ellenőrzi a tesztet. Ehhez a teszt utolsó módosítása óta eltelt teljes napokat veszi alapul. Két dolog történhet:
Ha a vezető design elérte a győzelmi esély küszöbét, megvan a minimális konverziószám, és a teszt legalább a minimális napszámig futott, az OptiMonk kihirdeti győztesnek. Ettől kezdve ez az egyetlen aktív variáns.
Ha ugyanezek mellett valamelyik design győzelmi esélye nagyon alacsonyra esik (100% mínusz a küszöböd alá, az alapértelmezett 90%-nál tehát 10% alá), az OptiMonk kikapcsolja ezt a designt. A teszt a többivel fut tovább.
Néhány tudnivaló:
A kontrollt az automatikus ellenőrzés soha nem kapcsolja ki, és nem hirdeti ki. Ha kettőnél kevesebb design van, nem csinál semmit.
Az automatikus leállítás csak Feliratkozás célú kampánynál működik. Más célnál a panel ezt jelzi, és a kapcsoló nem kapcsolható be.
Amíg be van kapcsolva, a sávon ez a jelvény látszik: Figyeli a {threshold}%-ot, és mellette az utolsó ellenőrzés ideje.
Ha az OptiMonk leállít vagy kihirdet egy variánst, egy értesítés jelenik meg a kampányon. Ebben látod, melyik variánsról van szó, mekkora volt a győzelmi esélye, és hány konverziója volt.
Hol jelennek meg az eredmények
A variánstáblázat maga az eredménytábla. Variánsonként mutatja a teljesítményoszlopokat és a Növekményt, a vezető mellett pedig a győzelmi esélyt. Felette a metrikasáv a kampány összesített adatait mutatja a kiválasztott célra és időszakra. A kampánynak van egy Analitika füle is.
Néhány tudnivaló a számokról:
Az időszak. A táblázat a felette kiválasztott időszakot követi. Futó tesztnél az alapértelmezett időszak a teszt aktuális szakasza. A teszt minden módosítása a következő naptól új szakaszt nyit: ha bekapcsolsz vagy kikapcsolsz egy variánst, megváltoztatod az arányt, vagy kihirdetsz egy győztest. A trenddiagram ezt így jelöli: „Új A/B-szakasz · váltás: {date}”. Így azok a látogatók, akik más variáns-összeállítást láttak, nem keverednek bele az összehasonlításba.
A növekmény alapja. A növekményt a kontrollhoz méri, ha van ilyen. Ha nincs, a forgalmat kapott, leggyengébben konvertáló variánshoz, így a növekmény azt mutatja, mennyivel járnak előrébb a többiek.
A győzelmi esély egy Bayes-féle becslés. Kellő mennyiségű adat kell hozzá, hogy valóban sokat jelentsen.