A/B testiranje DM automatizacija

Većina DM automatizacija napiše se jednom i više se nikad ne dira. To je šteta, jer male izmene u prvoj poruci mogu da promene koliko ljudi klikne, odgovori ili kupi. A/B testiranjem saznaješ koja verzija radi, umesto da nagađaš.

Kako podela radi u automatizaciji

U Chat33, korak A/B podela stoji između okidača i tvojih poruka. Svaki put kad se automatizacija pokrene, korak šalje osobu nasumično na putanju A ili putanju B, u odnosu koji određuješ (procenat za putanju A, od 1 do 99). Na 50, otprilike polovina ide na svaku stranu.

Korak Nasumično radi isto sa dve do pet jednakih putanja, što je korisno kad želiš da uporediš tri verzije odjednom.

Podela važi za svako pokretanje, ne za osobu zauvek. Ako ista osoba dvaput pokrene automatizaciju, drugi put može da dobije drugu verziju. Za većinu testova to nije bitno, jer ljudi retko dvaput pokreću istu automatizaciju.

Šta vredi testirati

Testiraj ono što bi realno moglo da promeni ponašanje. Otprilike po redosledu uticaja:

1. Gde stoji link. Link u prvom redu ili posle jedne rečenice konteksta.
2. Poziv na akciju. „Odgovori DA za listu” ili „Hoćeš i ti listu? Odgovori DA.”
3. Vrsta poruke (van automatizacija na komentar): običan tekst sa linkom ili dugme.
4. Dužina. Jedan red ili tri.
5. Personalizacija. „Hej {{name}}” ili bez pozdrava.
6. Sama ponuda. PDF vodič ili kratak video.

Dok smišljaš varijante, imaj na umu pravila platforme. Posle komentara prava dugmad zavise od povezivanja i mogu da pređu u običan tekst, pa je varijanta sa dugmetom pošten test samo u automatizacijama za DM, odgovore na Story ili naknadne poruke. Vodič za Komentar u DM objašnjava zašto.

Kako izmeriti pobednika

Podela je korisna samo ako možeš da vidiš koja je strana pobedila. Odluči o metrici pre početka i proveri da li svaka putanja može posebno da se izmeri.

Klikovi. Linku svake verzije dodaj parametar koji analitika tvog sajta može da pročita, na primer ?utm_content=a i ?utm_content=b na odredišnom URL-u. Analitika onda prikazuje posete po verziji.

Odgovori. Ako je cilj odgovor, u svakoj verziji traži drugu reč („Odgovori DA” i „Odgovori POŠALJI”). Odvojeni okidači na ključnu reč tada tačno pokazuju koliko ljudi je odgovorilo na svaku.

Oznake. Na početak svake putanje dodaj korak Označi ih, na primer test-hook-a i test-hook-b. Tako uvek znaš ko je šta video i kasnije možeš da uporediš te grupe.

Koliko dugo da traje test

Dovoljno dugo da razlika ne bude stvar sreće. Praktično pravilo za male naloge:

• Sačekaj da kroz svaku verziju prođe bar 100 ljudi.
• Ako jedna verzija vodi sa malom razlikom, nastavi; mala prednost često nestane.
• Pobednika proglasi tek kad je razlika jasna i stabilna nekoliko dana.

Na veoma malim nalozima bolje je testirati velike razlike nego male. Druga ponuda se vidi već na 50 ljudi; drugi emodži ne.

Greške koje kvare testove

• Menjanje dve stvari odjednom. Ako verzija B ima novi hook i novu ponudu, ne znaš šta je od toga bilo presudno.
• Menjanje automatizacije usred testa. Izmena putanje pokreće poređenje iz početka.
• Neravnomerni izvori saobraćaja. Test koji počne na viralnom Reelu, a završi se na tihoj objavi, poredi publike, ne poruke. Pusti obe verzije u isto vreme, a upravo to podela radi.
• Prekidanje posle prvog dobrog dana. Rani rezultati divlje osciluju.
• Nema jasne metrike. „Čini mi se bolje” nije rezultat.

Posle testa

Pobedničku verziju ostavi kao jedinu putanju i zapiši šta je test pokazao. Beleške su važnije od pojedinačnog testa: posle nekoliko krugova znaćeš na šta tvoja publika reaguje, a nove automatizacije počinju od boljeg prvog nacrta.

Onda testiraj sledeću stvar.

Instagram DM automatizacija u Chat33

A/B podele, nasumične putanje, oznake i okidači na ključne reči u jednom vizuelnom uređivaču automatizacija.