Na tejto stránke
Hypotetická skúšobná kampaň má 120 oprávnených kontaktov a dva navrhnuté predmety e-mailu. Rozhodujúci moment prichádza pred spustením. Ďalšie kliknutia po dvoch dňoch neznamenajú víťazstvo.
Tím chce vedieť, či vecný predmet prinesie viac dokončených aktivácií skúšobnej verzie než predmet vyvolávajúci zvedavosť. Ide o aktivácie, nie o otvorenia. Príklad Marketing Analyst od xAI vyžaduje čísla s uvedenými zdrojmi a rovnaké časové okná. Rovnakú disciplínu použite, keď Grok Bot pripravuje plán testu. Toto prepojenie Grok Bot a Brevo sme v živom účte neskúšali.
Vopred určte otázku a účastníkov
Pred vytvorením kampane napíšte jednu vetu: „Mení predmet B oproti predmetu A počet dokončených aktivácií do siedmich dní od zaznamenaného plánovaného začiatku skupiny medzi oprávnenými kontaktmi s e-mailovým odberom a skúšobným účtom?“ Telo správy, ponuku, URL a čas odoslania nechajte rovnaké. Zaznamenajte jeden plánovaný začiatok pre celú skupinu. Definujte aktivačnú udalosť v produktovom systéme, identifikačný kľúč kontaktu a spracovanie oneskorených udalostí. Ak tento zdroj nemožno spojiť s príjemcami v Brevo, pokus môže merať kliknutia, ale neodpovie na otázku o aktiváciách.
Oprávnenosť určte podľa aktuálnych záznamov o odbere a vylúčení, nie podľa členstva v CRM či firemnej domény. Odstráňte duplicity, nedoručiteľné a odhlásené adresy, už aktivované kontakty a účastníkov protichodného testu. Zafixujte identifikátory oprávnených kontaktov a každý raz priraďte opakovateľnou náhodnou metódou s identifikátorom pokusu. Evidenciu priradenia uložte pred odoslaním. Bezprostredne pred odoslaním opäť overte súhlas a vylúčenia. Kontakt, ktorý medzičasom stratil oprávnenosť, zaznamenajte ako neoslovený v pôvodnej skupine. Nikdy ho nepriraďte inde ani ho potichu neodstráňte z hlavnej analýzy.
Táto hypotetická skupina by mohla priradiť 48 kontaktov do A, 48 do B a 24 do kontrolnej skupiny bez odoslania. Sú to navrhnuté skupiny, nie výsledky ani odporúčaná veľkosť vzorky. Pred spustením vypočítajte potrebnú vzorku z Vášho skutočného východiskového stavu a užitočného účinku. Malý test možno iba overí, že meranie funguje. Pri plánovaní vzorky pomôže sprievodca A/B testovaním.
| Záznam | Potrebné polia | Jednoznačná kontrola |
|---|---|---|
| Oprávnenosť | ID kontaktu, zdroj odberu, stav vylúčenia, čas zafixovania | Každý priradený kontakt bol v okamihu zafixovania oprávnený |
| Priradenie | ID pokusu, ID kontaktu, skupina, čas priradenia | Jeden kontakt v jednej skupine; kontrolná skupina nedostane testovaciu správu |
| Výsledok | ID udalosti, ID kontaktu, čas udalosti, zdroj | Prvá zodpovedajúca aktivácia na kontakt v tom istom sedemdňovom okne od začiatku skupiny pre všetky skupiny |
Nastavte odosielanie s priestorom na schválenie
Vstavaná A/B kampaň Brevo skúša dva predmety alebo dve verzie obsahu na rovnako veľkých vzorkách, podľa otvorení alebo kliknutí vyberie víťaza a automaticky ho pošle zvyšku príjemcov. Je vhodná len vtedy, ak je automatické rozšírenie schválené pred spustením. Neponúka prestávku na ľudský prehľad prvého výsledku.
Pre tento pokus priraďte zafixované skupiny k explicitným zoznamom alebo segmentom príjemcov Brevo prostredníctvom schváleného a overeného pracovníka. Vytvorte dva nenaplánované koncepty kampane, jeden pre A, druhý pre B, s rovnakým odosielateľom, telom, cieľovou stránkou a plánovaným oknom. Kontrolnú skupinu nechajte mimo oboch. Každý zoznam alebo segment porovnajte s evidenciou, opäť overte vylúčenia a uistite sa, že priradenie nespustí nesúvisiacu automatizáciu. Porovnajte skutočné počty príjemcov a náhľady, potom schváľte každé odoslanie. Ak Brevo nedokáže priradenie preukázať, zastavte sa pred odoslaním. Úvodný sprievodca pripojením vysvetľuje, prečo zameraný MCP server sám osebe neobmedzuje oprávnenia.
Vopred stanovte hranicu sťažností a po jej prekročení zastavte čakajúce odoslania. Zachovajte priradenie a údaje o čiastočnom doručení; zastavený test nerobí víťaza zo skupiny, ktorá odišla prvá. Popri hlavnom výsledku ukazujte odhlásenia a nedoručené správy. Náš sprievodca dvojitým potvrdením vysvetľuje hranicu súhlasu.
Vyžiadajte si správu a potom rozhodnite o ďalšom pokuse
Po dodaní zafixovanej evidencie a správ s dátumom skopírujte tento pokyn:
Analyzujte len identifikátor pokusu a zdroje, ktoré poskytnem. Zosúlaďte oprávnené kontakty, priradenie A/B/kontrolná skupina, skutočných príjemcov, doručenia, nedoručenia, odhlásenia a sťažnosti po skupinách. Jediný zaznamenaný plánovaný začiatok skupiny použite ako deň nula pre všetky kontakty A, B aj kontroly. Merajte rovnaké sedemdňové okno a deľte počtom pôvodne priradených kontaktov v každej skupine. Odstráňte opakované ID udalostí a každému odlišnému kontaktu započítajte prvú zodpovedajúcu aktiváciu z pomenovaného zdroja produktových udalostí najviac raz. Kontakty bez odoslania ponechajte v ich pôvodnej skupine a miery len medzi doručenými označte za vedľajšiu diagnostiku. Odlišujte chýbajúcu udalosť od nedostupného zdroja. Ukážte čitatele, pôvodné menovatele, neoslovené kontakty, odchýlky od protokolu a časy získania správ. Povedzte, či sa splnila plánovaná veľkosť vzorky a rozhodovacie pravidlo. Nevyvodzujte predaj z kliknutí a nepoužívajte otvorenia ako hlavný výsledok. Nepriraďujte kontakty znovu, nevyhlasujte predčasného víťaza, nevytvárajte ani neposielajte kampaň a nemeňte kontakty. Navrhnite jeden ďalší pokus ako koncept s hypotézou a potrebným schválením.
Kontrola: porovnajte doručenia a sťažnosti v Brevo so správou o kampani v rovnakom čase získania. Zaznamenajte, či boli použité filtre Apple Mail Privacy Protection a aktivity botov; Brevo túto aktivitu v predvolenom nastavení zahŕňa. Sprievodca e-mailovými metrikami vysvetľuje, prečo otvorenia zavádzajú. Testovaciu fázu a neskoršie rozšírenie vykazujte oddelene.
Platný výsledok pomenuje oprávnenú populáciu, priradenie, skutočné vystavenie, zdroj výsledku, časové okno a neistotu. Ak vopred dané rozhodovacie pravidlo neplatí, zapíšte „nepreukázané“ a pripravte ďalší test. Merajte počet rôznych aktivovaných kontaktov do siedmich dní na pôvodne priradený kontakt v A, B a kontrole od rovnakého plánovaného začiatku. Doručenia, sťažnosti a kontakty bez odoslania ukazujte osobitne. Miery iba medzi doručenými sú vedľajšia diagnostika, lebo doručenie nastáva až po náhodnom priradení. Bez platného náhodného priradenia alebo zdroja výsledku je rozdiel opisný, nie príčinný. Rozhodnutie musí byť opakovateľné z evidencie. Porovnajte aj samostatný cyklus následnej práce s produktovou spätnou väzbou.
Často Kladené Otázky
Môže Grok Bot vyhlásiť víťaza kampane Brevo len podľa kliknutí?
Iba ak boli kliknutia vopred určeným výsledkom a pevné porovnanie má dosť dôkazov. Kliknutia nepreukazujú predaj. Pri otázke predaja použite spojený zdroj objednávok s explicitnou metódou pripísania a pozorovacím oknom; inak predaj označte ako nedostupný.
Čaká vstavaný A/B test Brevo na môj prehľad pred odoslaním víťaza?
Nie. Brevo dokumentuje automatické doručenie vybranej víťaznej verzie zvyšku publika po testovacom období. Tento režim použite len pri vopred schválených verziách, metrike a rozšírení. Na kontrolný bod použite osobitne schválené a overené zoznamy alebo segmenty príjemcov a kampane.
Čo treba urobiť, ak počas testu pribúdajú sťažnosti?
Použite bezpečnostnú hranicu určenú pred spustením, zastavte čakajúce odoslania, zachovajte záznamy o priradení a doručení a preverte zdroj sťažností. Po zastavení potichu nevyberajte víťaza a nepriraďujte kontakty znovu.