Pe această pagină
O campanie de probă ipotetică are 120 de contacte eligibile și două subiecte propuse. Declanșatorul este decizia dinaintea lansării. Câteva clicuri în plus după încă două zile nu înseamnă victorie.
Echipa vrea să afle dacă un subiect practic duce la mai multe activări complete ale perioadei de probă decât unul care stârnește curiozitatea. Întrebarea privește activările, nu deschiderile. Exemplul Marketing Analyst de la xAI cere cifre cu surse și ferestre comparabile; aplică aceeași disciplină când Grok Bot redactează planul de test. Nu am rulat această legătură Grok Bot și Brevo într-un cont activ.
Fixează întrebarea și oamenii
Scrie o propoziție înainte de campanie: „În rândul contactelor eligibile, abonate și aflate în perioada de probă, subiectul B schimbă numărul de activări finalizate în șapte zile de la ora de început programată și înregistrată pentru cohortă, față de subiectul A?” Păstrează corpul, oferta, URL-ul și ora de trimitere identice. Înregistrează o singură oră de început programată pentru întreaga cohortă. Definește evenimentul de activare în sistemul produsului, cheia de identificare a contactului și tratamentul evenimentelor întârziate. Dacă nu poți asocia acea sursă destinatarilor Brevo, experimentul poate măsura clicuri, dar nu poate răspunde întrebării despre activare.
Folosește înregistrările curente de abonare și blocare, nu apartenența la CRM sau domeniul firmei, pentru eligibilitate. Elimină duplicatele, respingerile, dezabonările, persoanele deja activate și contactele dintr-un test incompatibil. Fixează ID-urile eligibile și alocă-le o singură dată, printr-o metodă aleatorie reproductibilă și cu un ID de experiment. Salvează registrul alocării înaintea oricărei trimiteri. Reverifică acordul și blocarea chiar înainte de trimitere. Înregistrează persoanele devenite între timp neeligibile drept abandonuri fără mesaj în grupul lor inițial; nu le realoca și nu le scoate în tăcere din analiza principală.
Grupul ipotetic ar putea aloca 48 de persoane la A, 48 la B și 24 la un grup de control fără mesaj. Sunt grupuri propuse, nu rezultate sau recomandare de mărime a eșantionului. Calculează eșantionul necesar pentru nivelul tău de bază și efectul util înainte de lansare. Un test mic poate doar să dovedească funcționarea măsurării. Vezi ghidul testelor A/B pentru planificarea eșantionului.
| Înregistrare | Câmpuri necesare | Verificare deterministă |
|---|---|---|
| Eligibilitate | ID contact, sursă abonare, stare blocare, ora fixării | Fiecare contact alocat era eligibil la fixare |
| Alocare | ID experiment, ID contact, grup, ora alocării | Un singur grup per contact; controlul nu primește mesajul de test |
| Rezultat | ID eveniment, ID contact, ora evenimentului, sursa | Prima activare eligibilă per contact în aceeași fereastră de șapte zile pornită de la cohortă pentru toate grupurile |
Configurează o trimitere care respectă revizia
Campania A/B nativă Brevo testează două subiecte sau variante de conținut pe eșantioane egale, alege câștigătorul după deschideri sau clicuri, apoi îl trimite automat restului publicului. Este potrivită doar dacă extinderea automată este aprobată înainte de lansare. Nu oferă o pauză pentru verificarea primului rezultat de către o persoană.
Pentru acest experiment, un operator aprobat și verificat mapează grupurile fixate la liste sau segmente Brevo explicite. Creează două ciorne de campanie neprogramate, una pentru A și una pentru B, cu același expeditor, corp, link și fereastră programată. Nu include controlul în niciuna. Verifică fiecare listă sau segment față de registru, reverifică blocările și asigură-te că maparea nu pornește o automatizare fără legătură. Compară numărul real de destinatari și previzualizările, apoi autorizează fiecare trimitere. Dacă Brevo nu poate dovedi maparea, oprește-te înainte de trimitere. Ghidul conexiunii inițiale explică de ce un server MCP concentrat pe o sarcină nu limitează prin sine permisiunile.
Declară dinainte pragul pentru reclamații și oprește mesajele în așteptare dacă este depășit. Păstrează alocarea și eventualele livrări parțiale; un test oprit nu este o victorie pentru grupul trimis primul. Ține numărul dezabonărilor și respingerilor lângă rezultatul principal. Ghidul nostru de confirmare dublă acoperă limita abonării.
Cere un raport, apoi hotărăște experimentul următor
Copiază acest prompt după ce oferi registrul fixat și rapoartele datate:
Analizează numai ID-ul experimentului și sursele pe care le ofer. Reconciliază pe grup contactele eligibile, alocarea A/B/control fără mesaj, destinatarii reali, livrările, respingerile, dezabonările și reclamațiile. Folosește aceeași oră de început programată și înregistrată pentru cohortă drept ziua zero pentru toți cei din A, B și control; măsoară aceeași fereastră de șapte zile și împarte la contactele alocate inițial fiecărui grup. Elimină ID-urile de eveniment duplicate, apoi numără o singură dată per contact prima activare eligibilă din sursa de evenimente de produs numită. Păstrează abandonurile fără mesaj în grupul alocat inițial și marchează ratele bazate doar pe livrări drept indicatori de diagnostic secundari. Distinge evenimentele lipsă de o sursă indisponibilă. Arată numărătorii, numitorii alocați inițial, abandonurile fără mesaj, abaterile de protocol și orele de preluare ale rapoartelor. Spune dacă eșantionul planificat și regula de decizie au fost îndeplinite. Nu deduce vânzări din clicuri și nu folosi deschiderile ca rezultat principal. Nu realoca persoane, nu declara un câștigător devreme, nu crea sau trimite o campanie și nu modifica un contact. Propune un singur experiment următor ca ciornă, cu ipoteză și aprobare necesară.
Verificare: compară totalurile de livrări și reclamații din Brevo cu raportul campaniei la aceeași oră de preluare. Documentează dacă s-au aplicat filtrele pentru Apple Mail Privacy Protection și activitatea boților; Brevo include această activitate implicit. Ghidul indicatorilor de e-mail explică de ce deschiderile pot induce în eroare. Raportează separat faza de test și orice extindere ulterioară.
Un rezultat valid numește populația eligibilă, alocarea, expunerea reală, sursa rezultatului, fereastra și incertitudinea. Dacă regula de decizie declarată înainte nu este îndeplinită, notează „neconcludent” și redactează testul următor. Măsoară persoanele distincte activate în șapte zile per contact alocat inițial în A, B și control, de la aceeași oră programată a cohortei. Arată separat livrările, reclamațiile și abandonurile fără mesaj. Ratele bazate doar pe livrări sunt diagnostice secundare, fiindcă livrarea vine după alocarea aleatorie. Fără alocare aleatorie validă sau sursă a rezultatului, diferența este descriptivă, nu cauzală. Decizia trebuie să poată fi reprodusă din registru. Compară cu bucla distinctă de urmărire a feedbackului de produs.
Întrebări Frecvente
Poate Grok Bot declara câștigătorul unei campanii Brevo din clicuri?
Doar dacă clicurile au fost rezultatul stabilit înainte și comparația fixă are dovezi suficiente. Clicurile nu demonstrează vânzări. Pentru întrebarea despre vânzări, folosește o sursă de comenzi conectată, cu atribuire și fereastră de observație explicite; altfel raportează vânzările drept indisponibile.
Testul A/B nativ Brevo așteaptă revizia mea înainte de a trimite câștigătorul?
Nu. Brevo documentează trimiterea automată a variantei câștigătoare către restul publicului după test. Folosește acest mod numai dacă variantele, indicatorul și extinderea sunt aprobate dinainte. Pentru o revizie obligatorie, folosește liste sau segmente și campanii separate, verificate și aprobate.
Ce faci dacă numărul reclamațiilor crește în test?
Aplică pragul de siguranță stabilit înainte de lansare, oprește trimiterile în așteptare, păstrează alocarea și livrările, apoi investighează sursa reclamațiilor. Nu alege pe tăcute un câștigător și nu realoca contacte după oprire.