इस पेज पर
एक काल्पनिक ट्रायल अभियान में 120 योग्य संपर्क और दो प्रस्तावित विषय पंक्तियाँ हैं। शुरुआत का संकेत अभियान से पहले लिया गया निर्णय है। दो और दिनों के बाद ज़्यादा क्लिक मिलना जीत नहीं है।
टीम जानना चाहती है कि व्यावहारिक विषय पंक्ति, उत्सुकता जगाने वाली पंक्ति से अधिक पूरे हुए ट्रायल सक्रियण लाती है या नहीं। प्रश्न सक्रियण का है, खुलने का नहीं। xAI का Marketing Analyst उदाहरण स्रोत वाले आँकड़े और समान समय अवधि चाहता है; Grok Bot से परीक्षण योजना बनवाते समय यही अनुशासन रखें। हमने यह Grok Bot और Brevo कनेक्शन लाइव खाते में नहीं चलाया है।
प्रश्न और लोगों को स्थिर रखें
अभियान बनाने से पहले एक वाक्य लिखें: “योग्य, सदस्यता वाले ट्रायल संपर्कों में, क्या विषय B, विषय A की तुलना में समूह के दर्ज शेड्यूल किए गए आरंभ से सात दिनों के भीतर पूरे हुए सक्रियण बदलता है?” ईमेल का मुख्य पाठ, प्रस्ताव, URL और भेजने का समय समान रखें। पूरे समूह के लिए एक ही शेड्यूल किया हुआ आरंभ समय दर्ज करें। उत्पाद प्रणाली में सक्रियण घटना, संपर्क पहचान कुंजी और देर से आने वाली घटनाओं का तरीका तय करें। यदि उस स्रोत को Brevo प्राप्तकर्ताओं से नहीं जोड़ा जा सकता, तो प्रयोग क्लिक माप सकता है लेकिन सक्रियण प्रश्न का उत्तर नहीं।
योग्यता के लिए CRM सदस्यता या कंपनी डोमेन नहीं, वर्तमान सदस्यता और दमन रिकॉर्ड लें। डुप्लिकेट, बाउंस, सदस्यता समाप्त, पहले से सक्रिय और टकराते परीक्षण में मौजूद संपर्क हटाएँ। योग्य ID स्थिर करें और फिर दोहराए जा सकने वाली यादृच्छिक विधि तथा प्रयोग ID से केवल एक बार बाँटें। भेजने से पहले आवंटन लेखा सुरक्षित करें। भेजने से ठीक पहले सहमति और दमन दोबारा जाँचें। बाद में अयोग्य हुए हर व्यक्ति को उसके मूल समूह में बिना भेजा गया ड्रॉपआउट दर्ज करें; उसे फिर आवंटित न करें और प्राथमिक विश्लेषण से चुपचाप न हटाएँ।
उस काल्पनिक समूह में 48 लोग A, 48 B और 24 बिना भेजे नियंत्रण समूह में हो सकते हैं। ये प्रस्तावित समूह हैं, नतीजे या नमूना आकार की सिफ़ारिश नहीं। अभियान से पहले अपनी वास्तविक आधार दर और उपयोगी प्रभाव के लिए आवश्यक नमूना निकालें। छोटा परीक्षण शायद बस यही साबित करे कि मापन काम करता है। नमूना योजना के लिए A/B परीक्षण गाइड देखें।
| रिकॉर्ड | आवश्यक फ़ील्ड | निश्चित जाँच |
|---|---|---|
| योग्यता | संपर्क ID, सदस्यता स्रोत, दमन स्थिति, स्थिर करने का समय | हर आवंटित संपर्क स्थिर करने के समय योग्य था |
| आवंटन | प्रयोग ID, संपर्क ID, समूह, आवंटन समय | हर व्यक्ति का एक समूह; नियंत्रण को परीक्षण ईमेल नहीं |
| परिणाम | घटना ID, संपर्क ID, घटना समय, स्रोत | सभी समूहों के लिए एक ही समूह-आरंभ पर आधारित सात दिन की अवधि में हर संपर्क का पहला योग्य सक्रियण |
समीक्षा की सीमा मानने वाला भेजना सेट करें
Brevo का मूल A/B अभियान बराबर परीक्षण नमूनों पर दो विषय पंक्तियाँ या दो सामग्री संस्करण जाँचता है, खुलने या क्लिक के आधार पर विजेता चुनता है और फिर उसे बाकी लोगों को अपने आप भेज देता है। यह तभी उचित है जब स्वचालित विस्तार को अभियान से पहले मंज़ूरी मिली हो। पहले परिणाम की मानवीय समीक्षा के लिए विराम नहीं है।
इस प्रयोग में स्वीकृत और सत्यापित संचालक से स्थिर समूहों को Brevo की स्पष्ट प्राप्तकर्ता सूचियों या सेगमेंट से मैप कराएँ। A और B के लिए दो बिना शेड्यूल अभियान मसौदे बनाएँ, जिनमें भेजने वाला, मुख्य पाठ, लक्ष्य और शेड्यूल अवधि समान हों। नियंत्रण समूह दोनों से बाहर रहे। हर प्राप्तकर्ता सूची या सेगमेंट को लेखे से मिलाएँ, दमन दोबारा जाँचें और सुनिश्चित करें कि मैपिंग कोई असंबंधित ऑटोमेशन न चलाए। वास्तविक प्राप्तकर्ता संख्या और पूर्वावलोकन तुलना कर हर भेजने की अलग मंज़ूरी दें। Brevo में मैपिंग सिद्ध न हो तो भेजने से पहले रुकें। आरंभिक कनेक्शन गाइड बताती है कि सीमित काम वाला MCP सर्वर अपने आप अनुमति सीमित क्यों नहीं करता।
शिकायत सीमा पहले तय करें और वह पार हो तो लंबित भेजने रोक दें। आवंटन और आंशिक डिलीवरी का रिकॉर्ड सुरक्षित रखें; रुका हुआ परीक्षण पहले भेजे गए समूह की जीत नहीं। सदस्यता समाप्त और बाउंस की संख्या मुख्य परिणाम के साथ रखें। डबल ऑप्ट-इन गाइड सदस्यता सीमा बताती है।
रिपोर्ट माँगें, फिर अगला प्रयोग तय करें
स्थिर लेखा और तारीख वाली रिपोर्ट देने के बाद यह प्रॉम्प्ट कॉपी करें:
केवल मेरे दिए प्रयोग ID और स्रोतों का विश्लेषण करें। योग्य संपर्क, A/B/बिना भेजे नियंत्रण आवंटन, वास्तविक प्राप्तकर्ता, डिलीवरी, बाउंस, सदस्यता समाप्त और शिकायतों का समूह के अनुसार मिलान करें। एक दर्ज शेड्यूल किए गए समूह आरंभ को A, B और नियंत्रण में सभी के लिए शून्य दिन मानें; समान सात दिन की अवधि मापें और हर समूह के मूल आवंटित संपर्कों से भाग दें। दोहराई घटना ID हटाएँ, फिर नामित उत्पाद घटना स्रोत से अलग-अलग संपर्कों का पहला योग्य सक्रियण प्रत्येक के लिए अधिकतम एक बार गिनें। बिना भेजे ड्रॉपआउट उनके मूल समूह में रखें और केवल डिलीवर हुए लोगों की दर को द्वितीयक निदान मेट्रिक कहें। गुम घटनाओं को स्रोत अनुपलब्ध होने से अलग रखें। अंश, मूल आवंटित हर, बिना भेजे ड्रॉपआउट, प्रोटोकॉल से विचलन और रिपोर्ट प्राप्ति समय दिखाएँ। बताएँ कि नियोजित नमूना और निर्णय नियम पूरे हुए या नहीं। क्लिक से बिक्री न मानें और खुलने को प्राथमिक परिणाम न बनाएँ। संपर्क फिर न बाँटें, जल्दी विजेता घोषित न करें, अभियान न बनाएँ या भेजें और संपर्क न बदलें। एक अगले प्रयोग को उसके अनुमान और आवश्यक मंज़ूरी के साथ मसौदे के रूप में सुझाएँ।
जाँच: Brevo डिलीवरी और शिकायत योग को उसी प्राप्ति समय की अभियान रिपोर्ट से मिलाएँ। दर्ज करें कि Apple Mail Privacy Protection और बॉट गतिविधि फ़िल्टर लागू थे या नहीं; Brevo इन्हें डिफ़ॉल्ट रूप से शामिल करता है। ईमेल मेट्रिक्स गाइड समझाती है कि खुलने के आँकड़े भ्रामक क्यों हो सकते हैं। परीक्षण चरण और बाद के विस्तार को अलग रिपोर्ट करें।
मान्य परिणाम में योग्य समूह, आवंटन, वास्तविक संपर्क, परिणाम स्रोत, अवधि और अनिश्चितता बताई जाती है। पूर्वघोषित निर्णय नियम पूरा न हो तो “अनिर्णायक” दर्ज करें और अगला परीक्षण तैयार करें। A, B और नियंत्रण में समान समूह-आरंभ के बाद सात दिन के भीतर सक्रिय हुए अलग व्यक्तियों की संख्या को हर समूह के मूल आवंटित व्यक्तियों से भाग दें। डिलीवरी, शिकायतें और बिना भेजे ड्रॉपआउट अलग दिखाएँ। केवल डिलीवर हुए लोगों की दर द्वितीयक निदान है क्योंकि डिलीवरी यादृच्छिक आवंटन के बाद होती है। मान्य यादृच्छिक आवंटन या परिणाम स्रोत न हो तो अंतर वर्णनात्मक है, कारणात्मक नहीं। निर्णय लेखे से दोहराया जा सके। अलग उत्पाद प्रतिक्रिया फ़ॉलो-अप प्रक्रिया से तुलना करें।
अक्सर पूछे जाने वाले प्रश्न
क्या Grok Bot क्लिक से Brevo अभियान का विजेता तय कर सकता है?
केवल जब क्लिक पहले से तय परिणाम हो और स्थिर तुलना के लिए पर्याप्त प्रमाण हो। क्लिक बिक्री सिद्ध नहीं करता। बिक्री के प्रश्न में स्पष्ट संबंध और अवलोकन अवधि वाला जुड़ा ऑर्डर स्रोत लें; वरना बिक्री डेटा अनुपलब्ध बताएं।
क्या Brevo का मूल A/B परीक्षण विजेता भेजने से पहले समीक्षा की प्रतीक्षा करता है?
नहीं। Brevo बताता है कि परीक्षण अवधि के बाद चुना विजेता बाकी दर्शकों को अपने आप भेजा जाता है। इसका उपयोग तभी करें जब संस्करण, मेट्रिक और विस्तार पहले से मंज़ूर हों। समीक्षा आवश्यक हो तो अलग मंज़ूर और सत्यापित प्राप्तकर्ता सूचियाँ या सेगमेंट तथा अभियान लें।
परीक्षण में शिकायतें बढ़ें तो क्या करें?
शुरू होने से पहले निर्धारित सुरक्षा सीमा लागू करें, लंबित भेजने रोकें, आवंटन और डिलीवरी रिकॉर्ड रखें और शिकायत का स्रोत देखें। चुपचाप विजेता न चुनें और रोकने के बाद संपर्क फिर न बाँटें।