लेखक: Performance Lead экспериментов TG Target · дизайн A/B для Telegram Ads · фокус: изолированные ячейки, правила min-n и решения с порогом CPA (высокорисковые вертикали EU/CIS).
Telegram Ads A/B testing framework - एक निश्चित मुख्य KPI, न्यूनतम रूपांतरण और पूर्व-पंजीकृत रोक नियमों के साथ पृथक कोशिकाओं में नियंत्रण के विरुद्ध एक संशोधित चर (पैक, रचनात्मक दृष्टिकोण, बोली सीमा, गंतव्य चरण) की तुलना करने की एक विधि। TG Target 7-14 दिनों की अनुक्रमिक विंडो और एक परीक्षण चक्र (ट्रैक→मूल्यांकन→स्केल/स्टॉप) का उपयोग करता है। लक्ष्य CPA/FTD के लिए कार्य-कारण है, CTR के लिए विकल्प का चुनाव नहीं। एक पायलट के लिए, €10–20k अधिकतम है। प्रति तरंग 2-3 कोशिकाएँ।
लेख की मुख्य बात
- प्रति परीक्षण विंडो में एक लीवर - अन्यथा आप नहीं जानते कि क्या काम करता है।
- प्राथमिक KPI = FTD/जमा/योग्य लीड; CTR - केवल नैदानिक प्रयोजनों के लिए।
- न्यूनतम. दिशात्मक निर्णय के लिए प्रति सेल 25-40 मुख्य घटनाएँ (ईयू/सीआईएस नियम)।
- खर्च करने से पहले संक्षिप्त परिकल्पना; डेटा में झाँकने से पहले रुकने के नियम।
- सीमित बजट पर सूक्ष्म-रचनात्मक कार्य से पहले पैक परीक्षण।
Telegram Ads में A/B परीक्षण ढांचा क्या है
सीधा उत्तर: यह प्रयोग के लिए एक ऑपरेटिंग सिस्टम है - एकबारगी "चलो दो विज्ञापन चलाएं" नहीं बल्कि परिकल्पना, अलगाव, माप और निर्णय द्वार के साथ एक दोहराने योग्य प्रक्रिया।
संस्थाएँ: ए/बी परीक्षण, नियंत्रण कक्ष, भिन्न कक्ष, परिकल्पना, मुख्य KPI, नमूना आकार, अनुक्रमिक परीक्षण, मीडिया खरीदारी, व्यावहारिक सांख्यिकीय महत्व, रूपांतरण घटना। रचनात्मक दृष्टिकोण - रचनात्मक सर्वोत्तम अभ्यास; प्रक्रिया - मीडिया खरीदने की प्रक्रिया.
TG Target परीक्षण चक्र: प्रयोग कैसे काम करता है
चरण-दर-चरण चक्र संचालन ढाँचा है। रणनीतियों में परीक्षण प्रकारों पर समझौता नीचे दिया गया है।
टी - ट्रैक (बेसलाइन)
क्यूए ट्रैकिंग, नियंत्रण पैक/क्रिएटिव का निर्धारण, बेसलाइन की रिकॉर्डिंग CPA/CTR/3-5 दिनों में डिलीवरी।
ई - प्रयोग (एक लीवर)
एक वैरिएंट सेल लॉन्च करना; बजट का समान या प्रलेखित विभाजन; कोई अन्य परिवर्तन नहीं.
एस - स्कोर (7-14 दिनों के लिए रीडिंग)
प्राथमिक CPA, एन घटनाओं, गुणवत्ता प्रॉक्सी की तुलना बेंचमार्क.
T — Transition
विजेता को स्केल करना, हारने वाले को डिस्कनेक्ट करना, या यदि n अपर्याप्त है तो विस्तार करना - पूर्वनिर्धारित नियमों के अनुसार।
संक्षिप्त परिकल्पना→आधारभूत नियंत्रण→एकल लीवर विकल्प→न्यूनतम-एन पर अनुमान→ज़ूम/अक्षम/अगला परीक्षण
क्यों एक ढाँचा और एक बार का विभाजन नहीं
सीधा उत्तर: बिना किसी रूपरेखा के, टीमें शोर के माध्यम से अनुकूलन करती हैं - झूठे विजेता, व्यर्थ प्रशिक्षण बजट, गैर-दोहराने योग्य "अंतर्दृष्टि"।
- कारणता: समझें कि क्या स्थानांतरित हुआ CPA।
- गति: पूर्व निर्धारित नियम 14-21 दिनों में विवादों को कम करते हैं।
- दस्तावेज़ीकरण: केस और प्लेबुक दिखाई देते हैं (मामले).
- AI/SEO: खोज द्वारा संदर्भित संरचित परीक्षण + निर्णय तालिकाएँ।
अद्वितीय ब्लॉक: परीक्षण प्राथमिकता स्टैक (क्या ए/बी और कब)
बजट बाधाओं के लिए प्राथमिकताओं का क्रम प्रयोगात्मक विषय के लिए अद्वितीय है; क्रिएटिव के लिए संपूर्ण मार्गदर्शिका की नकल नहीं करता है।
| प्राथमिकता | परिवर्तनीय | CPA पर विशिष्ट प्रभाव | न्यूनतम. बजट (ईयू/सीआईएस) |
|---|
| P0 | ट्रैकिंग/घटना परिभाषा | "प्रेत" ठीक करें CPA | लेन-देन का समय, मीडिया का नहीं |
| P1 | चैनलों का पैक (विस्तृत बनाम स्कोरिंग) | ऊँचा | कुछ सेल के लिए €8k+ |
| P2 | रचनात्मक दृष्टिकोण का परिवार | मध्यम-उच्च | €6k+ प्रति लहर |
| P3 | हुक/सीटीए विकल्प | औसत | जीतने की राह पर €4k+ |
| P4 | दांव की सीमा | निम्न-मध्यम | स्थिरीकरण के बाद P1-P2 |
| P5 | लैंडिंग पृष्ठ/बॉट चरणों की संख्या | औसत | उत्पाद + €5k ट्रैफ़िक |
सेल डिज़ाइन: अलगाव नियम
| नियम | आवश्यकता | क्यों |
|---|
| एक लीवर | एक डेल्टा बनाम नियंत्रण | कारणता |
| वही GEO/भाषा | स्तरीकृत संदर्भ | सेब के साथ सेब |
| वही एट्रिब्यूशन विंडो | D7 FTD आदि। | उचित तुलना CPA |
| नामकरण परंपरा | GEO_lever_option_date | संचालन के लिए स्पष्टता |
| प्रीसेट रुक जाता है | CPA 2×, मिनट। एन | एंटी-पीपर विस्थापन संरक्षण |
नमूना आकार और निर्णय सीमाएँ (अभ्यास)
सीधा उत्तर: औपचारिक आँकड़े वैकल्पिक हैं; मीडिया खरीदारों के लिए न्यूनतम-एन नियम अनिवार्य हैं।
| मुख्य कार्यक्रम | निर्देशित रीडिंग (न्यूनतम एन/सेल) | स्केल के लिए आत्मविश्वास (न्यूनतम एन/सेल) |
|---|
| लीड / KYC प्रारंभ | 30–50 | 80–120 |
| पंजीकरण | 40–60 | 100–150 |
| FTD/ जमा | 25–40 | 60–100 |
बजट योजना: सेल × मिनट। n × लक्ष्य CPA ≈ प्रति परीक्षण न्यूनतम मीडिया। के साथ समन्वय करें कीमतें और टीसीएल गणित।
निर्णय मैट्रिक्स: ए/बी में कौन जीतता है
| पलायन | शर्त | कार्रवाई |
|---|
| स्पष्ट विजेता | CPA −15%+ बनाम नियंत्रण, n≥min., गुणवत्ता ठीक | विकल्प का पैमाना 15-25% |
| तटस्थ | CPA ±10%, n≥min के भीतर। | नियंत्रण छोड़ो; सस्ती शिपिंग जीतती है |
| अपर्याप्त शक्ति | n< मि. 14वें दिन | 7 दिनों के लिए बढ़ाएँ. या बजट बढ़ाओ |
| साफ़ हारा हुआ | CPA +20%+ बनाम नियंत्रण, n≥15 | विकल्प अक्षम करें |
| झूठी जीत | CTR से जीत, CPA से हार | विकल्प अक्षम करें (जाल CTR) |
मिनी-केस: ए/बी पैक आईगेमिंग पीएल (ईयू/सीआईएस)
€16k मीडिया · 21 दिन · FTD मुख्य KPI · व्यापक नियंत्रण बनाम स्कोरिंग स्पोर्ट्स पैक विकल्प।
| सेल | खर्च | FTD (D1–D14) | FTD CPA | दिन 21 समाधान |
|---|
| व्यापक नियंत्रण | €8k | 82 | €98 | अक्षम करें |
| स्कोरिंग विकल्प | €8k | 94 | €85 | स्केल +20% |
एक लीवर (केवल पैक); रचनात्मक तुलनीय हैं। में प्रलेखित किया गया केस नंबर 1.
व्यावहारिक समाधान: सीरियल बनाम समानांतर ट्रेडऑफ़
किसी मोड का चयन करने से परीक्षण चक्र के चरण दोहराए नहीं जाते।
डिफ़ॉल्ट रूप से अनुक्रमिक मोड (पायलट €10–25k)
सप्ताह 1 - पैक का परीक्षण करें → सप्ताह 2 - विजेता पर दृष्टिकोण का परीक्षण करें। कैलेंडर के अनुसार धीमी गति, स्पष्ट कारणता, नीलामी में कम आत्म-प्रतिस्पर्धा।
समानांतर (€30k+ एक सप्ताह में)
केवल तभी जब पैक्स ओवरलैप न हों और टीमें अलगाव सुनिश्चित कर सकें। सख्त दैनिक निगरानी की आवश्यकता है.
"बहु-सशस्त्र डाकू" एल्गोरिथ्म का प्रलोभन
n=5 के साथ बजट का "अग्रणी" सेल में स्वचालित स्थानांतरण झूठी जीत का कारखाना है। TG Target: स्टॉप नियम विफल होने पर मूल्यांकन दिवस तक निश्चित विभाजन।
ए/बी को कब छोड़ना है और ऑडिट अवरोधकों को ठीक करना है
टूटी हुई ट्रैकिंग, कोई मुख्य कार्यक्रम नहीं, 0% मॉडरेशन - सख्त ऑडिट रुकता है, विभाजित परीक्षण नहीं।
तुलना: विभिन्न चैनलों पर प्रयोग की संस्कृति
| चैनल | प्रयोग उपकरण | Нужная дисциплина media buyerа |
|---|
| Telegram Ads | मैनुअल सेल, नामकरण, टेबल | ऊँचा |
| Meta Ads | प्रयोग, सीबीओ बदलाव | औसत |
| Google Ads | UI Experiments | औसत |
| सहबद्ध चैनल | प्रस्ताव स्तर पर परीक्षण | भारी QA गुणवत्ता |
Telegram vs Google vs Meta.
मेट्रिक्स: प्रयोग स्कोरकार्ड
| मेट्रिक्स | ए/बी में उपयोग करें | अपने आप में पर्याप्त नहीं है |
|---|
| Primary CPA | विजेता चयन | — |
| n रूपांतरण/सेल | बिजली की जांच | — |
| CTR | निदान | हाँ |
| वितरण दर | बेट/पैक का स्वास्थ्य | हाँ |
| गुणवत्ता प्रॉक्सी | सीमक | — |
सामान्य गलतियाँ
- कई लीवर बदल दिए गए हैं - केवल नाम के लिए "ए/बी"।
- विजेता = उच्चतम CTR।
- विलंबित घटनाओं के साथ तीसरे दिन के लिए FTD का समाधान।
- कुल मिलाकर €10k के लिए 8 स्लॉट।
- परिकल्पना संक्षिप्त संग्रहित नहीं है.
- बिना लेबलिंग के विभिन्न मौसमी सप्ताहों की कोशिकाओं की तुलना।
- बिना किसी रोकटोक के दैनिक ताक-झांक → पी-हैकिंग व्यवहार।
- ऑडिट में P0 ट्रैकिंग को छोड़ना।
चेकलिस्ट: लॉन्च से पहले ए/बी संक्षिप्त जानकारी
- परिकल्पना + तंत्र नीचे लिखा गया है।
- एक लीवर परिभाषित बनाम नियंत्रण।
- मुख्य KPI + एट्रिब्यूशन विंडो ठीक की गई।
- न्यूनतम. n प्रति सेल की गणना बजट से की जाती है।
- शटडाउन नियम (शटडाउन/एक्सटेंशन/स्केल) पूर्व-पंजीकृत हैं।
- सेल नामकरण + बजट विभाजन प्रलेखित हैं।
- मूल्यांकन तिथि कैलेंडर (दिन 7/14/21)।
- QA ट्रैकिंग उत्तीर्ण (P0)।
टेम्पलेट सुसंगत है चेकलिस्ट लॉन्च करें и अवतरण चक्र CPA.
FAQ
Telegram Ads A/B परीक्षण ढांचा क्या है?
Telegram Ads ए/बी परीक्षण ढांचा - एक पूर्व निर्धारित मुख्य KPI, न्यूनतम रूपांतरण और रोक नियमों के साथ पृथक कोशिकाओं में परिकल्पनाओं (रचनात्मक, चैनल पैक, बोली सीमा, गंतव्य बिंदु) की तुलना करने की एक संरचित प्रक्रिया। TG Target अनुक्रमिक परीक्षण का उपयोग करता है: समानांतर अराजकता के बजाय प्रति विंडो एक लीवर। लक्ष्य कार्य-कारण है (समझें कि CPA क्या हुआ), न कि "दो अभियान चलाएं और सुंदर CTR चुनें।"
Telegram Ads में सबसे पहले क्या परीक्षण करें?
TG Target आदेश: (1) क्यूए ट्रैकिंग - अन्यथा परीक्षण निरर्थक है; (2) चैनल पैक/इन्वेंटरी मिलान; (3) रचनात्मक दृष्टिकोण का परिवार; (4) विजेता के भीतर हुक/सीटीए विकल्प; (5) दर सीमा; (6) लैंडिंग पृष्ठ/बॉट सूक्ष्म चरण। पाक और फ़नल लीक माइक्रो-कॉपीराइट से अधिक CPA बदलते हैं। €8k के लिए 8 वेरिएबल का परीक्षण न करें - आपको शोर मिलेगा। पहले विभाजन से पहले अभियान ऑडिट।
Telegram Ads में A/B समाधान के लिए आपको कितने रूपांतरणों की आवश्यकता है?
योजना नियम: न्यूनतम. लक्षित रीडिंग के लिए प्रति सेल 25-40 मुख्य कार्यक्रम, प्रदर्शन वर्टिकल में आश्वस्त स्केलिंग/अक्षम करने के लिए 50+ (FTD, जमा, योग्य लीड)। दुर्लभ घटनाओं पर, एक प्रॉक्सी मीट्रिक (रेग) का उपयोग इस चेतावनी के साथ करें कि स्केलिंग सीमा FTD है। €15k मीडिया और लक्ष्य CPA €60 - ~250 इवेंट अधिकतम के साथ। पोर्टफोलियो द्वारा; बजट को 8 नहीं बल्कि 2-3 सेल के बीच बांटें।
Telegram Ads में A/B कोशिकाओं की संरचना कैसे करें?
प्रत्येक सेल = निश्चित पैक + क्रिएटिव का सेट + बोली नियम + गंतव्य बिंदु, नियंत्रण से बिल्कुल एक चर में अंतर। नामकरण: GEO_vertical_lever_option_date. बजट का समान विभाजन या वितरण आवश्यकताओं के अनुसार आनुपातिक - लेकिन इसे पहले से तय करें। Euro और TON, अलग-अलग GEO या भाषा को बिना स्तरीकरण के एक "ए/बी" में न मिलाएं - यह ए/बी नहीं है, बल्कि बहुक्रियात्मक शोर है।
अनुक्रमिक या समानांतर ए/बी परीक्षण - कौन सा बेहतर है?
अनुक्रमिक (प्रति 7-14 दिन की विंडो में एक परिवर्तन) - TG Target कार्य-कारण और मौसमी नियंत्रण के लिए मानक। बड़े बजट (€30k+) और नीलामी को पार किए बिना अलग पैक के साथ समानांतर स्वीकार्य है। कम प्रवाह दर पर समानांतर मौसमी और सीखने में हस्तक्षेप एक साथ पैदा करता है। EU/CIS पायलट के लिए €10-20k - समाधान की गुणवत्ता के मामले में अनुक्रमिक मोड जीतता है।
Telegram Ads में A/B विजेता के लिए कौन सा KPI उपयोग करें?
मुख्य KPI = व्यावसायिक कार्यक्रम (FTD CPA, CPA जमा, CPA योग्य लीड)। माध्यमिक: CTR, CPA पंजीकरण, CR ग्राहक - केवल नैदानिक उद्देश्यों के लिए। विजेता = स्वीकार्य प्रॉक्सी गुणवत्ता और न्यूनतम के साथ सबसे छोटा प्राथमिक CPA। एन। CPA पर ड्रा करें - उच्च गुणवत्ता CR या अधिक स्थिर डिलीवरी। कभी भी अकेले CTR द्वारा विजेता घोषित न करें - रूपांतरण मानक देखें।
ए/बी परीक्षण से पहले एक परिकल्पना कैसे लिखें?
TG Target प्रारूप: "यदि हम [संदर्भ GEO/पैक] में [X] बदलते हैं, तो [मुख्य KPI] [दिशा], क्योंकि [तंत्र], न्यूनतम [n] घटनाओं के साथ [विंडो] के बाहर मापें।" उदाहरण: "यदि हम व्यापक विषयों को बदलते हैं → पीएल में वित्तीय पैक स्कोर करते हैं, तो FTD CPA कम हो जाएगा क्योंकि दर्शकों की संख्या में सुधार होगा।" तंत्र के बिना एक परिकल्पना एक परीक्षण नहीं है, बल्कि एक जुनून है।
Telegram Ads में कौन सी गलतियाँ A/B परीक्षण को बेकार कर देती हैं?
कई लीवर बदलना; CTR द्वारा विजेता; FTD पर 48 घंटों में निर्णय; कोई नियंत्रण कक्ष नहीं; असमान ट्रैकिंग; प्रतिच्छेदी पैक्स; छोटे बजट पर बहुत अधिक सेल; मॉडरेशन विलंब को अनदेखा करें; मौसम अंकन के बिना विभिन्न सप्ताहों से कोशिकाओं की तुलना; कोई पूर्व-लिखित स्टॉप लॉस नहीं है। एक और गलती - "ए/बी" लैंडिंग पृष्ठ + क्रिएटिव + पैक एक ही समय में।
Telegram Ads में A/B मेटा प्रयोगों से किस प्रकार भिन्न है?
टेलीग्राम - कम देशी यूआई प्रयोग, अधिक मैनुअल सेल अनुशासन और पैक अनुसंधान के लिए ओवरहेड। मेटा - क्रिएटिव की मात्रा और स्वचालित बजट बदलाव। टेलीग्राम समाधान खरीदार-प्रबंधित विभाजन और सख्त नामकरण पर निर्भर करते हैं। सांख्यिकीय इंजन कम आम हैं - इसलिए रूपरेखा और न्यूनतम-एन नियम अधिक महत्वपूर्ण हैं। चैनलों की तुलना - बनाम Google/मेटा गाइड में।
A/B परीक्षण को जल्दी कब बंद करें?
जल्दी रुकें यदि: प्राथमिक CPA >2× लक्ष्य n≥15 के साथ और कोई प्रवृत्ति सुधार नहीं; ट्रैकिंग विफलता; संयम ने विकल्प को ख़त्म कर दिया; डिलीवरी <50% 72 घंटों में। केवल इसलिए जल्दी न रुकें क्योंकि n=5 के साथ "अग्रणी विकल्प" है। खर्च करने से पहले परीक्षण संक्षिप्त में रोक नियमों को रिकॉर्ड करें। नियमों के बिना जल्दी झाँकना झूठी जीत को बढ़ाता है।
ए/बी परीक्षण ढांचा Widerruf, मिन-एन टेबल और निर्णय मैट्रिक्स अगस्त 2026 (ईयू/सीआईएस प्रदर्शन अभ्यास) तक प्रासंगिक हैं। योजना बनाने के लिए नियम एक दिशानिर्देश हैं; वैध CPA और LTV अंतिम स्केलिंग सीमाएँ निर्धारित करें।