تُظهر لوحة التحكم ارتفاعًا في التحويلات بعد إطلاق تلك الرحلة (Journey) الجديدة، والإيرادات في تصاعد. لكن سؤالًا واحدًا يحدّد ما إذا كان هذا الرقم يعني شيئًا بالفعل: هل تسبّبت رسائلك في هذا الارتفاع، أم كان هؤلاء المستخدمون سيتحوّلون في كل الأحوال؟
هناك عوامل كثيرة تدفع التحويلات للارتفاع دون أن تكون رسائلك السبب فيها — ارتفاع موسمي مثل موسم الجمعة البيضاء، تحسين في المتجر نفسه، أو نمو عضوي طبيعي في قاعدة المستخدمين. توجد طريقة واحدة للتأكد فعليًا: استثنِ شريحة من مستخدميك بالكامل من الرسائل التسويقية، وراقب ما يفعلونه من تلقاء أنفسهم. هذا بالضبط ما تقوم به المجموعة الضابطة.
يشرح هذا المقال كيف تعمل المجموعة الضابطة، وكيف تقرأ نتائج الأثر الإضافي (Uplift)، وكيف تُفعّلها في Pushwoosh بنقرات قليلة.
لماذا لا يمكن لاختبار A/B الإجابة عن هذا السؤال
عند مواجهة هذا السؤال (كيفية قياس تأثير الرسائل)، تلجأ معظم الفرق إلى اختبار A/B. وهو أداة كلاسيكية وفعّالة، لكنها لم تُصمَّم لهذه المهمة بالتحديد.
يجيب اختبار A/B عن سؤال أضيق: أي رسالة تحقق أداءً أفضل. إشعار أ مقابل إشعار ب، صياغة الاستعجال مقابل صياغة الخصم، الإشعارات الفورية مقابل البريد الإلكتروني. إنها الأداة المناسبة لتحسين ما ترسله، وهذا يختلف تمامًا عن إثبات أن الإرسال نفسه كان يستحق الجهد.
وهذا خط الأساس هو ما ينقصك تمامًا. بدونه، أنت تقارن رسائلك الفائزة برسائل فائزة أخرى، دون أي فكرة عمّا إذا كان أي منها قد تفوّق على الصمت.
| اختبار A/B | المجموعة الضابطة | |
|---|---|---|
| السؤال | أي رسالة تحقق الأداء الأفضل؟ | هل الرسائل التسويقية تُحقق أي أثر فعلاً؟ |
| من يستقبل الرسائل | الجميع (كل النسخ المختبرة) | الجميع باستثناء المجموعة المستبعدة |
| ما الذي تتعلمه | النسخة الأفضل أداءً | الأثر الحقيقي والإضافي الذي تحققه |
يخلط الناس بين اختبار A/B والمجموعة الضابطة باستمرار. والمشكلة أن هذا الخلط يستهلك الميزانيات بصمت. فبينما يخبرك اختبار A/B بالرسالة الفائزة، تخبرك المجموعة الضابطة إن كان الإرسال أصلًا يستحق العناء.
معدلات الفتح ونسب النقر ومعدلات التسليم وأعداد المشتركين ترتفع، والجميع سعيد، ولا أحد يتحقق مما إذا كان هؤلاء المستخدمون سيتحوّلون من تلقاء أنفسهم.
نعم، مليون مشترك ومعدل تسليم 99% يثبتان أن أنظمتك تعمل بكفاءة. لكن هل يعني ذلك أن رسائلك حرّكت دولارًا واحدًا فعليًا؟ التحويلات ترتفع دائمًا: موعد الرواتب، الموسمية، أو النمو العضوي وحده. وإن لم تستطع استبعاد هذه العوامل، فأنت تنسب لنفسك نتيجة لم تُحقّقها.
كذلك، في اختبار A/B، تقارن بين خيارات الرسائل لكنك لا تقيس أبدًا مقابل الصمت. المجموعة الضابطة تفعل ذلك بالضبط: تستبعد شريحة، وترسل للباقي، والفرق هو ما حقّقته فعلًا من إيرادات، مقارنة بخط أساس حقيقي.
باختصار، اختبار A/B يجعل الرسالة أفضل، أما المجموعة الضابطة فهي التي تثبت أن فريقك يستحق وجوده أصلًا.
ما الذي تقيسه المجموعة الضابطة فعليًا
تُقسّم المجموعة الضابطة (أو ما يُعرف بـ Holdout) جمهورك إلى فئتين:
- فئة المعالجة (Treatment). جميع من يستقبلون رسائلك التسويقية كالعادة: الإشعارات الفورية، البريد الإلكتروني، الرسائل داخل التطبيق.
- الفئة الضابطة (Control). شريحة ثابتة مستبعدة تمامًا من كل الرسائل التسويقية. يستمرون في استقبال الرسائل التشغيلية مثل إعادة تعيين كلمة المرور والإيصالات، فلا يتأثر شيء بالنسبة لهم. هم فقط لا يستقبلون أي حملة تسويقية.
وبما أن الفرق الوحيد بين الفئتين هو رسائلك التسويقية، فإن أي تفاوت في سلوكهما هو نتيجة مباشرة لعملك. لهذا الفرق اسم محدد: الأثر الإضافي (Uplift).
في Pushwoosh، يمكنك استخدام ميزة المجموعة الضابطة العامة (Global Control Group). تحدد نسبة ثابتة من المستخدمين لاستبعادها (1 إلى 15%)، وتقوم المنصة تلقائيًا بمقارنة الفئتين بناءً على أي حدث تحويل تختاره، وتزوّدك بتحليلات جاهزة:
بيانات التقسيم هذه تُعالَج ضمن بنية تحتية معتمدة بشهادتَي ISO 27001:2022 و SOC 2 Type I ومتوافقة مع GDPR، وهو أمر مهم عندما يتعلق الأمر ببيانات جمهورك.
كيف يبدو هذا عمليًا
لنفترض أنك استبعدت 5% من مستخدميك واخترت هدف تحويل — الإجراء الذي يُعتبر نجاحًا داخل تطبيقك. لا يشترط أن يكون هدف التحويل عملية شراء بالضرورة: إتمام عملية دفع، ترقية باقة، بدء اشتراك، إتمام مستوى في لعبة، أو أي إجراء تعتبره أنت إنجازًا. وحيثما أمكن، اختر الهدف الأقرب إلى الإيراد مباشرة — فهذا هو الرقم الذي يحمل ثقلًا حقيقيًا عند الدفاع عن ميزانيتك أمام الإدارة.
على مدى نافذة 30 يومًا، تعمل الفئة التي استقبلت الرسائل (95%) مقابل الفئة الصامتة المستبعدة (5%)، وتقارن معدل التحويل لكل فئة:
| الفئة | معدل التحويل |
|---|---|
| فئة المعالجة (المُستهدَفة بالرسائل) | 8.2% |
| الفئة الضابطة (المستبعدة) | 6.1% |
الأثر الإضافي: +34%، ومُصنّف كنتيجة ذات دلالة إحصائية (Significant). (*يُقاس الأثر الإضافي مقارنة بخط أساس المجموعة الضابطة: (8.2 − 6.1) / 6.1 ≈ 34%.)
كيف تُفسّر النتيجة: التحويلات التي تسبّبت فيها رسائلك: نحو 940 عملية شراء إضافية خلال 30 يومًا. وبمتوسط قيمة طلب يبلغ 170 ريالًا سعوديًا، هذا يعني أن برنامجك يستطيع أن ينسب لنفسه نحو 160,000 ريال سعودي من الإيرادات — وهذا هو الفرق بين أن تقول “أرسلنا الكثير من الإشعارات” وأن تقول “حقّقت للشركة 160,000 ريال سعودي فعليًا.”
هذا هو المسار المثالي، وهكذا تُثبت للرئيس التنفيذي والمدير المالي أن حملاتك تعمل بالفعل! 💰
لكن هذا الرقم لن يكون بهذا الشكل الجيد في كل مرة. وفيما يلي كيف تقرأ النتيجة أيًّا كانت.
قراءة النتيجة: 3 احتمالات وخطوتك التالية
بعد حساب الأثر الإضافي، يخبرك الرقم بما يجب أن تفعله بعد ذلك.
| النتيجة | ماذا تعني | خطوتك التالية |
|---|---|---|
| إيجابية وذات دلالة إحصائية (كما في مثالنا) | رسائلك تُحقق أثرًا إضافيًا حقيقيًا يتجاوز خط الأساس | وسّع نطاق أقوى المسارات، وأوقف الأضعف. اعرض الرقم في مراجعة الميزانية — فجملة “أثر إضافي 34% مقارنة بالمجموعة الضابطة” لا يمكن لأحد أن يتجاهلها |
| ثابتة أو غير ذات دلالة إحصائية | فئة المعالجة والفئة الضابطة تتحوّلان بمعدلات متقاربة؛ هؤلاء المستخدمون كانوا سيتحوّلون في كل الأحوال | أعد صياغة العرض أو ضيّق نطاق الشريحة المستهدفة قبل التوقف. غالبًا ما تكون المشكلة في حملة عامة غير مقسّمة، تتفوق عليها نسخة مقسّمة جيدًا |
| سلبية | الفئة الضابطة تتحوّل بمعدل أفضل — أي أن الفئة التي استقبلت الرسائل في وضع أسوأ، وغالبًا بسبب الإفراط في الإرسال | قلّل تردد الرسائل بشكل كبير وأعد القياس. المجموعة الضابطة هي الوسيلة الوحيدة التي تكشف الإفراط في الإرسال أساسًا؛ بدونها، يبدو كل شيء جيدًا في كل تقارير معدل الفتح التي تملكها |
تطبيق المجموعة الضابطة العامة ضرورة إن كنت تريد أن ترى بوضوح كيف تصل رسائلك التسويقية إلى جمهورك، وماذا يحدث بعد ذلك، مقارنة بالمستخدمين المستبعدين منها.
أثبت هذا النهج قيمته مع عملائنا في قطاعي التكنولوجيا المالية وإنشاء المحتوى: تبنّي المجموعة الضابطة العامة منحهم رؤى وخطوات عملية وتعديلات واضحة استطاعوا تطبيقها مباشرة في عمليات الإرسال اليومية.
الفرق بين الفئتين — المقاس بأحداث خاصة بكل قطاع، وتصرفات المستخدمين، وفي المقابل علامات الخمول — يعمل كاختبار حاسم لاستراتيجية تواصلك بالكامل. وهو مفيد بشكل خاص حين تشعر أنك استنفدت الأفكار الجديدة لجمهورك: فالمجموعة الضابطة تُظهر ما تُحققه رسائلك فعليًا، وما كان المستخدمون سيفعلونه في كل الأحوال.
فعّل المجموعة الضابطة في Pushwoosh بنقرات قليلة
-
حدد حجم المجموعة المستبعدة
حدد نسبة المستخدمين الذين تريد استبعادهم؛ 5% هي النسبة الافتراضية المتوازنة. ينضم المستخدمون الجدد إلى المجموعة تلقائيًا.
-
صنّف حملاتك كرسائل تسويقية
ينطبق الاستبعاد على الرسائل التسويقية فقط، أما رسائلك التشغيلية — كالإيصالات وإعادة تعيين كلمة المرور — فتظل تصل إلى الجميع.
-
اختر الأحداث التي تُعرّف النجاح
أضفها كأهداف تحويل داخل رحلاتك (Journeys) حتى يعرف التقرير ما يقيسه. لا يشترط أن يكون الحدث عملية شراء — اختر ما يمثل قيمة حقيقية لتطبيقك: عملية شراء مكتملة لمتاجر التجارة الإلكترونية، ترقية إلى باقة مدفوعة للاشتراكات، إتمام مستوى لتطبيقات الألعاب، أو أي حدث آخر تعتبره تحويلًا.
-
اقرأ التقرير
تعرض صفحة المجموعة الضابطة الأثر الإضافي وما إذا كان ذا دلالة إحصائية — دون أي حسابات يدوية من جانبك.
