اختبارات A/B

بمجرد أن تقرر ما تريد اختباره، وكيف ستقيس نجاح حملتك، ستضيف المحتوى الخاص بك وتحدد معايير الاختبار.

المقياس الفائز

المقياس الفائز هو ما نقيسه لتحديد المتغير 'الرابح'. ستقوم باختيار هذا خلال مرحلة التكوين. الخيارات المتاحة لك ستعتمد على القناة التي تستخدمها لتشغيل اختبارك.

• معدل النقر: النسبة المئوية للمستلمين الذين يفتحون رسالتك وينقرون على الأقل على رابط واحد داخلها.

• معدل القراءة: (واتساب فقط): النسبة المئوية للمستلمين الذين يفتحون ويقرأون رسالتك.

• معدل الفتح: (البريد الإلكتروني فقط): النسبة المئوية للمستلمين الذين يفتحون رسالتك.

سيكون المتغير 'الرابح' هو المتغير الذي لديه أفضل نتيجة لأي مقياس تختاره.

حجم الاختبار

يجب أن يكون لديك 100 مستلم في قائمة أو جمهور لتكون قادرًا على إرسال حملة تم اختبارها بأسلوب A/B لهم.

أثناء مرحلة التكوين، ستختار النسبة المئوية للمستلمين الذين تريد اختبار المتغيرات عليهم.

الحجم الأدنى لقائمة الاختبار الخاصة بك هو 100 مستلم، لكن تذكر أن كلما كان حجم الاختبار أكبر، ستكون نتائجك أدق.

هذا أمر مهم بشكل خاص إذا كنت تقارن بين أكثر من متغيرين. لن تؤدي ثمانية متغيرات تم اختبارها على 10% من قائمة تحتوي على 100 مستلم إلى نتائج إحصائية ذات دلالة كبيرة!

نوصي باختبار متغيرات حملتك على نسبة مئوية لا تقل عن 10% من المستلمين لديك.

مدة الاختبار

بشكل افتراضي، يتم تعيين مدة الاختبار على ساعتين. يمكنك زيادة هذا كما هو مطلوب.

كلما طالت مدة اختبار متغيراتك، كلما كانت نتائج اختبار A/B أكثر دقة. ومع ذلك، من المهم أن تتذكر أن طول نافذة الاختبار سيؤثر على الوقت الذي يتم فيه إرسال المتغير الفائز، وخذ ذلك في الاعتبار عند اختبار حملتك.

على سبيل المثال، إذا كنت تعرف أن أفضل وقت للإرسال هو الساعة 11 صباحًا يوم الخميس، فقد تقرر اختبار حملتك بأسلوب A/B لمدة 24 ساعة في الساعة 10 صباحًا يوم الأربعاء، بحيث يتم إرسال المتغير الفائز في الوقت الأمثل.

نسخة احتياطية للفائز

أحيانًا لا تكون اختبارات A/B حاسمة ببساطة. يمكن أن يحدث ذلك لعدة أسباب:

• لا توجد بيانات كافية لكي تكون النتائج حاسمة. على سبيل المثال، إذا اخترت مقياس 'معدل النقر'، لكن لم ينقر أي شخص على أي من متغيراتك. يمكن أن يحدث هذا إذا كانت مدة الاختبار قصيرة جدًا، أو كانت عينة الاختبار صغيرة جدًا.

• اختلافات ضئيلة (أقل من 1%) في النتائج. على سبيل المثال، إذا اخترت مقياس 'معدل النقر'، وحقق متغيرك الأول معدل نقر قدره 8.1%، بينما حقق متغيرك الثاني معدل نقر قدره 8.7%.

أثناء مرحلة التكوين، ستختار ما تريد أن يحدث إذا تبين أن اختبارك غير حاسم:

• اختيار الفائز الاحتياطي يدويًا: يتيح لك هذا الخيار اختيار المتغير الذي تفضل إرساله.

• إرسال جميع متغيرات الاختبار بالتساوي إلى المستلمين المتبقين: يتيح لنا هذا الخيار توزيع المتغيرات من الاختبار بالتساوي بين المستلمين المتبقين.