57 أخطاء شائعة في اختبار A / B وكيفية تجنبها
نشرت: 2021-06-15هل تجري اختبارات A / B ولكنك لست متأكدًا مما إذا كانت تعمل بشكل صحيح؟
هل تريد معرفة الأخطاء الشائعة عند اختبار A / B حتى لا تضيع وقتًا ثمينًا في حملة معطلة؟
حسنًا ، أخبار جيدة! في هذه المقالة ، سنقوم بإرشادك خلال 57 خطأً شائعًا (وأحيانًا غير شائع) في اختبار A / B نراها ، لذا يمكنك إما تجنبها أو إدراك وقت حدوثها وإصلاحها بسرعة.
لقد قسمنا هذه إلى 3 أقسام رئيسية:
- أخطاء قبل بدء الاختبار ،
- المشكلات التي يمكن أن تحدث أثناء الاختبار ،
- والأخطاء التي يمكنك ارتكابها بمجرد الانتهاء من الاختبار.
يمكنك ببساطة القراءة ومعرفة ما إذا كنت تقوم بعمل أي منها بنفسك.
و تذكر:
كل فشل هو درس قيم ، سواء في الاختبار أو في الإعداد للأخطاء. المفتاح هو التعلم منهم!
لذلك دعونا نتعمق في ...
- أخطاء اختبار A / B الشائعة التي يمكن ارتكابها قبل إجراء الاختبار
- # 1. دفع شيء ما على الهواء مباشرة قبل الاختبار!
- # 2. عدم إجراء اختبار أ / ب فعلي
- # 3. لا تختبر لمعرفة ما إذا كانت الأداة تعمل
- # 4. باستخدام أداة منخفضة الجودة ومحتوى وامض
- # 5. لا اختبار سؤال وجواب
- # 6. هل العلاج الجديد / الاختلاف يعمل؟
- # 7. عدم اتباع فرضية واختبار أي شيء قديم
- # 8. وجود فرضية غير قابلة للاختبار
- # 9. عدم تحديد هدف واضح للاختبار مسبقًا
- # 10. التركيز على المقاييس السطحية
- رقم 11. فقط باستخدام البيانات الكمية لتشكيل أفكار الاختبار
- رقم 12. تقليد منافسيك
- # 13. اختبار "أفضل ممارسات الصناعة" فقط
- # 14. التركيز على المهام ذات التأثير الصغير أولاً ، عندما تتوفر مكافأة كبيرة عالية التأثير / فاكهة معلقة منخفضة
- #15. اختبار عدة أشياء في وقت واحد وعدم معرفة التغيير الذي تسبب في النتيجة
- # 16. عدم إجراء تحليل ما قبل الاختبار المناسب
- # 17. التسمية الخاطئة للاختبارات
- # 18. إجراء الاختبارات على عنوان URL خاطئ
- # 19. إضافة قواعد عرض عشوائية للاختبار الخاص بك
- # 20. اختبار حركة المرور الخاطئة لهدفك
- رقم 21. عدم استبعاد الزائرين العائدين من الاختبار وتشويه النتائج
- رقم 22. عدم إزالة عناوين IP الخاصة بك من الاختبار
- رقم 23. عدم تجزئة متغيرات مجموعة التحكم (تأثير الشبكة)
- رقم 24. إجراء الاختبارات أثناء الأحداث الموسمية أو أحداث الموقع / المنصة الرئيسية
- # 25. تجاهل الاختلافات الثقافية
- # 26. تشغيل عدة حملات متصلة في نفس الوقت
- رقم 27. الترجيح غير المتكافئ لحركة المرور
- أخطاء اختبار A / B الشائعة التي يمكنك القيام بها أثناء الاختبار
- رقم 28. عدم الجري لفترة كافية للحصول على نتائج دقيقة
- # 29. مراقبة طائرات الهليكوبتر / اختلاس النظر
- # 30. عدم تتبع ملاحظات المستخدم (مهم بشكل خاص إذا كان الاختبار يؤثر على إجراء مباشر وفوري)
- رقم 31. إجراء التغييرات في منتصف الاختبار
- رقم 32. تغيير النسبة المئوية لتخصيص حركة المرور في منتصف الاختبار أو إزالة الأداء الضعيف
- رقم 33. عدم التوقف عن الاختبار عندما تحصل على نتائج دقيقة
- # 34. يتم استثمارها عاطفيًا في فقدان الاختلافات
- # 35. إجراء الاختبارات لفترة طويلة جدًا وتوقف التتبع
- # 36. عدم استخدام أداة تسمح لك بإيقاف / تنفيذ الاختبار!
- أخطاء اختبار A / B الشائعة التي يمكنك القيام بها بعد الانتهاء من الاختبار
- # 37. الاستسلام بعد اختبار واحد!
- رقم 38. التخلي عن فرضية جيدة قبل اختبار جميع إصداراتها
- رقم 39. توقع انتصارات ضخمة في كل وقت
- # 40. عدم التحقق من الصلاحية بعد الاختبار
- رقم 41. عدم قراءة النتائج بشكل صحيح
- رقم 42. عدم النظر في النتائج حسب المقطع
- رقم 43. عدم التعلم من النتائج
- رقم 44. أخذ الخاسرين
- # 45. عدم اتخاذ إجراءات بشأن النتائج
- رقم 46. عدم التكرار والتحسين على الانتصارات
- رقم 47. عدم مشاركة النتائج الفائزة في مناطق أو أقسام أخرى
- رقم 48. عدم اختبار هذه التغييرات في الأقسام الأخرى
- # 49. الكثير من التكرار على صفحة واحدة
- # 50. لا تختبر ما يكفي!
- رقم 51. عدم توثيق الاختبارات
- رقم 52. نسيان الإيجابيات الكاذبة وعدم إعادة التحقق من حملات الرفع الضخمة
- رقم 53. لا تتبع نتائج downline
- # 54. فشل في حساب تأثيرات الأسبقية والجدة ، والتي قد تؤدي إلى تحيز نتائج العلاج
- # 55. تغييرات فترة النظر الجارية
- رقم 56. عدم إعادة الاختبار بعد X مرة
- رقم 57. فقط اختبار المسار وليس المنتج
- استنتاج
أخطاء اختبار A / B الشائعة التي يمكن ارتكابها قبل إجراء الاختبار
# 1. دفع شيء ما على الهواء مباشرة قبل الاختبار!
قد يكون لديك تصميم صفحة أو موقع ويب جديد رائع وأنت حريص حقًا على نشره على الهواء مباشرة دون اختباره.
خارج القبضة!
قم بإجراء اختبار سريع لترى كيف يعمل أولاً. لا تريد دفع تغيير جذري مباشرًا دون الحصول على بعض البيانات ، أو قد تخسر المبيعات والتحويلات.
في بعض الأحيان يمكن أن يكون هذا التغيير الجديد تراجعًا كبيرًا في الأداء. لذا قم بإجراء اختبار سريع أولاً.
# 2. عدم إجراء اختبار أ / ب فعلي
يعمل اختبار أ / ب عن طريق تشغيل مصدر زيارات واحد لصفحة تحكم وصيغة لتلك الصفحة. الهدف هو معرفة ما إذا كان التغيير الذي قمت بتنفيذه يجعل الجمهور يتحول بشكل أفضل ويتخذ إجراءً.
الشيء هو ، للتأكد من أن هذا الاختبار متحكم فيه وعادل ، نحتاج إلى إجراء هذا الاختبار بمعلمات محددة. نحتاج إلى نفس مصادر الزيارات التي تعرض الحملة خلال نفس الفترة الزمنية حتى لا يكون لدينا أي عوامل خارجية تؤثر على أحد الاختبارات دون الآخر.
يخطئ بعض الأشخاص في إجراء اختبار بالتسلسل. يقومون بتشغيل صفحتهم الحالية لمدة X من الوقت ، ثم الإصدار الجديد لـ X مرة بعد ذلك ، ثم يقيسون الفرق.
هذه النتائج ليست دقيقة تمامًا حيث كان من الممكن أن تحدث العديد من الأشياء خلال نوافذ الاختبار هذه. يمكنك الحصول على موجة من الزيارات الجديدة ، وتشغيل حدث ، مما يتسبب في أن يكون للصفحتين جماهير ونتائج مختلفة تمامًا.
لذا تأكد من أنك تجري اختبار A / B فعليًا حيث تقوم بتقسيم حركة المرور بين نسختين واختبارهما في نفس الوقت بالضبط.
# 3. لا تختبر لمعرفة ما إذا كانت الأداة تعمل
لا توجد أداة اختبار دقيقة بنسبة 100٪. أفضل شيء يمكنك القيام به عند البدء هو إجراء اختبار A / A لمعرفة مدى دقة أداتك.
كيف؟ ما عليك سوى إجراء اختبار حيث تقوم بتقسيم حركة المرور بنسبة 50:50 بين صفحة واحدة. (تأكد من أنها صفحة يمكن لجمهورك التحويل إليها حتى تتمكن من قياس نتيجة معينة.)
لماذا ا؟
نظرًا لأن كلا المجموعتين من جمهورك يشاهدان الصفحة نفسها تمامًا ، يجب أن تكون نتائج التحويل متطابقة على جانبي الاختبار ، أليس كذلك؟
حسنًا ، في بعض الأحيان لا تكون كذلك ، مما يعني أنه قد تم إعداد أداتك بشكل غير صحيح. لذا انطلق وتحقق من أداة الاختبار قبل تشغيل أي حملات.
# 4. باستخدام أداة منخفضة الجودة ومحتوى وامض
بعض الأدوات ليست جيدة مثل غيرها. إنهم يقومون بالمهمة ولكنهم يعانون تحت عبء المرور أو "الوميض" والوميض.
يمكن أن يؤدي هذا في الواقع إلى فشل اختبارك ، حتى لو كان لديك متغير فائز محتمل.
لنفترض أنك قمت بتقسيم اختبار صورة على صفحتك. يتم تحميل صفحة التحكم بشكل جيد ، لكن الاختلاف يهتز بين الصورة الاختبارية الجديدة والصورة الأصلية لجزء من الثانية فقط. (أو ربما في كل مرة يقوم فيها المستخدم بالتمرير لأعلى ولأسفل الصفحة.)
يمكن أن يؤدي هذا إلى تشتيت الانتباه ويسبب مشاكل في الثقة ، مما يقلل من معدل التحويل.
في الواقع ، يمكن أن تتحول صورتك الجديدة بشكل أفضل من الناحية النظرية ، لكن وميض الأداة يقلل من النتائج ، مما يمنحك اختبارًا غير دقيق لتلك الصورة.
تأكد من أن لديك أداة جيدة بما يكفي للاختبار باستخدامها.
(هذا عامل مهم في تجربة المستخدم لدرجة أن Google تقوم حاليًا بتعديل تصنيفاتها للمواقع التي لا تحتوي على عناصر خفقان أو متحركة).
# 5. لا اختبار سؤال وجواب
خطأ بسيط للغاية ، لكن هل تحققت من أن كل شيء يعمل؟
- هل مررت بعملية البيع؟
- هل لديك آخرين؟ (وعلى الأجهزة غير المخزنة مؤقتًا لأنه في بعض الأحيان لا يكون ما يتم حفظه في متصفحك هو الشكل الذي تبدو عليه الصفحة.)
- هل الصفحات يتم تحميلها على ما يرام؟ هل هم بطيئون؟ هل أفسدت التصاميم؟
- هل كل الأزرار تعمل؟
- هل تتبع الإيرادات يعمل؟
- هل تحققت من أن الصفحة تعمل على أجهزة متعددة؟
- هل لديك الإبلاغ عن الأخطاء في مكان ما إذا حدث شيء ما؟
كل هذا يستحق التحقق منه قبل أن تبدأ تشغيل حركة المرور إلى أي حملة.
احصل على قائمة مراجعة ضمان الجودة لاختبارات أ / ب. إنه ملف PDF قابل للتعبئة سترغب في الرجوع إليه في كل مرة تقوم فيها بإجراء اختبار لضمان الجودة.
# 6. هل العلاج الجديد / الاختلاف يعمل؟
وبالمثل ، هل مررت واختبرت أن صيغتك الجديدة تعمل قبل إجراء الاختبار؟
قد يكون هذا جزءًا مهملاً من اختبار ضمان الجودة ، ولكن يمكن تشغيل الحملات غالبًا بأزرار معطلة وروابط قديمة والمزيد. تحقق أولاً ، ثم اختبر.
# 7. عدم اتباع فرضية واختبار أي شيء قديم
بعض الناس يختبرون أي شيء دون التفكير فيه.
يحصلون على فكرة للتغيير ويريدون اختبارها ، ولكن بدون تحليل حقيقي لكيفية تحويل الصفحة حاليًا ، أو حتى لماذا التغيير الذي يختبرونه يمكن أن يحدث فرقًا. (قد يكون السبب أنهم خفضوا التحويل ولكنهم لا يعرفون ذلك ، حيث لم يتم تتبع نتيجة أساسية لديهم حتى الآن).
إن تكوين فرضية حول مكان تكمن المشكلة وسببها وكيف يمكنك حلها سيحدث فرقًا كبيرًا في برنامج الاختبار الخاص بك.
# 8. وجود فرضية غير قابلة للاختبار
ليست كل الفرضيات صحيحة. هذا جيد. في الواقع ، الكلمة تعني حرفياً "لدي فكرة تستند إلى معلومات X وأعتقد أن Y قد يحدث في ظرف Z".
لكنك ستحتاج إلى فرضية قابلة للاختبار ، مما يعني أنه يمكن إثباتها أو دحضها من خلال الاختبار. تضع الفرضيات القابلة للاختبار الابتكار موضع التنفيذ وتعزز التجريب النشط. يمكن أن تؤدي إما إلى النجاح (في هذه الحالة كان حدسك صحيحًا) أو الفشل - إظهار أنك كنت مخطئًا طوال الوقت. لكنهم سيعطونك رؤى. قد يعني ذلك أنه يجب تنفيذ اختبارك بشكل أفضل ، أو أن بياناتك كانت غير صحيحة / تمت قراءتها بشكل خاطئ ، أو أنك وجدت شيئًا لا يعمل والذي غالبًا ما يعطي نظرة ثاقبة للاختبار الجديد الذي قد يعمل بشكل أفضل بكثير.
# 9. عدم تحديد هدف واضح للاختبار مسبقًا
بمجرد أن يكون لديك فرضية ، يمكنك استخدامها لتتماشى مع نتيجة معينة تريد تحقيقها.
في بعض الأحيان ، يقوم الأشخاص فقط بتشغيل حملة ومعرفة التغييرات ، ولكنك ستحصل بالتأكيد على المزيد من العملاء المحتملين / التحويلات أو المبيعات إذا كان لديك وضوح بشأن العنصر المحدد الذي تريد أن ترى زيادة فيه.
(يمنعك هذا أيضًا من رؤية انخفاض في عنصر مهم ولكن اعتبار الاختبار فوزًا لأنه `` حصل على المزيد من الأسهم '').
بالحديث عن هذا الموضوع…
# 10. التركيز على المقاييس السطحية
يجب أن يكون اختبارك دائمًا مرتبطًا بمقاييس الدرابزين أو بعض العناصر التي تؤثر بشكل مباشر على مبيعاتك. إذا كان هناك المزيد من العملاء المحتملين ، فعليك أن تعرف بالدولار قيمة العميل المتوقع وقيمة رفع معدل التحويل هذا.
في الوقت نفسه ، يجب عادةً تجنب المقاييس التي لا ترتبط بنتيجة قابلة للقياس أو تؤدي إليها. المزيد من الإعجابات على Facebook لا يعني بالضرورة المزيد من المبيعات. قم بإزالة أزرار المشاركة الاجتماعية هذه وشاهد فقط عدد العملاء المتوقعين الذين تحصل عليهم. كن حذرًا من مقاييس الغرور وتذكر أنه لمجرد إصلاح تسرب واحد لا يعني أنه لا يوجد تسريب آخر في مكان آخر يجب معالجته أيضًا!
فيما يلي قائمة Ben Labay بمقاييس الدرابزين الشائعة لبرامج التجريب:
رقم 11. فقط باستخدام البيانات الكمية لتشكيل أفكار الاختبار
يعد استخدام البيانات الكمية للحصول على أفكار أمرًا رائعًا ، ولكنه أيضًا معيب بعض الشيء. خاصة إذا كانت البيانات الوحيدة التي نستخدمها مأخوذة من تحليلاتنا.
لماذا ا؟
يمكننا أن نعرف من بياناتنا أن عدد X من الأشخاص لم ينقروا ، لكننا قد لا نعرف السبب.
- هل الزر منخفض جدًا أسفل الصفحة؟
- هل هو غير واضح؟
- هل يتوافق مع ما يريده المشاهد؟
- هل تعمل حتى؟
يستمع أفضل المختبرين أيضًا إلى جمهورهم. يكتشفون ما يحتاجون إليه ، وما الذي يدفعهم إلى الأمام ، وما يعيقهم ، ثم يستخدمون ذلك لصياغة أفكار جديدة واختبارات ونسخة مكتوبة.
في بعض الأحيان يتم إعاقة المستخدمين بسبب مشكلات الثقة والشكوك الذاتية. في أوقات أخرى ، يكون الوضوح والأشكال المكسورة أو التصاميم السيئة. المفتاح هو هذه الأشياء التي لا يمكن للبيانات الكمية أن تخبرك بها دائمًا ، لذلك اسأل جمهورك دائمًا واستخدمها لمساعدتك في التخطيط.
رقم 12. تقليد منافسيك
جاهز للسر؟
في كثير من الأحيان ، يتفوق منافسوك عليها. ما لم يكن لديهم شخص يدير حملات رفع طويلة المدى ، فقد يحاولون فقط معرفة ما ينجح ، وأحيانًا دون استخدام أي بيانات لأفكارهم.
وحتى ذلك الحين ، ما يصلح لهم ، قد لا يعمل من أجلك. لذا ، نعم ، استخدمها للإلهام ولكن لا تقصر أفكارك الاختبارية على ما تراه يفعلونه فقط. يمكنك حتى الخروج من مجال عملك للحصول على الإلهام ومعرفة ما إذا كان ذلك يثير بعض الفرضيات.
# 13. اختبار "أفضل ممارسات الصناعة" فقط
مرة أخرى ، ما يصلح لأحدهم ليس دائمًا ما يصلح للآخر.
على سبيل المثال ، عادةً ما يكون أداء الصور المنزلق سيئًا ، ولكن في بعض المواقع ، يمكن أن تؤدي في الواقع إلى مزيد من التحويلات. اختبر كل شيء. ليس لديك ما تخسره وكل شيء لتكسبه.
# 14. التركيز على المهام ذات التأثير الصغير أولاً ، عندما تتوفر مكافأة كبيرة عالية التأثير / فاكهة معلقة منخفضة
يمكننا جميعًا أن نكون مذنبين بالتركيز على التفاصيل الدقيقة. قد يكون لدينا صفحة نريد أن نؤديها بشكل أفضل ونختبر تصميمات التخطيط والصور وحتى ألوان الأزرار. (لدي شخصيًا صفحة مبيعات في نسختها الخامسة.)
الشيء هو أنه من المحتمل أن تكون هناك صفحات أكثر أهمية لتختبرها الآن.
إعطاء الأولوية للتأثير قبل كل شيء:
- هل ستؤثر هذه الصفحة بشكل مباشر على المبيعات؟
- هل هناك صفحات أخرى في عملية البيع ضعيفة الأداء بشكل كبير؟
إذا كان الأمر كذلك ، فركز على هؤلاء أولاً.
يُعد رفع صفحة المبيعات بنسبة 1٪ أمرًا رائعًا ، ولكن زيادة 20٪ في الصفحة التي تؤدي إلى ظهور هذه الصفحات قد تكون أكثر أهمية بكثير. (خاصة إذا كانت تلك الصفحة المعينة هي المكان الذي تفقد فيه معظم جمهورك.)
في بعض الأحيان ، لا نبحث فقط عن المزيد من الرفع ولكن لإصلاح شيء يمثل عنق الزجاجة بدلاً من ذلك.
اختبر وحسّن التأثير الأكبر ، وأقل الفاكهة المعلقة أولاً. هذا ما تفعله الوكالات وهذا هو سبب إجرائها نفس عدد الاختبارات التي تجريها الفرق الداخلية ، ولكن مع عائد استثمار أعلى. تحصل الوكالات على أرباح أكثر بنسبة 21٪ لنفس الحجم من الاختبارات!
#15. اختبار عدة أشياء في وقت واحد وعدم معرفة التغيير الذي تسبب في النتيجة
لا حرج في إجراء اختبارات جذرية حيث تقوم بتغيير أشياء متعددة في وقت واحد وإعادة تصميم الصفحة بالكامل.
في الواقع ، يمكن أن يكون لعمليات إعادة التصميم الجذرية هذه في بعض الأحيان تأثير أكبر على عائد الاستثمار ، حتى لو كنت موقعًا منخفض الحركة ، وخاصة إذا كنت مستقرًا ولا يبدو أنك تحصل على المزيد من التحسينات.
لكن ضع في اعتبارك أنه لا ينبغي أن يكون كل اختبار أ / ب لتغيير جذري مثل هذا. 99٪ من الوقت نقوم فقط باختبار تغيير لشيء واحد ، مثل
- عناوين جديدة
- صور جديدة
- تخطيط جديد لنفس المحتوى
- أسعار جديدة ، إلخ.
المفتاح عند إجراء اختبار عنصر واحد هو ذلك. حافظ على اختبارك لتغيير عنصر واحد فقط حتى تتمكن من معرفة ما يحدث الفرق والتعلم منه. تغييرات كثيرة جدًا ولا تعرف ما الذي نجح.
# 16. عدم إجراء تحليل ما قبل الاختبار المناسب
هل لديك عدد كافٍ من الزوار في مجموعتك الاختبارية؟ هل يستحق الاختبار وقتك؟
احسب! تأكد من أن لديك عدد كافٍ من الزيارات قبل إجراء الاختبار - وإلا فإن ذلك يضيع الوقت والمال. تفشل العديد من الاختبارات بسبب عدم كفاية حركة المرور أو ضعف الحساسية (أو كليهما).
قم بإجراء تحليل الاختبار المسبق لتحديد حجم العينة والحد الأدنى من التأثير القابل للاكتشاف لتجربتك. ستخبرك حاسبة أهمية اختبار A / B مثل Convert حجم العينة و MDE للاختبار الخاص بك ، مما سيساعدك على تحديد ما إذا كان الأمر يستحق التشغيل. يمكنك أيضًا استخدام هذه المعلومات لتحديد المدة التي يجب أن يعمل بها الاختبار ومدى صغر المصعد الذي لا تريد تفويته قبل استنتاج أن الاختبار كان ناجحًا أم لا.
# 17. التسمية الخاطئة للاختبارات
خطأ بسيط للغاية لكنه يحدث. أنت تخطئ في تسمية الاختبارات ثم تحصل على نتائج خاطئة. التباين يفوز ولكنه يسمى التحكم ، وبعد ذلك لا تنفذ الفوز وتبقى مع الخاسر!
تحقق جيدًا دائمًا!
# 18. إجراء الاختبارات على عنوان URL خاطئ
خطأ بسيط آخر. إما أنه تم إدخال عنوان URL للصفحة بشكل غير صحيح ، أو أن الاختبار قيد التشغيل على "موقع اختبار" حيث أجريت تغييراتك وليس على الإصدار المباشر.
قد يبدو الأمر جيدًا بالنسبة لك ، لكنه لن يتم تحميله في الواقع لجمهورك.
# 19. إضافة قواعد عرض عشوائية للاختبار الخاص بك
مرة أخرى ، تحتاج إلى اختبار شيء واحد مع علاجك ولا شيء آخر.
إذا كانت صورة ، فاختبر الصورة. يجب أن يكون كل شيء آخر كما هو ، بما في ذلك الوقت من اليوم الذي يمكن فيه للأشخاص رؤية كلتا الصفحتين!
تسمح لك بعض الأدوات باختبار أوقات مختلفة من اليوم لمعرفة أداء حركة المرور في أطر زمنية مختلفة. يعد هذا مفيدًا إذا كنت تريد معرفة متى تكون أفضل حركة مرور لك على موقعك ، ولكن ليس مفيدًا إذا تم تقسيم الصفحات حسب من يراها والتي لها أشكال مختلفة.
على سبيل المثال ، تنخفض حركة مرور مدونتنا في عطلات نهاية الأسبوع (مثل معظم مدونات الأعمال).
تخيل لو أجرينا اختبارًا يوم الاثنين والأربعاء على صفحة التحكم ، ثم أظهرنا حركة المرور من Fri-Sun على العلاج؟ سيكون لديها حركة مرور أقل بكثير للاختبار معها ، وربما نتائج مختلفة.
# 20. اختبار حركة المرور الخاطئة لهدفك
من الناحية المثالية ، عند إجراء اختبار ، فأنت تريد التأكد من أنك تختبر شريحة واحدة فقط من جمهورك. عادةً ما يكون الزوار الجدد هم أعضاء جدد لمعرفة كيفية استجابتهم لأول مرة على موقعك.
في بعض الأحيان قد ترغب في اختبار الزوار المتكررين أو مشتركي البريد الإلكتروني أو حتى حركة المرور المدفوعة. الحيلة هي اختبار واحد منهم فقط في كل مرة حتى تتمكن من الحصول على تمثيل دقيق لكيفية أداء تلك المجموعة مع تلك الصفحة.
عند إعداد اختبارك ، حدد الجمهور الذي تريد العمل معه وقم بإزالة أي آخرين قد يلوثون النتيجة ، مثل الزوار العائدين.
رقم 21. عدم استبعاد الزائرين العائدين من الاختبار وتشويه النتائج
نسمي هذه العينة التلوث.
بشكل أساسي ، إذا رأى الزائر صفحة موقعك وعاد وشاهد تباينك ، فسيستجيب بشكل مختلف تمامًا عما إذا رأى واحدًا منهم فقط.
يمكن أن يتم الخلط بينها أو ارتدادها أو حتى تحويلها إلى مستوى أعلى ، وذلك ببساطة بسبب تلك التفاعلات الإضافية.
الشيء هو أنه يتسبب في أن تصبح بياناتك ملوثة وأقل دقة. من الناحية المثالية ، تريد استخدام أداة تقوم بترتيب الصفحة التي يرونها عشوائيًا ولكن بعد ذلك تظهر لهم دائمًا نفس الإصدار حتى ينتهي الاختبار.
رقم 22. عدم إزالة عناوين IP الخاصة بك من الاختبار
عند الحديث عن تلوث العينة ، إليك طريقة أخرى لتلويث بياناتك (وهي ممارسة جيدة للتحليلات على أي حال).
تأكد من حظر عناوين IP الخاصة بك وموظفيك من أداة التحليلات والاختبار الخاصة بك. آخر شيء تريده هو أن تقوم أنت أو أحد أعضاء الفريق بـ "تسجيل الوصول" على الصفحة ووضع علامة عليها في الاختبار.
رقم 23. عدم تجزئة متغيرات مجموعة التحكم (تأثير الشبكة)
خيار آخر للتلوث نادر الحدوث ولكن يمكن أن يحدث ، خاصة إذا كان لديك شبكة لجمهورك.
هنا مثال.
لنفترض أن لديك منصة حيث يمكن لجمهورك التواصل. ربما صفحة Facebook أو قسم التعليقات ، ولكن يمكن للجميع الوصول إليها.
في هذه الحالة ، قد يكون لديك أشخاص يرون صفحة واحدة ويشاهد آخرون تباينًا ، لكنهم جميعًا على نفس الشبكة الاجتماعية. يمكن أن يؤدي هذا في الواقع إلى تحريف بياناتك لأنها يمكن أن تؤثر على خيارات وتفاعلات بعضها البعض مع الصفحة. قام Linkedin بتقسيم جمهوره عند اختبار ميزات جديدة لمنع مشكلات تأثير الشبكة.
من الناحية المثالية ، تريد فصل الاتصال بين مجموعتي الاختبار حتى اكتمال الاختبار.
رقم 24. إجراء الاختبارات أثناء الأحداث الموسمية أو أحداث الموقع / المنصة الرئيسية
ما لم تكن تختبر حدثًا موسميًا ، فأنت لا ترغب أبدًا في إجراء حملة اختبارية أثناء العطلات أو أي حدث كبير آخر ، مثل تخفيضات خاصة أو حدث عالمي يحدث.
في بعض الأحيان لا يمكنك مساعدتها. سيكون لديك اختبار تشغيل وستقوم Google بتنفيذ تحديث أساسي جديد وتعبث بمصادر حركة المرور الخاصة بك في منتصف الحملة * السعال *.
أفضل شيء تفعله هو ببساطة إعادة التشغيل بعد أن يموت كل شيء.
# 25. تجاهل الاختلافات الثقافية
قد يكون لديك هدف لصفحة ، ولكنك تدير أيضًا حملة عالمية بأشكال متعددة تظهر بلغات مختلفة وبلدان مختلفة.
يجب أن تأخذ هذا في الاعتبار عند إجراء الاختبار الخاص بك. يمكن إجراء بعض التغييرات بشكل عام ، مثل تغيير بسيط في التخطيط أو إضافة إشارات ثقة ، إلخ.
في أوقات أخرى ، يجب أن تأخذ في الاعتبار نقاط الاختلاف الثقافية. كيف يرى الناس التخطيط ، وكيف يشاهدون الصور ، والأفاتار على صفحتك.
يقوم Netflix بذلك باستخدام الصور المصغرة لجميع عروضه ، ويختبر العناصر المختلفة التي قد تجذب جماهير مختلفة (بدلاً من ذلك يضم ممثلين محددين مشهورين في هذا البلد).
ما يحصل على نقرات في بلد ما يمكن أن يكون مختلفًا بشكل لا يصدق في بلدان أخرى. أنت لا تعرف حتى تختبر رغم ذلك!
# 26. تشغيل عدة حملات متصلة في نفس الوقت
من السهل أن تكون متحمسًا وترغب في إجراء اختبارات متعددة في وقت واحد.
فقط تذكر: يمكنك إجراء اختبارات متعددة لنقاط مماثلة في عملية المبيعات في نفس الوقت ، ولكن لا تقم بإجراء اختبارات متعددة لنقاط متعددة متصلة في مسار التحويل.
هذا ما أعنيه.
يمكنك بسهولة إجراء الاختبارات على كل صفحة إنشاء عملاء محتملين لديك ، وكل ذلك في نفس الوقت.
ومع ذلك ، لا ترغب في اختبار صفحات العملاء المتوقعين وصفحات المبيعات وصفحات الخروج كلها مرة واحدة لأن هذا يمكن أن يقدم العديد من العناصر المختلفة في عملية الاختبار الخاصة بك ، مما يتطلب كميات هائلة من حركة المرور والتحويلات للحصول على أي رؤية مفيدة.
ليس ذلك فحسب ، بل يمكن أن يتسبب كل عنصر في تأثيرات مختلفة على الصفحة التالية ، سواء كانت جيدة أو سيئة. ما لم يكن لديك مئات الآلاف من الزوار أسبوعيًا ، فمن المحتمل أنك ستواجه صعوبة في الحصول على نتائج دقيقة.
لذا كن صبورًا واختبر مرحلة واحدة فقط في كل مرة أو صفحات غير متصلة في هذه العملية.
ملاحظة جانبية:
يسمح لك التحويل باستبعاد الأشخاص في تجربة واحدة من رؤية أي تجربة أخرى. لذلك يمكنك نظريًا اختبار دورة المبيعات الكاملة ثم مشاهدة التحكم في الصفحات الأخرى فقط.
رقم 27. الترجيح غير المتكافئ لحركة المرور
لا يهم إذا كنت تقوم بإجراء اختبار A / B أو A / B / n أو اختبار متعدد المتغيرات. تحتاج إلى تخصيص حجم حركة مرور متساوٍ لكل إصدار حتى تتمكن من الحصول على قياس دقيق.
قم بإعدادهم ليكونوا متساويين من البداية. ستتيح لك معظم الأدوات القيام بذلك.
أخطاء اختبار A / B الشائعة التي يمكنك القيام بها أثناء الاختبار
رقم 28. عدم الجري لفترة كافية للحصول على نتائج دقيقة
هناك 3 عوامل مهمة يجب مراعاتها عند الرغبة في الاختبار والحصول على نتائج دقيقة:
- دلالة إحصائية،
- دورة المبيعات و
- حجم العينة.
لذلك دعونا نكسرها.
ينتهي معظم الأشخاص من الاختبارات بمجرد أن تخبرهم أداة الاختبار الخاصة بهم أن إحدى النتائج أفضل من الأخرى وأن النتيجة ذات دلالة إحصائية ، أي إذا استمر الاختبار في الأداء بهذا الشكل ، فهذا فائز واضح.
الشيء هو أنه يمكنك أن تضغط على "stat sig" بسرعة كبيرة أحيانًا بكمية قليلة من حركة المرور. تحدث جميع التحويلات بشكل عشوائي على صفحة واحدة ولا تحدث أي تحويلات على الصفحة الأخرى.
لن تبقى دائمًا على هذا النحو. يمكن أن يكون الاختبار قد بدأ ، إنه يوم الدفع وحصلت على مجموعة من المبيعات في ذلك اليوم.
هذا هو السبب في أننا بحاجة إلى أخذ دورة المبيعات في الاعتبار. يمكن أن تتقلب المبيعات وحركة المرور حسب يوم الأسبوع أو الشهر. للحصول على تمثيل أكثر دقة لكيفية إجراء اختبارك ، من الأفضل أن تجري ما بين 2 إلى 4 أسابيع.
أخيرًا ، لديك حجم العينة.
إذا كنت تجري اختبارك لمدة شهر ، فمن المحتمل أن تحصل على عدد كافٍ من الزيارات للحصول على نتائج دقيقة. قليل جدًا ولن يكون الاختبار قادرًا على منحك مستوى ثقة بأنه سيعمل كما ينبغي.
كقاعدة عامة ،
- احصل على تصنيف ثقة بنسبة 95٪.
- اركض لمدة شهر.
- اكتشف حجم العينة الذي تحتاجه مقدمًا ولا توقف الاختبار حتى يتم الوصول إليه أو تحصل على نتيجة مذهلة تثبت دون أدنى شك أن لديك فائزًا.
# 29. مراقبة طائرات الهليكوبتر / اختلاس النظر
Peeking هو مصطلح يستخدم لوصف عندما يقوم المختبرين بإلقاء نظرة على اختبارهم لمعرفة كيفية أدائه.
من الناحية المثالية ، لا نريد أبدًا إلقاء نظرة على اختبارنا بمجرد تشغيله ، ولا نتخذ قرارًا بشأنه أبدًا حتى تنتهي دورة كاملة ، مع حجم العينة الصحيح ويصل إلى دلالة إحصائية.
ومع ذلك ... ماذا لو لم يتم إجراء الاختبار؟
ماذا لو تم كسر شيء ما؟
حسنًا ، في هذه الحالة ، لا تريد حقًا الانتظار لمدة شهر لترى أنه مكسور ، أليس كذلك؟ لهذا السبب أتحقق دائمًا لمعرفة ما إذا كان الاختبار يحصل على نتائج في التحكم والتباين ، بعد 24 ساعة من تعيينه للتشغيل.
إذا استطعت أن أرى أنهم يتلقون زيارات ويحصلون على نقرات / تحويلات ، فأنا أترك الأمر وأتركه يقوم بعمله. لا أتخذ قرارات حتى ينتهي الاختبار.
# 30. عدم تتبع ملاحظات المستخدم (مهم بشكل خاص إذا كان الاختبار يؤثر على إجراء مباشر وفوري)
لنفترض أن الاختبار هو الحصول على نقرات وحركة المرور موزعة ، لذلك يبدو * أنه يعمل ، ولكن فجأة تبدأ في تلقي تقارير تفيد بأن الأشخاص لا يمكنهم ملء نموذج المبيعات. (أو الأفضل من ذلك ، تلقيت تنبيهًا آليًا بأن مقياس الدرابزين قد انخفض إلى ما دون المستويات المقبولة.)
حسنًا ، يجب أن تكون فكرتك الأولى هي أن شيئًا ما قد تم كسره.
ليس دائما. قد تحصل على نقرات من جمهور لا يتناسب مع عرضك ، ولكن في حالة حدوث ذلك فقط ، فإن الأمر يستحق التحقق من هذا النموذج.
إذا تم كسره ، فقم بإصلاحه وإعادة التشغيل.
رقم 31. إجراء التغييرات في منتصف الاختبار
قد يكون الأمر واضحًا من تلك النقاط القليلة الماضية ، لكننا لا نريد أبدًا إجراء أي تغييرات على الاختبار بمجرد نشره.
بالتأكيد ، قد ينكسر شيء ما ، لكن هذا هو التغيير الوحيد الذي يجب أن نجريه على الإطلاق. نحن لا نغير التصميم ولا ننسخ ولا أي شيء.
إذا كان الاختبار يعمل ، فاتركه قيد التشغيل ودع البيانات تقرر ما ينجح.
رقم 32. تغيير النسبة المئوية لتخصيص حركة المرور في منتصف الاختبار أو إزالة الأداء الضعيف
تمامًا كما أننا لا نغير الصفحات التي يتم اختبارها ، فإننا لا نزيل أي اختلافات أو نغير توزيع حركة المرور في منتصف الاختبار أيضًا.
لماذا ا؟
لنفترض أنك تجري اختبار A / B / n باستخدام عنصر تحكم و 3 أشكال مختلفة. تبدأ الاختبار وبعد أسبوع تتسلل نظرة خاطفة وتلاحظ أن نسختين تعملان بشكل جيد وأن أحدهما يعمل بشكل سيء.
الآن سيكون من المغري إيقاف تشغيل التباين "الخاسر" وإعادة توزيع حركة المرور بين المتغيرات الأخرى ، أليس كذلك؟ هيك ... قد ترغب في الحصول على 25٪ إضافية من حركة المرور وإرسالها فقط إلى صاحب الأداء الأفضل ، ولكن لا تفعل ذلك.
لماذا ا؟
لن يؤثر إعادة التوزيع هذا على أداء الاختبار فحسب ، بل يمكن أن يؤثر بشكل مباشر على النتائج وكيفية ظهورها في أداة إعداد التقارير.
سيحتاج جميع المستخدمين الذين تم تجميعهم مسبقًا في المتغير الذي تمت إزالته إلى إعادة تخصيصهم لمتغير وسيشاهدون صفحة ويب تم تغييرها في فترة زمنية قصيرة ، مما قد يؤثر على سلوكهم وخياراتهم اللاحقة.
هذا هو السبب في عدم تغيير حركة المرور أو إيقاف تشغيل الاختلافات في منتصف الطريق. (ولماذا أيضًا لا يجب أن تختلس النظر!)
رقم 33. عدم التوقف عن الاختبار عندما تحصل على نتائج دقيقة
في بعض الأحيان نسيت التوقف عن الاختبار!
يستمر في العمل وإطعام 50٪ من جمهورك إلى صفحة أضعف و 50٪ للفائز. أُووبس!
لحسن الحظ ، يمكن إعداد أدوات مثل Convert Experiences لإيقاف الحملة وإظهار الفائز تلقائيًا بمجرد أن تصل إلى معايير معينة (مثل حجم العينة ، و stat sig ، والتحويلات ، والإطار الزمني).
# 34. يتم استثمارها عاطفيًا في فقدان الاختلافات
بصفتنا مختبرين ، يجب أن نكون محايدين. ومع ذلك ، في بعض الأحيان ، قد يكون لديك تصميم أو فكرة معينة تحبها تمامًا وتقتنع بأنه كان من المفترض أن تفوز بها ، لذلك تستمر في تمديد الاختبار لفترة أطول وأطول لمعرفة ما إذا كان سيمضي قدمًا.
اسحب الضمادة.
قد تكون لديك فكرة جيدة تحتاج فقط إلى التحسين ، لكن لا يمكنك فعل ذلك حتى تنتهي من الاختبار الحالي.
# 35. إجراء الاختبارات لفترة طويلة جدًا وتوقف التتبع
إليك قضية تلوث عينة أخرى محتملة.
إذا أجريت اختبارًا لمدة تزيد عن 4 أسابيع ، فمن المحتمل أن ترى ملفات تعريف الارتباط الخاصة بالمستخدمين تتراجع. يمكن أن يتسبب هذا في نقص في تتبع الأحداث ولكنها قد تعود وتلوث بيانات العينة مرة أخرى.
# 36. عدم استخدام أداة تسمح لك بإيقاف / تنفيذ الاختبار!
مشكلة أخرى نادرة.
تصر بعض برامج الاختبار على إنشاء اختبارات مضمنة. أي مطور ومهندس يبني الحملة من الصفر.
ومع ذلك ، ليس الأمر رائعًا ، عندما ينتهي الاختبار وتحتاج إلى انتظار نفس المطور لإيقاف تشغيله وتثبيت الإصدار الفائز. هذا ليس محبطًا فحسب ، بل يمكن أن يبطئ بشكل خطير عدد الاختبارات التي يمكنك إجراؤها وحتى عائد الاستثمار للصفحة أثناء انتظار نشرها.
أخطاء اختبار A / B الشائعة التي يمكنك القيام بها بعد الانتهاء من الاختبار
# 37. الاستسلام بعد اختبار واحد!
9 من أصل 10 اختبارات عادة ما تكون فاشلة.
هذا يعني أنك بحاجة إلى إجراء 10 اختبارات للحصول على هذا الفائز. يتطلب الأمر مجهودًا ولكنه دائمًا يستحق كل هذا العناء ، لذلك لا تتوقف بعد حملة واحدة!
رقم 38. التخلي عن فرضية جيدة قبل اختبار جميع إصداراتها
يمكن أن يعني الفشل ببساطة أن فرضيتك صحيحة ولكن يجب تنفيذها بشكل أفضل.
جرب طرقًا جديدة ، تصميمات جديدة ، تخطيط جديد ، صور جديدة ، صور رمزية جديدة ، لغة جديدة. لديك فكرة ومعرفة ما إذا كان يمكنك تنفيذها بشكل أفضل.
استغرق الأمر CXL 21 تكرارًا لتحسين صفحة عملائهم ، لكن الأمر أخذهم من معدل التحويل من 12.1٪ إلى 79.3٪.
رقم 39. توقع انتصارات ضخمة في كل وقت
حقيقة الأمر هي أنك قد تحصل على ربح ضخم واحد فقط من كل 10 حملات فائزة أو أكثر.
لابأس. نستمر في الاختبار ونواصل التحسين ، لأنه حتى زيادة المركبات بنسبة 1٪ بمرور الوقت. حسِّنها وحصل عليها إلى 2٪ وقد ضاعفت الآن فعاليتها.
ما هي أنواع الاختبارات التي تحقق أفضل النتائج؟
الحقيقة هي أن التجارب المختلفة لها تأثيرات متباينة. وفقًا لبحث Jakub Linowski من أكثر من 300 اختبار ، تميل تجارب التخطيط إلى نتائج أفضل.
ما هو نوع الشاشة الأكثر صعوبة في التحسين؟ يكشف نفس البحث عن شاشات تسجيل الخروج (بمتوسط تأثير + 0.4٪ من 25 اختبارًا).
# 40. عدم التحقق من الصلاحية بعد الاختبار
لذلك انتهى الاختبار. لقد ركضت لفترة كافية ورأيت النتائج وحصلت على Stat sig ولكن هل يمكنك الوثوق في دقة البيانات؟
يمكن أن يكون هناك شيء ما تم كسره في منتصف الطريق من خلال الاختبار. لا يضر التحقق.
رقم 41. عدم قراءة النتائج بشكل صحيح
ماذا تخبرك نتائجك حقًا؟ الفشل في قراءتها بشكل صحيح يمكن أن يؤدي بسهولة إلى فائز محتمل ويبدو وكأنه فشل كامل.
- تعمق في تحليلاتك.
- انظر إلى أي بيانات نوعية لديك.
ما الذي نجح وما الذي لم ينجح؟ لماذا حصل هذا؟
كلما فهمت نتائجك ، كان ذلك أفضل.
رقم 42. عدم النظر في النتائج حسب المقطع
من المفيد دائمًا الغوص أعمق قليلاً.
على سبيل المثال ، قد يبدو أن أحد المتغيرات الجديدة سيئ التحويل ، ولكن على الجوّال ، زادت التحويلات بنسبة 40٪!
يمكنك فقط اكتشاف ذلك من خلال تقسيمه إلى نتائجك. انظر إلى الأجهزة المستخدمة والنتائج هناك. قد تجد بعض الأفكار القيمة!
فقط كن على دراية بأهمية حجم الجزء الخاص بك. ربما لم يكن لديك عدد كافٍ من الزيارات لكل شريحة لتثق بها تمامًا ، ولكن يمكنك دائمًا تشغيل اختبار للجوال فقط (أو أي قناة كانت) ومعرفة كيفية أدائها.
رقم 43. عدم التعلم من النتائج
يمكن أن يمنحك فقدان الاختبارات نظرة ثاقبة على المكان الذي تحتاج إلى تحسينه أو إجراء المزيد من البحث. الشيء الأكثر إزعاجًا مثل CRO هو رؤية العملاء الذين يرفضون التعلم مما رأوه للتو. لديهم البيانات لكنهم لا يستخدمونها ...
رقم 44. أخذ الخاسرين
أو ما هو أسوأ ، فهم يأخذون الاختلاف الخاسر.
ربما يفضلون التصميم ومعدل التحويل مختلف بنسبة 1٪ فقط ولكن بمرور الوقت تتراكم هذه التأثيرات. خذ تلك المكاسب الصغيرة!
# 45. عدم اتخاذ إجراءات بشأن النتائج
أسوأ مرة أخرى؟
الحصول على الفوز ولكن عدم تنفيذه! لديهم البيانات ولا يفعلون شيئًا بها. لا تغيير ولا بصيرة ولا اختبارات جديدة.
رقم 46. عدم التكرار والتحسين على الانتصارات
في بعض الأحيان يمكنك الحصول على مصعد ولكن هناك المزيد مما يمكنك الحصول عليه. كما قلنا سابقًا ، من النادر جدًا أن يمنحك كل فوز دفعة من رقمين.
لكن هذا لا يعني أنه لا يمكنك الوصول إلى هناك من خلال تشغيل التكرارات والتحسينات الجديدة وشق طريقك بنسبة 1٪ في كل مرة.
كل ذلك يضيف إلى حد كبير لذا استمر في التحسن!
رقم 47. عدم مشاركة النتائج الفائزة في مناطق أو أقسام أخرى
واحدة من أكبر الأشياء التي نراها مع فرق CRO الناضجة / الناجحة للغاية هي أنها تشارك مكاسبها ونتائجها مع الأقسام الأخرى في الشركة.
وهذا يعطي الإدارات الأخرى رؤى ثاقبة حول كيفية تحسينها أيضًا.
- العثور على بعض نسخة صفحة المبيعات الفائزة؟ ضع إطارًا مسبقًا في الإعلانات التي تنقلهم إلى الصفحة!
- العثور على نمط مغناطيس الرصاص الذي يعمل بشكل رائع؟ اختبره عبر الموقع بأكمله.
رقم 48. عدم اختبار هذه التغييرات في الأقسام الأخرى
وهذا هو المفتاح هنا. حتى إذا كنت تشارك الأفكار مع الأقسام الأخرى ، فلا يزال يتعين عليك اختبارها لمعرفة كيفية عملها.
قد يؤدي تصميم الأسلوب الذي يعطي قوة في منطقة ما إلى انخفاض في مناطق أخرى ، لذا اختبر دائمًا!
# 49. الكثير من التكرار على صفحة واحدة
نسمي هذا ضرب "الحد الأقصى المحلي".
استقرت الصفحة التي تجري الاختبارات عليها ولا يبدو أنك تحصل على المزيد من التحسينات منها.
يمكنك تجربة إعادة التصميم الجذري ، لكن ماذا بعد ذلك؟
ما عليك سوى الانتقال إلى صفحة أخرى في عملية البيع وتحسين ذلك. (ومن المفارقات أن هذا يمكن أن يثبت في الواقع أنه يعطي عائد استثمار أعلى على أي حال).
يمكن أن يكون تحويل صفحة المبيعات من 10٪ إلى 11٪ أقل أهمية من نقل الصفحة التي تدفع حركة المرور إليها من 2٪ إلى 5٪ ، حيث ستزيد من ضعف حركة المرور في تلك الصفحة السابقة.
إذا كنت في شك ، فابحث عن الاختبار التالي الأكثر أهمية في قائمتك وابدأ في التحسين هناك. قد تجد أنه يساعد في التحويل على تلك الصفحة العالقة على أي حال ، وذلك ببساطة عن طريق تزويدها بفرص أفضل.
# 50. لا تختبر ما يكفي!
تستغرق الاختبارات وقتًا وهناك الكثير فقط مما يمكننا إجراؤه مرة واحدة.
فماذا يمكننا أن نفعل؟
ما عليك سوى تقليل وقت التوقف بين الاختبارات!
أكمل الاختبار ، وحلل النتيجة ، ثم كرر أو شغّل اختبارًا مختلفًا. (من الناحية المثالية ، اجعلهم في قائمة الانتظار وعلى استعداد للذهاب).
بهذه الطريقة سترى عائدًا أعلى بكثير لاستثمار الوقت.
رقم 51. عدم توثيق الاختبارات
عادةً ما تمتلك فرق CRO الناضجة قاعدة بيانات داخلية للاختبارات ، والتي تتضمن بيانات حول الصفحة ، والفرضية ، وما الذي نجح ، وما الذي لم ينجح ، والمصعد ، وما إلى ذلك.
لا يمكنك التعلم من الاختبارات القديمة فحسب ، بل يمكن أيضًا أن يمنعك من إعادة إجراء الاختبار عن طريق الصدفة.
رقم 52. نسيان الإيجابيات الكاذبة وعدم إعادة التحقق من حملات الرفع الضخمة
في بعض الأحيان تكون النتيجة جيدة جدًا لدرجة يصعب تصديقها. إما أنه تم إعداد شيء ما أو تسجيله بشكل خاطئ ، أو يحدث هذا فقط ليكون اختبارًا واحدًا من كل 20 اختبارًا يعطي نتيجة إيجابية خاطئة.
ذلك ما يمكن أن تفعله؟
ما عليك سوى إعادة إجراء الاختبار ، وتعيين مستوى ثقة مرتفع ، وتأكد من تشغيله لفترة كافية.
رقم 53. لا تتبع نتائج downline
عند تتبع نتائج الاختبار ، من المهم أيضًا أن تتذكر هدفك النهائي وتتبع مقاييس downline قبل اتخاذ قرار بشأن الفائز.
قد يحصل المتغير الجديد تقنيًا على عدد أقل من النقرات من خلاله ولكنه يجذب المزيد من المبيعات من الأشخاص الذين ينقرون.
في هذه الحالة ، ستكون هذه الصفحة في الواقع أكثر ربحية عند تشغيلها ، على افتراض أن حركة المرور التي تنقر عليها تستمر في التحويل أيضًا ...
# 54. فشل في حساب تأثيرات الأسبقية والجدة ، والتي قد تؤدي إلى تحيز نتائج العلاج
لنفترض أنك لا تستهدف زوارًا جددًا بإجراء تغيير فحسب ، بل تستهدف جميع الزيارات.
ما زلنا نقسمهم إلى شرائح ، لذا يرى 50٪ النسخة الأصلية و 50٪ يشاهدون الإصدار الجديد ، لكننا نسمح للزوار السابقين بالدخول إلى الحملة. هذا يعني أن الأشخاص الذين شاهدوا موقعك من قبل ، قرأوا المحتوى الخاص بك ، وشاهدوا العبارات التي تحث المستخدم على اتخاذ إجراء ، وما إلى ذلك.
أيضًا ، طوال مدة الحملة ، يرون فقط نسختهم التجريبية المحددة.
عندما تقوم بإجراء تغيير جديد ، يمكن أن يكون له تأثير جديد على جمهورك السابق.
ربما يرون نفس CTA طوال الوقت ويتجاهلونها الآن ، أليس كذلك؟ في هذه الحالة ، يمكن لزر أو تصميم جديد للحث على اتخاذ إجراء أن يرى في الواقع زيادة من الزوار السابقين ، ليس لأنهم يريدون ذلك أكثر الآن ، ولكن لأنه جديد ومثير للاهتمام.
في بعض الأحيان ، قد تحصل على المزيد من النقرات لأن التخطيط قد تغير وهم يستكشفون التصميم.
لهذا السبب ، ستحصل عادةً على دفعة أولية استجابةً لذلك ، ولكنها تتراجع بمرور الوقت.
المفتاح عند إجراء اختبارك هو تقسيم الجمهور بعد ذلك ومعرفة ما إذا كان الزوار الجدد يستجيبون بالإضافة إلى الزوار القدامى.
إذا كان أقل من ذلك بكثير ، فقد يكون تأثيرًا جديدًا مع نقر المستخدمين القدامى. إذا كان على نفس المستوى ، فقد يكون لديك فائز جديد بين يديك.
في كلتا الحالتين ، دعها تعمل للدورة الكاملة وتوازن.
# 55. تغييرات فترة النظر الجارية
شيء آخر يجب مراعاته عند الاختبار هو أي متغير قد يغير فترة تفكير الجمهور.
ماذا اقصد؟
لنفترض أنك عادة لا تحصل على مبيعات فورية. يمكن أن يكون العملاء المتوقعون في دورة مبيعات مدتها 30 يومًا أو حتى أطول.
إذا كنت تختبر عبارة تحث المستخدم على اتخاذ إجراء والتي تؤثر بشكل مباشر على وقتهم في التفكير والشراء ، فسيؤدي ذلك إلى تحريف نتائجك. لسبب واحد ، قد تحصل سيطرتك على مبيعات ولكنك تكون خارج فترة الاختبار ، لذلك تفوتك.
سيناريو آخر هو إذا كان لديك CTA يقدم صفقة ، ونقطة سعر لأي شيء آخر تجعلهم يرغبون في اتخاذ إجراء الآن ، فسيؤدي هذا دائمًا إلى تحريف نتائجك لجعل هذا الإصدار يبدو وكأنه يتم تحويله بشكل أفضل بكثير.
ضع ذلك في اعتبارك واطلع على تحليلاتك أثناء الاختبار وبعده للتأكد.
رقم 56. عدم إعادة الاختبار بعد X مرة
لا يتعلق الأمر بصفحة معينة أو خطأ اختبار ، بل يتعلق أكثر باختبار الفلسفة.
نعم ، قد يكون لديك صفحة رائعة ، ونعم ، ربما تكون قد أجريت 20 تكرارًا عليها للوصول بها إلى ما هي عليه اليوم.
الشيء هو أنه في غضون بضع سنوات قد تحتاج إلى إصلاح تلك الصفحة بأكملها مرة أخرى. تتغير البيئات واللغة والمصطلحات المستخدمة ، يمكن تعديل المنتج.
كن دائمًا على استعداد للعودة إلى حملة قديمة وإعادة الاختبار. (سبب آخر يجعل وجود مستودع اختبار يعمل بشكل رائع.)
رقم 57. فقط اختبار المسار وليس المنتج
نركز جميعًا تقريبًا على مسار البيع واختبار ذلك. لكن الحقيقة هي أن المنتج يمكن أيضًا اختباره وتحسينه A / B ويمكنه أيضًا تقديم رفع أعلى.
فكر في iPhone.
اختبرت Apple موقعها على الويب وحسنت عليه ، لكن التكرارات والتحسينات الخاصة بالمنتج هي التي تستمر في دفع المزيد من الارتفاع.
الآن ، قد لا يكون لديك منتج مادي. قد يكون لديك برنامج أو عرض رقمي ، ولكن معرفة المزيد عن احتياجات جمهورك واختبار ذلك ، ثم إعادته إلى صفحة المبيعات الخاصة بك يمكن أن يكون ضخمًا من حيث الارتفاع.
استنتاج
لذلك هناك لديك. 57 من الأخطاء الشائعة وغير الشائعة في اختبار A / B التي نراها وكيف يمكنك تجنبها.
يمكنك استخدام هذا الدليل لمساعدتك في تجنب هذه المشكلات لجميع الحملات المستقبلية.