ดิ้นรนเพื่อพิสูจน์ ROI ของการทดสอบ A/B หรือไม่ ให้เราช่วย
เผยแพร่แล้ว: 2020-10-29มูลค่าของโปรแกรมทดสอบ A/B ของคุณคืออะไร? มีประโยชน์อะไรกับบริษัทของคุณบ้าง?
คุณรู้อยู่แล้วว่าการทดสอบ A/B ช่วยเพิ่มประสิทธิภาพอัตราการแปลงและเพิ่มรายได้ แต่คุณจะพิสูจน์ได้อย่างไรว่าการทดสอบ A/B ส่งผลต่อกำไรของคุณ?
ในคำพูดของแมตต์ เกอร์ชอฟฟ์
การทดสอบ A/B สามารถลดการเปลี่ยนแปลงพฤติกรรมที่นำไปสู่อันตรายหรือการสูญเสียได้
แต่สิ่งเหล่านี้อาจไม่สร้างความประทับใจให้ C-suite ในบริษัทของคุณ ที่ต้องการตัวเลขที่จับต้องได้ซึ่งแสดง ROI ของโปรแกรมการทดสอบ A/B ของคุณ การพิสูจน์ประโยชน์ของการทดสอบ A/B จะทำให้คุณได้รับการสนับสนุนจากผู้บริหารในช่วงเวลาแห่งการเปลี่ยนแปลง เช่นตอนนี้
นี่คือวิธีพิสูจน์คุณค่าของโปรแกรมการทดลองของคุณ!
การคำนวณ ROI ของโปรแกรมการทดสอบ A/B ของคุณ
เมื่อใช้รายได้ คุณสามารถคำนวณ ROI ของโปรแกรมการทดสอบ A/B ของคุณได้ ทีมงาน Peak Activity มีสูตรที่ดีในการคำนวณ ROI ของคุณ ต่อไปนี้คือเมตริกบางส่วนที่คุณควรรู้เกี่ยวกับ:
รายได้ต่อเซสชัน (RPS)
คำนวณ RPS สำหรับทั้งการควบคุมและตัวแปรของคุณ นี่คือรายได้ทั้งหมดหารด้วยจำนวนเซสชันทั้งหมดสำหรับการควบคุมและตัวแปรของคุณ
RPS = (รายได้รวม ÷ จำนวนเซสชันทั้งหมด)
ยอดขายที่เพิ่มขึ้นโดยเฉลี่ย
ซึ่งจะเกี่ยวข้องกับ RPS ของทั้งการควบคุมและตัวแปรของคุณ เมตริกนี้ต้องมีนัยสำคัญทางสถิติ
การเพิ่มยอดขายเฉลี่ย = (RPS ของตัวแปรของคุณ – RPS ของการควบคุมของคุณ) – 1
ค่าใช้จ่ายในการดำเนินการทดสอบ A/B จริงของคุณ
นี่คือรายได้จากการควบคุมคูณด้วยยอดขายที่เพิ่มขึ้นโดยเฉลี่ย
ต้นทุนการทดสอบ A/B = (ควบคุมรายได้ * ยอดขายที่เพิ่มขึ้นโดยเฉลี่ย)
ตัวคูณสำหรับ Traffic Split
ขั้นแรก คำนวณเซสชันทั้งหมดโดยเพิ่มเซสชันทั้งหมดสำหรับตัวควบคุมและตัวแปร จากนั้น ใช้ตัวเลขนั้นเพื่อคำนวณการกระจายการเข้าชมสำหรับตัวควบคุมและตัวแปร
เซสชันทั้งหมด = ( เซสชันการควบคุม + เซสชันตัวแปร)
การกระจายการรับส่งข้อมูลสำหรับการควบคุม = (ควบคุมการรับส่งข้อมูล ÷ เซสชันทั้งหมด) * 100
การกระจายปริมาณการใช้งานสำหรับตัวแปร = (ปริมาณการใช้ข้อมูลตัวแปร ÷ จำนวนเซสชันทั้งหมด) * 100
มูลค่าการเปลี่ยนแปลงตัวแปร
ซึ่งคำนวณโดยการคูณต้นทุนของการทดสอบ A/B กับ 2 เนื่องจากการทดสอบ A/B มาตรฐานมักจะมีการรักษาสองวิธี ตัวเลขนี้แตกต่างกันสำหรับการทดสอบหลายตัวแปรที่คุณมีการรักษาหลายอย่าง
มูลค่าของการเปลี่ยนแปลง = (ค่าใช้จ่ายในการดำเนินการทดสอบ * 2)
มูลค่าที่ได้รับจากระยะเวลาการทดสอบ
โดยพื้นฐานแล้วนี่คือค่าใช้จ่ายในการดำเนินการทดสอบ A/B ที่ลบออกจากมูลค่าของการเปลี่ยนแปลงตัวแปร
มูลค่าของระยะเวลาการทดสอบ = (ต้นทุนการทดสอบการทำงาน – มูลค่าการเปลี่ยนแปลง)
คาดการณ์รายได้ที่เพิ่มขึ้นหากตัวแปรใช้งานได้
หากต้องการค้นหายอดขายเฉลี่ยต่อวัน ให้แบ่งมูลค่าของการเปลี่ยนแปลงในตัวเลือกสินค้าด้วยจำนวนวันที่ทำการทดสอบ
ยอดขายเฉลี่ยต่อวัน = (มูลค่าของการเปลี่ยนแปลงตัวแปร ÷ ระยะเวลาทดสอบ)
การคาดการณ์รายได้จะเป็นยอดขายเฉลี่ยต่อวัน คูณด้วยจำนวนวันในช่วงเวลาคาดการณ์ของคุณ อย่าลืมคาดการณ์ให้มากพอว่าผลกระทบของฤดูกาล แคมเปญการขาย พฤติกรรมของลูกค้า ฯลฯ จะลดลง
มูลค่าโปรแกรมการทดสอบ A/B โดยรวม
ตอนนี้คุณสามารถคำนวณ ROI ของโปรแกรมการทดสอบ A/B ของคุณได้:
โปรแกรมทดสอบ A/B = (การทดสอบที่ชนะ + การทดสอบที่แพ้ + ต้นทุน)
หมายเหตุ: การทดสอบที่แพ้ต้องการเพียง 3 ขั้นตอนแรก ในขณะที่การทดสอบที่แพ้ต้องมีขั้นตอนทั้งหมด
เราได้ขอให้บริษัทหลายแห่งที่มีโปรแกรมการทดสอบ A/B ที่ครบกำหนดเพื่อแบ่งปันว่าพวกเขาคำนวณ ROI ของการทดสอบอย่างไร
นี่คือสิ่งที่พวกเขากล่าวว่า
Ian Kelly รองประธานฝ่ายปฏิบัติการของ NuLeaf Naturals กล่าวว่า:
ขั้นตอนแรกคือการคิดต้นทุนรวมของการทดสอบ ซึ่งรวมถึงต้นทุนของเครื่องมือที่ใช้สำหรับการทดสอบ A/B และเวลาที่ใช้ในการดำเนินการทดสอบ มูลค่าของเวลาจะเท่ากับการคูณเวลาทั้งหมดของพนักงานในโครงการด้วยเงินเดือนรายชั่วโมง นอกจากนี้ ให้เพิ่มค่าเสียโอกาสในกรณีที่ผลการทดสอบมี Conversion น้อยลง ค่าเสียโอกาสคือเงินพิเศษที่คุณจะได้รับหากคุณไม่ได้ทำการทดสอบ
ขั้นตอนที่สองคือการมีช่องทางที่ชัดเจนซึ่งสิ้นสุดในการขายผลิตภัณฑ์ EveryTrack ทุกย่างก้าวของช่องทาง ใช้เครื่องมือเช่น Mixpanel เพื่อทำสิ่งนี้ให้เสร็จ ในการทดสอบ A/B จะมีช่องทางเดียวกันสองรูปแบบ การเปลี่ยนแปลงสามารถกำหนดกลุ่มเป้าหมาย สีที่ใช้ หรือแม้แต่สำเนาที่ใช้ ควรติดตามทั้งสองรูปแบบแยกกันและเปรียบเทียบ
เมื่อข้อมูลทั้งหมดข้างต้นพร้อมใช้งาน จะเป็นการง่ายมากที่จะพิสูจน์ ROI ของโปรแกรมการทดสอบ A/B ของคุณ จะดีกว่าในการคำนวณ ROI เมื่อสิ้นสุดแต่ละไตรมาส การทดสอบบางอย่างจะล้มเหลวในขณะที่บางส่วนจะประสบความสำเร็จ รายได้โดยรวมที่เพิ่มขึ้นควรมากกว่าต้นทุนของโปรแกรมการทดสอบ A/B ของคุณ หากไม่เป็นเช่นนั้น ให้พิจารณากลยุทธ์การทดสอบของคุณอีกครั้ง
George Pitchkhadze, CMO ของ Thrive Cuisine กล่าวถึงกระบวนการของบริษัทของเขาด้านล่าง:
คำนวณต้นทุนการทดสอบของคุณ
ในการคำนวณ ROI คุณจำเป็นต้องทราบต้นทุนของคุณ ซึ่งควรรวมถึงต้นทุนทางตรง และ ทางอ้อม เช่น
- ต้นทุนซอฟต์แวร์/บริการที่ใช้
- ค่าชั่วโมงการทำงานที่ใช้ไป
- ค่าใช้จ่ายโดยตรง (เช่น ค่าเช่ารายชื่ออีเมลหรือโฆษณา PPC)
ตัวอย่างเช่น สมมติว่าฉันกำลังทดสอบ A/B แยกสองแพลตฟอร์มโฆษณา ฉันควรดูค่าโฆษณา PPC ของเรา — แต่ยังรวมถึงจำนวนชั่วโมงที่ใช้ในการเรียกใช้ชุดโฆษณาแต่ละชุดและราคาของบริการวิเคราะห์ที่เราใช้เพื่อแจ้งโฆษณาของเราด้วย
คำนวณผลตอบแทนของคุณ
ส่วนนี้ตรงไปตรงมา คำนวณผลตอบแทนโดยตรงที่มาจากความพยายาม สิ่งสำคัญที่นี่คือการใช้เครื่องมือวิเคราะห์ที่ทันสมัยเพื่อเชื่อมโยงการขายและรายได้กับสิ่งต่างๆ เช่น อีเมลที่ส่ง ชุดโฆษณาบน FB/Google เป็นต้น
คำนวณ ROI
เมื่อคุณมีแนวคิดที่ถูกต้องเกี่ยวกับผลตอบแทน และ การลงทุนแล้ว คุณสามารถคำนวณ ROI ได้อย่างง่ายดาย เพียงจำไว้ว่า: คำนวณต้นทุนของการทดสอบอย่างละเอียดและเชื่อมต่อผลตอบแทนกับแคมเปญและข้อความเฉพาะที่ใช้งาน
วิธีอื่นๆ ในการวัดผลกระทบของการทดสอบ A/B
มีวิธีอื่นในการวัด ROI ของโปรแกรมการทดสอบ A/B ของคุณ
Dionysia Kontotasiou หัวหน้าฝ่ายการรวมระบบ เจ้าหน้าที่ความเป็นส่วนตัวของข้อมูลและความปลอดภัยของข้อมูล ได้แบ่งปันวิธีการอีก 4 วิธีเพื่อวัดผลกระทบของการทดสอบ A/B ของคุณ
1. มีการทดลองกี่การทดลอง?
หากการทดลองของบริษัทในเปอร์เซ็นต์ที่สูงนั้นไม่สามารถสรุปได้ อาจเป็นสัญญาณว่าพวกเขากำลังตั้งค่าการทดสอบอย่างไม่ถูกต้อง บางทีพวกเขากำลังเขียนสมมติฐานที่คลุมเครือ เช่น " การเปลี่ยนแปลงนี้จะทำให้แอปดีขึ้น " แทนที่จะเป็นสมมติฐานที่ชัดเจน เช่น " การเปลี่ยนแปลงนี้จะเพิ่มการลงชื่อสมัครใช้รายเดือน 5 เปอร์เซ็นต์ "
สมมติฐานของคุณให้ผลลัพธ์ที่สรุปไม่ได้หรือไม่? ใช้ตัวสร้างสมมติฐานของ Convert เพื่อกำหนดสมมติฐานที่เชื่อถือได้ทุกครั้ง
2. คำติชมของทีมผลิตภัณฑ์
ทีมผลิตภัณฑ์มีข้อมูลเชิงลึกและข้อมูลผู้ใช้มากกว่าเดิมหรือไม่ การเปิดตัวผลิตภัณฑ์ของพวกเขาประสบความสำเร็จมากขึ้นหรือไม่? ถ้าใช่ นี่เป็นสัญญาณที่ดีว่าการทดสอบ A/B ที่กำลังดำเนินการนั้นประสบความสำเร็จ
3. ความเร็วทดลอง
ความเร็วการทดสอบคือการวัดจำนวนการทดสอบที่คุณทำในช่วงเวลาหนึ่ง นี่คือ เกณฑ์มาตรฐานการปฏิบัติงาน เพื่อวัดว่าคุณสามารถออกแบบ พัฒนา ทดสอบ วิเคราะห์ และเปิดใช้การทดสอบได้เร็วเพียงใด แม้ว่าการทดสอบที่ใหญ่กว่าบางรายการจะใช้เวลานานกว่าและมีความสำคัญในการสร้างผลกระทบที่ใหญ่กว่าต่อผลลัพธ์ แต่ ' การชนะอย่างรวดเร็ว ' ที่น้อยกว่าก็ไม่ควรลดราคา
4. ประมาณการกับต้นทุนจริงในการดำเนินโครงการ
ติดตามชั่วโมงหรืองบประมาณที่ใช้กับโปรแกรมของคุณ คุณยังสามารถตรวจสอบ งบประมาณที่คาดการณ์ไว้เทียบกับการใช้จ่ายจริง ในโครงการทดสอบของคุณเพื่อประเมินมูลค่าของโปรแกรมการทดสอบ A/B ของคุณ
หากคุณกำลังใช้ Convert Experiences สำหรับโปรแกรมการทดสอบ A/B ของคุณ คุณจะสามารถเข้าถึงการรายงานที่ซับซ้อน (เช่นในภาพหน้าจอด้านล่าง) ซึ่งรวมถึงเป้าหมายของคุณและประสิทธิภาพของรูปแบบการทดสอบแต่ละรูปแบบ — ดังนั้นคุณจึงไม่เพียงแต่สามารถเพิ่ม ROI ให้สูงสุด แต่ยังพิสูจน์ได้ด้วย!
บทสรุป
คุณค่าของการทดสอบ A/B คือทั้งการหาการปรับปรุงที่นำไปสู่การเพิ่มรายได้หรือมอบประสบการณ์ที่ดีขึ้นให้กับลูกค้าของคุณบนเว็บไซต์ของคุณและลดความเสี่ยงที่อาจเกิดขึ้น การใช้รายได้และการวัดผลอื่นๆ ทำให้คุณสามารถพิสูจน์ ROI ของโปรแกรมการทดสอบ A/B ของคุณกับ C-Suite ในบริษัทของคุณได้อย่างสรุป
จองการสาธิตด้วยการแปลงเพื่อค้นหา
ขอตัวอย่างของคุณ