ดิ้นรนเพื่อพิสูจน์ ROI ของการทดสอบ A/B หรือไม่ ให้เราช่วย

เผยแพร่แล้ว: 2020-10-29
ดิ้นรนเพื่อพิสูจน์ ROI ของการทดสอบ A/B หรือไม่ ให้เราช่วย

มูลค่าของโปรแกรมทดสอบ A/B ของคุณคืออะไร? มีประโยชน์อะไรกับบริษัทของคุณบ้าง?

คุณรู้อยู่แล้วว่าการทดสอบ A/B ช่วยเพิ่มประสิทธิภาพอัตราการแปลงและเพิ่มรายได้ แต่คุณจะพิสูจน์ได้อย่างไรว่าการทดสอบ A/B ส่งผลต่อกำไรของคุณ?

ในคำพูดของแมตต์ เกอร์ชอฟฟ์

การทดสอบ A/B สามารถลดการเปลี่ยนแปลงพฤติกรรมที่นำไปสู่อันตรายหรือการสูญเสียได้

แต่สิ่งเหล่านี้อาจไม่สร้างความประทับใจให้ C-suite ในบริษัทของคุณ ที่ต้องการตัวเลขที่จับต้องได้ซึ่งแสดง ROI ของโปรแกรมการทดสอบ A/B ของคุณ การพิสูจน์ประโยชน์ของการทดสอบ A/B จะทำให้คุณได้รับการสนับสนุนจากผู้บริหารในช่วงเวลาแห่งการเปลี่ยนแปลง เช่นตอนนี้

นี่คือวิธีพิสูจน์คุณค่าของโปรแกรมการทดลองของคุณ!

การคำนวณ ROI ของโปรแกรมการทดสอบ A/B ของคุณ

เมื่อใช้รายได้ คุณสามารถคำนวณ ROI ของโปรแกรมการทดสอบ A/B ของคุณได้ ทีมงาน Peak Activity มีสูตรที่ดีในการคำนวณ ROI ของคุณ ต่อไปนี้คือเมตริกบางส่วนที่คุณควรรู้เกี่ยวกับ:

รายได้ต่อเซสชัน (RPS)

คำนวณ RPS สำหรับทั้งการควบคุมและตัวแปรของคุณ นี่คือรายได้ทั้งหมดหารด้วยจำนวนเซสชันทั้งหมดสำหรับการควบคุมและตัวแปรของคุณ

RPS = (รายได้รวม ÷ จำนวนเซสชันทั้งหมด)

ยอดขายที่เพิ่มขึ้นโดยเฉลี่ย

ซึ่งจะเกี่ยวข้องกับ RPS ของทั้งการควบคุมและตัวแปรของคุณ เมตริกนี้ต้องมีนัยสำคัญทางสถิติ

การเพิ่มยอดขายเฉลี่ย = (RPS ของตัวแปรของคุณ – RPS ของการควบคุมของคุณ) – 1

ค่าใช้จ่ายในการดำเนินการทดสอบ A/B จริงของคุณ

นี่คือรายได้จากการควบคุมคูณด้วยยอดขายที่เพิ่มขึ้นโดยเฉลี่ย

ต้นทุนการทดสอบ A/B = (ควบคุมรายได้ * ยอดขายที่เพิ่มขึ้นโดยเฉลี่ย)

ตัวคูณสำหรับ Traffic Split

ขั้นแรก คำนวณเซสชันทั้งหมดโดยเพิ่มเซสชันทั้งหมดสำหรับตัวควบคุมและตัวแปร จากนั้น ใช้ตัวเลขนั้นเพื่อคำนวณการกระจายการเข้าชมสำหรับตัวควบคุมและตัวแปร

เซสชันทั้งหมด = ( เซสชันการควบคุม + เซสชันตัวแปร)

การกระจายการรับส่งข้อมูลสำหรับการควบคุม = (ควบคุมการรับส่งข้อมูล ÷ เซสชันทั้งหมด) * 100

การกระจายปริมาณการใช้งานสำหรับตัวแปร = (ปริมาณการใช้ข้อมูลตัวแปร ÷ จำนวนเซสชันทั้งหมด) * 100

มูลค่าการเปลี่ยนแปลงตัวแปร

ซึ่งคำนวณโดยการคูณต้นทุนของการทดสอบ A/B กับ 2 เนื่องจากการทดสอบ A/B มาตรฐานมักจะมีการรักษาสองวิธี ตัวเลขนี้แตกต่างกันสำหรับการทดสอบหลายตัวแปรที่คุณมีการรักษาหลายอย่าง

มูลค่าของการเปลี่ยนแปลง = (ค่าใช้จ่ายในการดำเนินการทดสอบ * 2)

มูลค่าที่ได้รับจากระยะเวลาการทดสอบ

โดยพื้นฐานแล้วนี่คือค่าใช้จ่ายในการดำเนินการทดสอบ A/B ที่ลบออกจากมูลค่าของการเปลี่ยนแปลงตัวแปร

มูลค่าของระยะเวลาการทดสอบ = (ต้นทุนการทดสอบการทำงาน – มูลค่าการเปลี่ยนแปลง)

คาดการณ์รายได้ที่เพิ่มขึ้นหากตัวแปรใช้งานได้

หากต้องการค้นหายอดขายเฉลี่ยต่อวัน ให้แบ่งมูลค่าของการเปลี่ยนแปลงในตัวเลือกสินค้าด้วยจำนวนวันที่ทำการทดสอบ

ยอดขายเฉลี่ยต่อวัน = (มูลค่าของการเปลี่ยนแปลงตัวแปร ÷ ระยะเวลาทดสอบ)

การคาดการณ์รายได้จะเป็นยอดขายเฉลี่ยต่อวัน คูณด้วยจำนวนวันในช่วงเวลาคาดการณ์ของคุณ อย่าลืมคาดการณ์ให้มากพอว่าผลกระทบของฤดูกาล แคมเปญการขาย พฤติกรรมของลูกค้า ฯลฯ จะลดลง

มูลค่าโปรแกรมการทดสอบ A/B โดยรวม

ตอนนี้คุณสามารถคำนวณ ROI ของโปรแกรมการทดสอบ A/B ของคุณได้:

โปรแกรมทดสอบ A/B = (การทดสอบที่ชนะ + การทดสอบที่แพ้ + ต้นทุน)

หมายเหตุ: การทดสอบที่แพ้ต้องการเพียง 3 ขั้นตอนแรก ในขณะที่การทดสอบที่แพ้ต้องมีขั้นตอนทั้งหมด

เราได้ขอให้บริษัทหลายแห่งที่มีโปรแกรมการทดสอบ A/B ที่ครบกำหนดเพื่อแบ่งปันว่าพวกเขาคำนวณ ROI ของการทดสอบอย่างไร

นี่คือสิ่งที่พวกเขากล่าวว่า

Ian Kelly รองประธานฝ่ายปฏิบัติการของ NuLeaf Naturals กล่าวว่า:

ขั้นตอนแรกคือการคิดต้นทุนรวมของการทดสอบ ซึ่งรวมถึงต้นทุนของเครื่องมือที่ใช้สำหรับการทดสอบ A/B และเวลาที่ใช้ในการดำเนินการทดสอบ มูลค่าของเวลาจะเท่ากับการคูณเวลาทั้งหมดของพนักงานในโครงการด้วยเงินเดือนรายชั่วโมง นอกจากนี้ ให้เพิ่มค่าเสียโอกาสในกรณีที่ผลการทดสอบมี Conversion น้อยลง ค่าเสียโอกาสคือเงินพิเศษที่คุณจะได้รับหากคุณไม่ได้ทำการทดสอบ

ขั้นตอนที่สองคือการมีช่องทางที่ชัดเจนซึ่งสิ้นสุดในการขายผลิตภัณฑ์ EveryTrack ทุกย่างก้าวของช่องทาง ใช้เครื่องมือเช่น Mixpanel เพื่อทำสิ่งนี้ให้เสร็จ ในการทดสอบ A/B จะมีช่องทางเดียวกันสองรูปแบบ การเปลี่ยนแปลงสามารถกำหนดกลุ่มเป้าหมาย สีที่ใช้ หรือแม้แต่สำเนาที่ใช้ ควรติดตามทั้งสองรูปแบบแยกกันและเปรียบเทียบ

เมื่อข้อมูลทั้งหมดข้างต้นพร้อมใช้งาน จะเป็นการง่ายมากที่จะพิสูจน์ ROI ของโปรแกรมการทดสอบ A/B ของคุณ จะดีกว่าในการคำนวณ ROI เมื่อสิ้นสุดแต่ละไตรมาส การทดสอบบางอย่างจะล้มเหลวในขณะที่บางส่วนจะประสบความสำเร็จ รายได้โดยรวมที่เพิ่มขึ้นควรมากกว่าต้นทุนของโปรแกรมการทดสอบ A/B ของคุณ หากไม่เป็นเช่นนั้น ให้พิจารณากลยุทธ์การทดสอบของคุณอีกครั้ง

George Pitchkhadze, CMO ของ Thrive Cuisine กล่าวถึงกระบวนการของบริษัทของเขาด้านล่าง:

คำนวณต้นทุนการทดสอบของคุณ

ในการคำนวณ ROI คุณจำเป็นต้องทราบต้นทุนของคุณ ซึ่งควรรวมถึงต้นทุนทางตรง และ ทางอ้อม เช่น

- ต้นทุนซอฟต์แวร์/บริการที่ใช้

- ค่าชั่วโมงการทำงานที่ใช้ไป

- ค่าใช้จ่ายโดยตรง (เช่น ค่าเช่ารายชื่ออีเมลหรือโฆษณา PPC)

ตัวอย่างเช่น สมมติว่าฉันกำลังทดสอบ A/B แยกสองแพลตฟอร์มโฆษณา ฉันควรดูค่าโฆษณา PPC ของเรา — แต่ยังรวมถึงจำนวนชั่วโมงที่ใช้ในการเรียกใช้ชุดโฆษณาแต่ละชุดและราคาของบริการวิเคราะห์ที่เราใช้เพื่อแจ้งโฆษณาของเราด้วย

คำนวณผลตอบแทนของคุณ

ส่วนนี้ตรงไปตรงมา คำนวณผลตอบแทนโดยตรงที่มาจากความพยายาม สิ่งสำคัญที่นี่คือการใช้เครื่องมือวิเคราะห์ที่ทันสมัยเพื่อเชื่อมโยงการขายและรายได้กับสิ่งต่างๆ เช่น อีเมลที่ส่ง ชุดโฆษณาบน FB/Google เป็นต้น

คำนวณ ROI

เมื่อคุณมีแนวคิดที่ถูกต้องเกี่ยวกับผลตอบแทน และ การลงทุนแล้ว คุณสามารถคำนวณ ROI ได้อย่างง่ายดาย เพียงจำไว้ว่า: คำนวณต้นทุนของการทดสอบอย่างละเอียดและเชื่อมต่อผลตอบแทนกับแคมเปญและข้อความเฉพาะที่ใช้งาน

วิธีอื่นๆ ในการวัดผลกระทบของการทดสอบ A/B

มีวิธีอื่นในการวัด ROI ของโปรแกรมการทดสอบ A/B ของคุณ

Dionysia Kontotasiou หัวหน้าฝ่ายการรวมระบบ เจ้าหน้าที่ความเป็นส่วนตัวของข้อมูลและความปลอดภัยของข้อมูล ได้แบ่งปันวิธีการอีก 4 วิธีเพื่อวัดผลกระทบของการทดสอบ A/B ของคุณ

1. มีการทดลองกี่การทดลอง?

หากการทดลองของบริษัทในเปอร์เซ็นต์ที่สูงนั้นไม่สามารถสรุปได้ อาจเป็นสัญญาณว่าพวกเขากำลังตั้งค่าการทดสอบอย่างไม่ถูกต้อง บางทีพวกเขากำลังเขียนสมมติฐานที่คลุมเครือ เช่น " การเปลี่ยนแปลงนี้จะทำให้แอปดีขึ้น " แทนที่จะเป็นสมมติฐานที่ชัดเจน เช่น " การเปลี่ยนแปลงนี้จะเพิ่มการลงชื่อสมัครใช้รายเดือน 5 เปอร์เซ็นต์ "

สมมติฐานของคุณให้ผลลัพธ์ที่สรุปไม่ได้หรือไม่? ใช้ตัวสร้างสมมติฐานของ Convert เพื่อกำหนดสมมติฐานที่เชื่อถือได้ทุกครั้ง

2. คำติชมของทีมผลิตภัณฑ์

ทีมผลิตภัณฑ์มีข้อมูลเชิงลึกและข้อมูลผู้ใช้มากกว่าเดิมหรือไม่ การเปิดตัวผลิตภัณฑ์ของพวกเขาประสบความสำเร็จมากขึ้นหรือไม่? ถ้าใช่ นี่เป็นสัญญาณที่ดีว่าการทดสอบ A/B ที่กำลังดำเนินการนั้นประสบความสำเร็จ

3. ความเร็วทดลอง

ความเร็วการทดสอบคือการวัดจำนวนการทดสอบที่คุณทำในช่วงเวลาหนึ่ง นี่คือ เกณฑ์มาตรฐานการปฏิบัติงาน เพื่อวัดว่าคุณสามารถออกแบบ พัฒนา ทดสอบ วิเคราะห์ และเปิดใช้การทดสอบได้เร็วเพียงใด แม้ว่าการทดสอบที่ใหญ่กว่าบางรายการจะใช้เวลานานกว่าและมีความสำคัญในการสร้างผลกระทบที่ใหญ่กว่าต่อผลลัพธ์ แต่ ' การชนะอย่างรวดเร็ว ' ที่น้อยกว่าก็ไม่ควรลดราคา

4. ประมาณการกับต้นทุนจริงในการดำเนินโครงการ

ติดตามชั่วโมงหรืองบประมาณที่ใช้กับโปรแกรมของคุณ คุณยังสามารถตรวจสอบ งบประมาณที่คาดการณ์ไว้เทียบกับการใช้จ่ายจริง ในโครงการทดสอบของคุณเพื่อประเมินมูลค่าของโปรแกรมการทดสอบ A/B ของคุณ

หากคุณกำลังใช้ Convert Experiences สำหรับโปรแกรมการทดสอบ A/B ของคุณ คุณจะสามารถเข้าถึงการรายงานที่ซับซ้อน (เช่นในภาพหน้าจอด้านล่าง) ซึ่งรวมถึงเป้าหมายของคุณและประสิทธิภาพของรูปแบบการทดสอบแต่ละรูปแบบ — ดังนั้นคุณจึงไม่เพียงแต่สามารถเพิ่ม ROI ให้สูงสุด แต่ยังพิสูจน์ได้ด้วย!

แปลงโปรแกรมทดสอบประสบการณ์ A/B

บทสรุป

คุณค่าของการทดสอบ A/B คือทั้งการหาการปรับปรุงที่นำไปสู่การเพิ่มรายได้หรือมอบประสบการณ์ที่ดีขึ้นให้กับลูกค้าของคุณบนเว็บไซต์ของคุณและลดความเสี่ยงที่อาจเกิดขึ้น การใช้รายได้และการวัดผลอื่นๆ ทำให้คุณสามารถพิสูจน์ ROI ของโปรแกรมการทดสอบ A/B ของคุณกับ C-Suite ในบริษัทของคุณได้อย่างสรุป

คุณจะเพิ่ม ROI จากการทดสอบ A/B ได้อย่างไร

จองการสาธิตด้วยการแปลงเพื่อค้นหา

ขอตัวอย่างของคุณ