A/B Testinin Yatırım Getirisini Kanıtlamakta Zorlanıyor musunuz? Yardım Edelim
Yayınlanan: 2020-10-29A/B test programınızın değeri nedir? Şirketinize ne gibi faydalar sağlıyor?
A/B testinin dönüşüm oranlarını optimize etmeye ve geliri artırmaya yardımcı olduğunu zaten biliyorsunuz. Ancak A/B testinin kârlılığınızı etkilediğini tam olarak nasıl kanıtlayabilirsiniz?
Matt Gershoff'un sözleriyle,
A/B testi, zarara veya kayba yol açan davranış değişikliklerini azaltabilir
Ancak tüm bunlar, A/B test programınızın yatırım getirisini gösteren somut rakamlar isteyen şirketinizdeki üst düzey yöneticiyi etkilemeyebilir. A/B testlerinizin faydalarını kanıtlamak, şimdiki gibi karışıklık zamanlarında yöneticilerden size destek sağlayabilir.
Deney programınızın değerini şu şekilde kanıtlayabilirsiniz!
A/B Test Programınızın Yatırım Getirisini Hesaplama
Geliri kullanarak A/B test programınızın yatırım getirisini hesaplayabilirsiniz. Peak Activity'deki kişilerin yatırım getirinizi hesaplamak için harika bir formülü var. İşte bilmeniz gereken birkaç metrik:
Oturum Başına Gelir (RPS)
Hem kontrolünüz hem de varyantınız için RPS'yi hesaplayın. Bu, kontrolünüz ve varyantınız için toplam gelirin toplam oturum sayısına bölünmesiyle elde edilen değerdir.
RPS = (Toplam Gelir ÷ Toplam Oturum)
Ortalama Satış Artışı
Bu, hem kontrolünüzün hem de varyantınızın RPS'sini içerecektir. Bu metrik istatistiksel olarak anlamlı olmalıdır.
Ortalama Satış Artışı = (varyantınızın RPS'si – kontrolünüzün RPS'si) – 1
Gerçek A/B Testinizi Çalıştırmanın Maliyeti
Bu, ortalama satış artışı ile çarpılan kontrol geliridir.
A/B testi maliyeti = (Kontrol geliri * Ort. satış artışı)
Trafik Bölme Çarpanı
İlk olarak, kontrol ve varyant için toplam oturumları ekleyerek toplam oturumları hesaplayın. Ardından, kontrol ve varyant için trafik dağılımını hesaplamak için bu rakamı kullanın.
Toplam oturum = ( Kontrol oturumları + Varyant oturumları)
Kontrol için trafik dağılımı = (Kontrol trafiği ÷ Toplam oturum) * 100
Varyant için trafik dağılımı = (Varyant trafiği ÷ Toplam oturumlar) * 100
Varyant Değişiminin Değeri
Bu, A/B testleri çalıştırma maliyetinin 2 ile çarpılmasıyla hesaplanır. Bunun nedeni, standart A/B testlerinin iki tedaviye sahip olma eğiliminde olmasıdır. Bu rakam, birden fazla tedavinizin olduğu çok değişkenli testler için farklılık gösterir.
Değişim değeri = (Test çalıştırma maliyeti * 2)
Test Süresinden Kazanılan Değer
Bu, temel olarak, varyant değişikliğinin değerinden kaldırılan A/B testini çalıştırmanın maliyetidir.
Test periyodunun değeri = (Çalışma testinin maliyeti – Değişimin değeri)
Varyant Yayınlanırsa Artan Gelir Tahmini
Günlük ortalama satışları bulmak için varyanttaki değişikliğin değerini testlerin çalıştırıldığı gün sayısına bölün.
Günlük ortalama satışlar = (Varyant değişikliğinin değeri ÷ Test süresi)
Gelir tahmini, tahmin döneminizdeki gün sayısıyla çarpılan günlük ortalama satış olacaktır. Mevsimselliğin, satış kampanyalarının, müşteri davranışlarının vb. etkilerinin azaldığını yeterince tahmin etmeyi unutmayın.
Genel A/B Test Programı Değeri
Artık A/B test programınızın yatırım getirisini hesaplayabilirsiniz:
A/B test programı = (Kazanan testler + Kaybedilen testler + Maliyet)
Not: Kaybedilen testler yalnızca ilk 3 adıma ihtiyaç duyarken, kazananlar tüm adımlara ihtiyaç duyar.
Olgun bir A/B test programı olan birkaç şirketten, testlerinin yatırım getirisini nasıl hesapladıklarını paylaşmalarını istedik.
İşte söyledikleri.
NuLeaf Naturals Operasyon Başkan Yardımcısı Ian Kelly şunları paylaştı:
İlk adım, deneyin toplam maliyetini bulmaktır. Bu, A/B testi için kullanılan araçların maliyetini ve testi gerçekleştirmek için gereken süreyi içerir. Zamanın değeri, çalışanların projede harcadıkları toplam sürenin saatlik maaş ile çarpılmasıyla eşitlenir. Ayrıca, testin daha az dönüşümle sonuçlanması durumunda fırsat maliyetini de ekleyin. Fırsat maliyeti, deneyi yapmamış olsaydınız kazanabileceğiniz ekstra paradır.
İkinci adım, bir ürünün satışıyla sonuçlanan net bir huniye sahip olmaktır. Dönüşüm hunisinin her adımını EveryTrack. Bunu yapmak için Mixpanel gibi bir araç kullanın. Bir A/B testinde aynı dönüşüm hunisinin iki varyasyonu olacaktır. Değişiklikler hedef kitle, kullanılan renkler ve hatta kullanılan kopya olabilir. Her iki varyasyon da ayrı ayrı izlenmeli ve karşılaştırılmalıdır.
Yukarıdaki tüm veriler mevcut olduğunda, A/B test programınızın yatırım getirisini kanıtlamak çok kolay olacaktır. Yatırım getirisini her çeyreğin sonunda hesaplamak daha iyidir. Bazı deneyler başarısız olurken bazıları başarılı olacaktır. Gelirdeki genel iyileşme, A/B test programınızın maliyetinden daha büyük olmalıdır. Durum böyle değilse, test stratejilerinizi yerinde yeniden gözden geçirin.
Thrive Cuisine'in CMO'su George Pitchkhadze, şirketinin sürecini aşağıda özetliyor:
Denemenizin maliyetini hesaplayın.
ROI'yi hesaplamak için maliyetlerinizi bilmeniz gerekir. Bu, doğrudan ve dolaylı maliyetleri içermelidir, örneğin:
-Kullanılan yazılım/hizmetlerin maliyeti.
-Kullanılan adam-saat maliyeti.
-Doğrudan maliyetler (örneğin, bir e-posta listesi veya PPC reklamları kiralamanın maliyeti).
Örneğin, iki reklam platformunda A/B bölünmüş testi yaptığımı varsayalım. PPC reklam maliyetlerimize - ama aynı zamanda her bir reklam setini çalıştırmanın kaç saat sürdüğüne ve reklamlarımızı bilgilendirmek için kullandığımız analiz hizmetlerinin fiyatına da bakmalıyım.
İadenizi hesaplayın
Bu kısım basittir. Bir çabadan gelen doğrudan getirileri hesaplayın. Burada önemli olan, satışları ve geliri, gönderilen e-postalar, FB/Google'daki reklam setleri vb. ile ilişkilendirmek için modern analitik araçlar kullanmaktır.
YG hesaplayın
Artık doğru bir getiri ve yatırım fikriniz olduğuna göre, yatırım getirisini kolayca hesaplayabilirsiniz. Unutmayın: Deneyin maliyetini baştan sona hesaplayın ve geri dönüşleri belirli kampanyalara ve dağıtılan mesajlara bağlayın
A/B Testinin Etkisini Ölçmenin Diğer Yolları
A/B test programınızın yatırım getirisini ölçmenin başka yolları da vardır.
Convert'in Entegrasyon Başkanı, Veri Gizliliği ve Bilgi Güvenliği Sorumlusu Dionysia Kontotasiou, A/B testlerinizin etkisini ölçmek için 4 yöntem daha paylaştı.
1. Kaç Deney Sonuçlanıyor?
Bir şirketin deneylerinin yüksek bir yüzdesi sonuçsuz kalıyorsa, bu, deneyleri yanlış ayarladıklarının bir işareti olabilir. Belki de “ Bu değişiklik aylık kayıtları yüzde beş artıracak ” gibi açık olanlardan ziyade “ Bu değişiklik uygulamayı daha iyi hale getirecek ” gibi belirsiz hipotezler yazıyorlar.
Hipotezleriniz sonuçsuz sonuçlar mı üretiyor? Her seferinde güvenilir hipotezler formüle etmek için Convert'in hipotez oluşturucusunu kullanın.
2. Ürün Ekibi Geri Bildirimi
Ürün ekibi, eskisinden daha fazla kullanıcı içgörüsü ve verisine sahip mi? Ürün lansmanları daha başarılı mı oluyor? Evet ise, bu, yürütülen A/B testlerinin başarılı olduğuna dair iyi bir işarettir.
3. Deney Hızı
Test hızı, belirli bir zaman diliminde kaç test yaptığınızın ölçüsüdür. Bu, testlerinizi ne kadar hızlı tasarlayabileceğinizi, geliştirebileceğinizi, test edebileceğinizi, analiz edebileceğinizi ve başlatabileceğinizi ölçmek için operasyonel bir kıyaslamadır . Bazı daha büyük testler daha uzun sürecek ve sonuçlar üzerinde daha büyük bir etki yaratmak için önemli olsa da, daha küçük ' hızlı kazançlar ' iskonto edilmemelidir.
4. Programı Çalıştırmak İçin Tahmini ve Gerçek Maliyetler
Programınızı çalıştırmaya ayrılan saatleri veya bütçeyi izleyin. Ayrıca, A/B test programınızın değerini değerlendirmek için, test projeleriniz için öngörülen bütçenizi ve gerçek harcamalarınızı da izleyebilirsiniz.
A/B test programınız için Deneyimleri Dönüştür'ü kullanıyorsanız, hedeflerinizi ve her bir test varyasyonunun performansını içeren karmaşık raporlara (aşağıdaki ekran görüntüsünde olduğu gibi) erişebilirsiniz - böylece yalnızca yatırım getirisini en üst düzeye çıkarmakla kalmaz, aynı zamanda kanıtlayabilirsiniz!
Çözüm
A/B testinin değeri, hem gelir artışı sağlayan iyileştirmeler bulmakta hem de müşterilerinize web sitenizde daha iyi bir deneyim sunmakta ve ortaya çıkabilecek riskleri azaltmakta yatar. Gelir ve diğer ölçüleri kullanarak, A/B test programınızın yatırım getirisini şirketinizdeki C-Suite'e kesin olarak kanıtlayabilirsiniz.
Bulmak için Dönüştür ile Demo rezervasyonu yapın.
Demonuzu isteyin