2022'de En Popüler Çok Değişkenli Test Araçları

Yani şu anda A/B testleri yapıyorsunuz ve test programınızın ölçeğini genişletmek istiyorsunuz.

İyi bir trafiğiniz var, harika sonuçlar alıyorsunuz ve şimdi çok daha fazla test yapmak ve bu verileri bir an önce almak istiyorsunuz.

Ama nasıl daha hızlı test etmeye başlayabilirsiniz? Ya da daha iyisi, aynı zaman diliminde nasıl daha fazla test yapabilir ve daha fazla bilgi edinebilirsiniz?

İşte burada çok değişkenli test devreye girer. Hangisinin en iyi sonucu verdiğini görmek için birden çok varyasyonu aynı anda test etmenize olanak tanır.

Bu kılavuzda, MVT'nin ne olduğunu, nasıl çalıştığını, onu kullanmak için neye ihtiyacınız olduğunu ve mevcut en iyi çok değişkenli test araçlarının bir seçimini yıkacağız.

Hangi çok değişkenli test aracını alacağınıza karar verirken doğru seçimi yapabilmeniz için fiyatından ve özelliklerinden nasıl iş yaptıklarına kadar her şey.

O halde konuya girelim…

Çok Değişkenli Test Nedir?

Çok değişkenli testi anlamanın en iyi yolu, onu diğer test yöntemleriyle karşılaştırmak ve nasıl farklılaştığını görmektir.

Şimdi bir A/B testine ve çok değişkenli bir teste ve bunların nasıl karşılaştırıldığına bakalım.

Bir A/B testi ile, orijinal bir kontrol versiyonuna karşı tek bir varyasyonu test ederiz. Belki başlığı nasıl iyileştirebileceğimize dair bir fikrimiz vardır, bu yüzden bu varyasyonu yaratır ve hangisinin en iyi performansı gösterdiğini görürüz.

A/B testiniz şöyle görünecek:

Başlık 1 (kontrol) ve Başlık 2 (varyasyon fikri)

Yapabileceğimiz başka bir test, bir A/B/n testidir.

Burası, genel kazananı bulmak için kontrole karşı birden fazla varyasyonu test edebileceğimiz yerdir. A/B/n testleri tek değişkenlidir.

Örneğin, bir sürü başlık fikrimiz olabilir ve hangisinin işe yarayacağından emin değiliz. Ancak, birkaç test varyasyonu çalıştıracak ve yine de doğru sonuçlar alacak trafiğe sahip olduğumuz için, hangisinin en iyi performansı gösterdiğini görmek için birden çok başlık fikrini test etmeye karar veriyoruz.

Başlık 1 (kontrol) vs Başlık 2 vs Başlık 3

Kazanan manşet varyasyonunu bulduğumuzda, bir grup kahramanca çekilmiş görüntüyü ve ardından belki bir sürü CTA açısını test edebiliriz.

Tahmin edebileceğiniz gibi, bunların hepsi zaman alıyor, değil mi?

Diğer bir seçenek de, bir çok şeyi tek seferde değiştirdiğimiz bir test yapmak ve bunun ölçümleri iyileştirip iyileştirmediğini görmek.

Radikal bir değişiklik yapmayı düşünmüyorsak, örneğin yeni bir kazanan bulmaya çalışmadıkça bunu çoğu A/B testinde yapma eğilimindeyiz, çünkü diğer tüm test fikirleri durağanlaşıyor veya herhangi bir etki yapmıyor.

Öyleyse neden normal kampanyalar için böyle köklü değişiklikler yapılmasını önermiyoruz ve bunun çok değişkenli testle ne ilgisi var?

Her seferinde bir öğeyi test ediyoruz çünkü büyük değişiklikler yaparsak ve yeni sayfa kazanır veya başarısız olursa, bu değişikliklerden hangisinin bu artışa neden olduğundan emin olamayız.

Çok değişkenli test veya MVT, bu değişikliklerin her birini ve sonucu nasıl etkilediğini takip ederken birden fazla değişkeni test etmemize olanak tanır.

Yalnızca birden fazla öğe varyasyonunu test etmekle kalmaz, aynı zamanda nihai kazananı bulana kadar bunların farklı kombinasyonlarını bile çalıştırabiliriz.

Ana sayfamızı geliştirmek istediğimizi ve en fazla artışı görmek için neyi test edeceğimize dair birkaç fikrimiz olduğunu varsayalım:

• Başlık
• kahraman vurdu görüntü
• CTA.

Çok değişkenli bir testle, yalnızca her başlık fikrini, kahraman fotoğrafı seçeneği ve CTA açısını test etmekle kalmadık, kazanan kombinasyonu bulmak için bu varyasyonların her bir kombinasyonunu da test edebiliriz:

Başlık 1 + Kahraman resmi 1 + CTA 1 vs

Başlık 1 + Kahraman resmi 2 + CTA 1 vs

Başlık 1 + Kahraman resmi 1 + CTA 2 vs

Başlık 2 + Kahraman resmi 1 + CTA 1 vs

Başlık 2 + Kahraman resmi 2 + CTA 1 vs

Başlık 2 + Kahraman resmi 2 + CTA 2

Çok değişkenli testler, öğelerin en iyi kombinasyonunu bulmanıza ve bu değişikliklere neyin neden olduğunu anlamanıza yardımcı olabilir.

Yine de, uygun çok değişkenli testler yapmak çok fazla zaman ve kaynak harcamayı gerektirir. Sadece test için değil, aynı zamanda KG ve analiz için de bu kadar çok kaynağa yatırım yapmaya istekli misiniz? Yine de bazı senaryolarda, daha iyi bir seçenek olabilir. Bakalım bunlar neymiş.

Çok Değişkenli Test Ne Zaman Kullanılır?

Çok değişkenli testler ne için kullanılır? İşte bir MVT testinin A/B testinden daha faydalı olabileceği durumlardan birkaçı.

1. Trafiğiniz Yoğun Olduğunda ve Test Programınızı Hızlandırmak İstediğinizde

Trafik, çok değişkenli testin en önemli noktasıdır. Her değişikliği test edebilmek ve test sonuçlarınıza güvenebilmek için yüksek hacimli trafiğe ihtiyacınız var.

Ancak trafiğiniz varsa ve daha fazla veri elde etmek ve daha fazla karar vermek için testinizi büyütmek istiyorsanız, MVT aynı anda birden fazla fikri çalıştırmanıza izin verecektir.

2. Kaldırmayı Artırmak ve Birkaç Fikriniz Olmak İstiyorsanız Ama Bunları Tek Tek Test Etmek İçin Beklemek İstemiyorsanız

Bazı insanlar, zaman yatırımı nedeniyle MVT'yi yalnızca mevcut web sayfalarını küçük değişikliklerle iyileştirmek için kullanmanız gerektiğini düşünüyor, ancak bu doğru değil. Elbette, bunun için kullanabilirsiniz, ancak daha büyük öğelerin daha geniş 'eğer' testleri için de kullanabilirsiniz.

(Belki hangi öğenin en iyi kaldırmayı sağlayacağından emin değilsiniz ve bu nedenle, hangisinin işe yaradığını görmek için duvara akıllıca varsayımsal fikirler atmayı denemek istersiniz.)

Bir MVT çalıştıracak kadar trafik hacmine sahipseniz, geniş sayfa kombinasyonlarını çok daha hızlı bulmaya çalışmamak akıllıca olmaz. Her varyasyondaki testten SONRA o trafiğin etkilerini de ölçtüğünüzden emin olun, çünkü bu size hedef kitleniz ve bunun neden işe yaradığı hakkında daha fazla bilgi verecektir.

Örneğin, Facebook'ta küçük resim, başlık ve gövde metni vb. varyasyonlarını ekleyerek temel çok değişkenli test reklamları oluşturabilirsiniz.

Test çalışır ve size o reklamın hangi varyasyonunun en yüksek TO'yu aldığını söyler.

Amacınız sadece tıklama almak olsaydı, bu reklam kazanırdı, değil mi?

Ancak tüm bu trafik, onları gönderdiğiniz sayfadan geri dönerse, bulduğunuz tek şey, kitlenin kalmasını ve dönüşmesini sağlayan değil, o kitlenin tıklamasına neden olan bir varyasyondur.

Özellikle daha geniş bir fikir toplama yöntemi olarak kullanıyorsanız, bir sayfada MVT testi çalıştırırken de durum aynıdır. Sayfada ne olduğunu kontrol edin, ayrıca tıkladıktan sonra ne olduğunu da kontrol edin.

3. Artımlı Artış Elde Etmek İçin Önceki Bir Testi İyileştirirken

Küçük iyileştirmeleri ölçmek ve geliştirmek için MVT'yi de kullanabilirsiniz. Aslında, birçok ajans onları mevcut kazanan kampanyalarda daha da fazla artış sağlamak ve küçük değişiklikleri test etmek için kullanmayı sever.

Kazanan bir varyant bulmak için bir sayfayı zaten A/B testini birkaç kez yaptığınızı, ancak yalnızca %0,5 olsa bile mümkün olduğunca fazla artış elde etmek istediğinizi varsayalım. Daha fazla test etmek için bu sayfada MVT testleri çalıştırabilirsiniz (çünkü ayda 100.000 ziyaretçide her %0.5'lik yardım fark edilir!)

4. Bir Fikir Kombinasyonundan (Etkileşim Etkileri) Mümkün olan Maksimum Artışı Ararken

Bazen ardışık bir A/B testi bize kağıt üzerinde kazananlar verebilir, ancak bunları birleştirdiğimizde, sayfamız için her zaman en yüksek performans gösteren seçenek değildir.

İşte bir örnek:

• Bir manşet testi yaparsınız ve bir kazanan seçersiniz ve uygularsınız.
• Ardından, aynı sayfada kazanan başlık varyasyonu ve uygulamasıyla bir kahraman fotoğrafı testi yaparsınız.
• Ardından, önceki kazanan öğelerle aynı sayfada bir CTA testi çalıştırır ve uygularsınız.

Teorik olarak, bu, sayfanızın en yüksek performanslı sürümü olmalıdır, ancak etkileşim veya etkileşim eksikliği nedeniyle garip şeyler olabilir. Basitçe söylemek gerekirse, bir testte kaybeden bir öğenin, başka bir öğe varyasyonu ile birleştirildiğinde bazen sıralı A/B testi kazananınızdan daha iyi performans göstermesi mümkündür.

Nasıl?

Belki de ilk testin kaybeden bir başlığı, resim ve CTA testinden kazananlarla birleştirildiğinde daha yüksek bir arka uç dönüşüm oranı sağlar.

Bu olabilir, ancak A/B testleri yaptıysanız bunu asla bilemezsiniz. Bunun yerine, diğer öğeleri test etmeden önce onu seçeneklerden kaldırmış olurdunuz. Bu nedenle çok değişkenli testler çok güçlüdür. Testin bir bölümünden daha düşük performans gösteren bir öğe alması anlamına gelse bile, en yüksek genel sayfa performansını bulmanızı sağlar.

Daha da iyisi, size en çok hangi elementin yardımcı olduğunu bile söyleyebilir…

5. Hedef Kitleniz İçin Sayfadaki En Önemli Öğeyi Ararken, Gelecekteki Testler ve Sayfalar İçin

MVT yalnızca farklı varyasyonlarınızın ve öğelerinizin kazanan kombinasyonunu göstermekle kalmayacak, aynı zamanda size en fazla kaldırma sağlayan öğeyi de gösterecektir.

Belki de kahraman atışınız daha fazla ivme kazanır, ancak varyasyon sayfanızdaki tüm öğelerinizden, nihai sonucunuza en çok katkıda bulunduğunu da görüyor musunuz?

Bu, daha sonra, daha fazla iyileştirme için ilk olarak nerede test etmeniz gerektiğine dair bir fikir verecektir, böylece önce kahraman atış iyileştirmelerine odaklanabilirsiniz, vb.

6. Test Sürecinize Makine Öğrenimi Uygularken

MVT'nin büyük miktarda veri ve etkileşim gerektirmesi ve bunları izlemesi nedeniyle, aslında makine öğrenimi test programlarını beslemek için harika bir kaynak olarak kullanılabilir.

Makine öğreniminin en iyi şekilde çalışması için büyük veri gerekir, ancak bir kez elde edildiğinde, zaman içinde daha az trafikle kalıpları görmeye ve sonuçları ve davranışları tahmin etmeye başlayabilir. Aslında Amazon gibi siteler tam da bunu yapıyor…

Çok Değişkenli Test Örnekleri

Çok Değişkenli Test Örneği #1

Amazon, açılış sayfalarının düzenini ayarlamak için MVT ve makine öğrenimini kullandı ve yalnızca 7 gün içinde satın alma oranında %21'lik bir artış sağladı!

Çok Değişkenli Test Örneği #2

Booking.com yeni benzersiz özellikleri belirli hedef kitlelere test etmek için çok değişkenli testler kullanır ve ardından bunları site genelinde kullanıma sunmadan önce performanslarını ölçer.

Çok Değişkenli Test Örneği #3

Microsoft, birden çok sayfa öğesinde (8×4!) bir MVT testi yaptıktan sonra KOBİ web sitesi için dönüşüm oranında %40'lık bir artış elde etti.

Çok Değişkenli Test Örneği #4

Yine de MVT'yi kullanabilen sadece juggernauts değil. HawkHost, ana sayfalarında bir MVT testi yaptıklarında (başlıklarını, alt başlıklarını ve kahraman çekimlerini test ederek) satışlarında %204'lük bir artış gördü.

Çok Değişkenli Testin Artıları ve Eksileri

Çok değişkenli testler bu kadar güçlüyse, neden hepimiz onu kullanmıyoruz?

Görüyorsunuz, bir A/B testinin güzelliği, nispeten küçük bir izleyici kitlesiyle bir fikri hızlı bir şekilde test edebilmenizdir. Bu, çoğu işletmenin oldukça düşük bir trafiğe sahip olsalar bile bir test çalıştırabileceği ve ardından 14-30 gün içinde sonucu görebileceği anlamına gelir.

Ancak çok değişkenli bir testte, aynı anda birden çok şeyi test ettiğiniz için, birlikte çalışabileceğiniz çok daha büyük bir kitleye ihtiyacınız vardır. (Özellikle, çok sayfalı testler yapıyorsanız veya birden çok varyasyon kombinasyonunu test ediyorsanız.)

Diyelim ki ana sayfamızda bir manşeti test etmek istedik:

• Başlık Kontrolü
• Başlık Varyasyonu

Biz sadece tek varyasyonu test ediyoruz, yani toplam 2 seçenek.

Şimdi basit bir örnek olarak, test sonuçlarının güvenilir olduğundan emin olabilmemiz için sayfanın her bir sürümüne (varyant ve kontrol) 1.000 ziyaretçi çekmek istediğimizi varsayalım.

(Gerekli trafik, sayfaya ve sayfanın dönüşüm oranına göre değişebilir, ancak fikir edinmeniz için burada sadeleştirelim.)

Bu, testi çalıştırmak ve sonuçlara güvenmek için 2.000 ziyaretçiye ihtiyacımız olacağı ve her sayfaya 1000 ziyaretçinin gideceği anlamına gelir.

Peki ya test etmek istersek:

• 3 başlık
• 3 kahraman resmi ve
• 3 CTA?

Bu toplam 9 varyant değil, aslında 9 varyanttan oluşan 27 kombinasyon (3x3x3).

Bu, varyasyon başına 1000 ziyaretçi istersek, testi çalıştırmak ve sonuçlara güvenmek yerine trafik gereksinimimizin 27.000 ziyaretçi olacağı anlamına gelir (sayfa başına 1.000 ziyaretçinin yeterli olduğunu aşırı basitleştirmemize dayanarak).

Gerçekte, doğru veri elde etmek için varyasyon başına muhtemelen yaklaşık 10.000'den fazla ziyaretçiye ihtiyacınız olacaktır, çünkü yalnızca trafik yeterli değildir, ayrıca dönüşümleri de görmeniz gerekir.

Bu nedenle birçok işletme MVT testleri uygulamamaktadır, çünkü onları etkin bir şekilde çalıştıracak trafiğe sahip değildirler. Aslında, çoğu ajans, sayfa zaten çok yüksek bir dönüşüm oranına sahip değilse, MVT kampanyaları yayınlamaya başlamadan önce aylık yaklaşık 100.000 ziyaretçiye sahip olmanızı önerir. Ve o zaman bile, onları daha hızlı çalıştırabilmek için en fazla 6 varyasyon çalıştırmayı hala tavsiye ediyorlar.

Ama eğer böyle bir trafiğiniz varsa?

O zaman MVT, neredeyse aynı zaman diliminde çok daha fazla testin eşdeğerini gerçekleştirmenize izin verebilir…

Bu örneği yukarıdan alırsak ve doğru bir ölçüm penceresi elde etmek için her testin tam 30 günlük satış döngüsü boyunca çalışmasına izin verirsek?

Trafiğe sahip olduğumuzu varsayarsak, 27 test kombinasyonunu tek bir çok değişkenli test olarak belki 30-60 gün boyunca o sayfada tek seferde çalıştırabiliriz. Bunu 27 aylık bir zaman diliminde o sayfada 27 ardışık A/B testi yapmakla karşılaştırırsanız fena değil!

(Yine, burada basitleştiriyorum ve her testte tam bir satış döngüsü için koştuğunuzu varsayıyorum.)

Ancak görebileceğiniz gibi, çok değişkenli testler, içgörüler ve fikirler edinmenize, bunları daha hızlı uygulamanıza ve ardışık kaybedilen testlerde çalışma süresini kısaltmanıza olanak tanır.

Oldukça iyi, değil mi!?

Açıkçası, trafik gereksinimleri dışında MVT testinin başka dezavantajları da vardır.

Çalıştırabileceğiniz çok sayıda varyasyon ve kombinasyon nedeniyle, ön ve son test QA sürenizi büyük ölçüde artırır.

Her varyasyonun işe yaradığından ve aynı zamanda mantıklı olduğundan emin olmanız gerekir. (Birbiriyle uyuşmayan bir başlık ve resim göstermemek vb.) ve bu nedenle kurulum sürenizi ve maliyetinizi önemli ölçüde artırır.

Ayrıca, efektleri kontrol ettiğinizden emin olun.

Söz konusu sayfada dönüşümde bir artış gördüğünüz için, onu nihai hedeflerinize doğru takip edin. İstediğiniz son şey daha fazla tıklama ama kötü kullanıcı deneyimi veya yüksek hemen çıkma oranı (veya daha fazla tıklama ama satış yok).

Çok Değişkenli Testin Artıları

• Trafiğe sahip olduğunuzu varsayarsak, çok değişkenli test, çok sayıda varyasyonu hızlı bir şekilde test etmenize olanak tanır.
• MVT, neyin işe yarayıp neyin yaramadığına dair daha fazla veri bulmak için test programınızın ölçeğini genişletmenize yardımcı olabilir.
• Ardışık A/B testlerinden daha hızlı kazanan kombinasyonları bulmanıza yardımcı olabilir.
• Ardışık testler yaparken kaçırmış olabileceğiniz kazanan kombinasyonları bulmanıza yardımcı olabilir. (Bir manşetin 2. performans gösterdiğini ve onu kestiğinizi, ancak 3. resim varyasyonu ile eşleştiğini, bir şekilde yükselişi ikiye katladığını hayal edin? Ardışık bir testle bunu kaçırırdınız. Çok değişkenli bir test, daha yüksek derecede etkileşim etkisi gerektirir).
• Bazı A/B test yazılımları, hangi belirli öğenin en fazla artışı sağlamaya yardımcı olduğunu görmenize olanak tanır (kitlenizi daha iyi anlamanızı sağlar).
• Ayrıca, yüksek performanslı sayfalarda küçük artışların bulunmasına yardımcı olmak için de kullanılabilir. (Zaten yüksek performanslı bir sayfanız olduğunu ve renk değişiklikleri gibi küçük artışlar görmek için yeni fikirler geliştirdiğinizi hayal edin.)

Çok Değişkenli Testin Eksileri

• Çalışmak için yüksek hacimli bir trafiğe ihtiyacınız var, özellikle de sonuçlarınıza güvenebilmek ve yanlış pozitif veya negatifleri (tip 1 ve tip 2 hatalar) görmemek için istatistik işareti ve daha küçük artış yüzdesini ölçmek için stat gücü istiyorsanız.
• Trafik gereksinimleri, ne kadar çok varyasyon ve kombinasyon test ederseniz o kadar hızlı büyür, bu yüzden bunu aklınızda bulundurun. Fazla kaldırma sağlamayabilirlerse ek öğeleri kaldırmayı düşünün. (yani, alt bilgi renklerini vb. test etme konusunda endişelenmeden önce başlığı test edin. Gerçekten isterseniz, bunları her zaman daha sonra test edebilirsiniz.)
• Örnek boyutunu etkileyen sadece trafik değildir. Geçerli sayfanın ve değişkenlerin dönüşüm oranı, tümü istatistiksel anlamlılığa ulaşmak için gereken örneklem boyutunun hacmini etkiler. Daha iyi dönüşümler gereken trafiği azaltabilir, daha düşük dönüşümler bu gereksinimi artırır.
• Daha fazla değişken test ederken hata payı, sonuçlara güvenebilmeniz için gereken trafik hacmini de artırır.
• Hepsinin önceden çalıştığından emin olmak için yoğun QA testleri çalıştırmanız gerekir.
• Varyasyonların birlikte anlamlı olduğundan ve karşıt veya çelişkili kombinasyonlar içermediğinden emin olmak için QA'yı da çalıştırmanız gerekir. (Tekliflerle eşleşmeyen CTA'lar, bir kayak gezisinin reklamını yaparken bir plaj tatili için manşetler, hatta yazı tipi ve arka plan renkleriyle çelişen veya karışan.)
• Yüksek bir trafik kaynağınız yoksa, yine de bir MVT testi çalıştırabilirsiniz, stat sig'e basıp testi sonlandırana kadar çok daha uzun sürebilir. (Bazen birkaç ay veya daha uzun). Aslında, sadece ardışık A/B testleri yapmak bazen daha hızlı ve daha verimli olabilir.
• Aynı anda birden çok şeyi test ederek bazı kitle içgörülerini kaybedebilirsiniz. (Tek bir öğeyi veya açıyı test etmek bazen hedef kitlenizi daha iyi anlamanıza yardımcı olabilir.)

Çok Değişkenli Test İstatistikleri: MVT'nin Arkasındaki Matematik

O halde biraz eğlenelim…

Çok değişkenli test söz konusu olduğunda, standart A/B testi veya bölünmüş test için farklı bir istatistiksel analiz yöntemi kullanırız.

Bunun matematiğine çok fazla girmek istemiyorum, ama işte bir basitleştirme:

• A/B testi ile 2 veya daha fazla sonuç kümesi arasındaki farkı ölçmek için bir t testi (veya z testi) kullanırız.
• Çok değişkenli test ile, ANOVA veya 'Varyans Analizi' olarak adlandırılan test sonuçlarını bulmak için başka bir yöntem kullanılır. Tüm detayları bilmenize gerek yok ama asıl mesele şu. Temel fark, ANOVA'nın değişkenler arasındaki bağlantıyı ve etkiyi de ölçmesidir. Bu, MVT'nin temel güçlü yönlerinden biridir, çünkü element kombinasyonlarının birbirini nasıl etkilediğini görmemizi sağlar.

Hangi aracı kullandığınıza bağlı olarak, bir MVT kampanyası yürütürken sunulan 3 tür çok değişkenli test yöntemi olabilir. Her biri, testinizin nasıl çalışacağına ilişkin matematiği etkiler.

Bunları diyoruz:

• Tam Faktöriyel,
• Kesir Faktöriyel ve
• Taguchi.

Peki ne anlama geliyorlar?

Tam Faktöriyel

Hemen hemen her MVT aracı, ana test modelinin temeli olarak Tam Faktöriyel testi sunacaktır ve her zaman kullanmak istediğiniz şey hemen hemen budur.

Bu yöntem, testinizdeki trafiğin 'tam' dağılımını ifade eder.

Basitçe söylemek gerekirse, test trafiğini her değişken arasında eşit olarak bölerek her kombinasyonu aynı anda test ettiğiniz yerdir.

A/B testi ile trafiği 50:50 oranında bölersiniz. Ancak bir MVT ile, 10 varyantınız varsa, bu, trafiğin yalnızca %10'unun her bir varyanta gittiği anlamına gelir.

Varyant sayısı ve her varyasyonla istatistiksel anlamlılığa ulaşmak için gereken trafik nedeniyle, tam faktöriyel çok büyük bir trafik kaynağı gerektirir, ancak en doğru yöntemdir.

Bununla birlikte, bazı A/B test platformları, alternatif olarak 'Kesir Faktörü' testi adı verilen bir şey de sunacaktır.

Kesir Faktöriyel

Bu yöntem, yalnızca daha küçük bir varyasyon örneğini test ederek ve ardından mevcut test sonuçlarına dayalı olarak son dönüşüm oranlarını tahmin ederek daha büyük trafik gereksinimlerinin bazılarını atlamaya çalışır.

Amacı, normal gibi ölçeklendirme için güvenilir sonuçları tahmin etme doğruluğunda değildir, yani bunu X kitlesine ölçeklendirirsek, aynı şeyi yapacak mı?

Bunun yerine, daha derin veya başka bir yöntemle test etmeden önce içgörü elde edebilmeniz için erken çekişin nerede başladığını görmenize yardımcı olmak üzere tasarlanmıştır.

Diyelim ki test etmek istediğiniz 10 varyasyonunuz var.

Kesirli faktöriyel aslında 5 tanesini test edecek ve daha sonra şimdiye kadarki sonuçlara dayanarak diğer 5 testin dönüşüm oranını çıkarmaya çalışacaktır.

Tahmin edebileceğiniz gibi, bu o kadar doğru değildir ve hatalara ve yanlış pozitiflere yol açabilir ve aslında optimize ediciler ve pazarlamacılar arasında bir tartışma kaynağıdır. (Neredeyse tümü ana test yöntemi olarak tam faktöriyel önermekle birlikte.)

Taguchi

Son olarak, çok değişkenli test için Taguchi yöntemine sahipsiniz. Orijinal olarak, ürün imalatı için Ar-Ge'deki kabul edilebilir kayıpların varsayımlarına karşı kalite kontrolünü ölçmek için bir yöntem olarak tasarlanmıştır.

Çoğu araç, kullanımının karmaşıklığı nedeniyle bunu sunmaz.

Çok Değişkenli Test Ne Zaman Durdurulur?

Durdurmadan önce herhangi bir testi çalıştırırken göz önünde bulundurmamız gereken 3 ana şey vardır:

• Testin, her bir varyant için yeterince büyük bir örnek boyutu toplayacak kadar uzun sürmesi ve testin alakalı olması için yeterli dönüşüm toplaması için.
• Testin 1 veya hatta 2 tam satış döngüsünü çalıştırması için (30-60 günlük trafik ve alışveriş dönemlerini dengelemek için).
• Ve son olarak, sonuçların istatistiksel olarak anlamlı olması için, yani bu testi vahşi doğada alıp ölçeklendirirsek, aynı şekilde performans göstermeye devam edeceğinden %95 emin olabiliriz.

Bu noktadan önce herhangi bir testi durdurmamanızı öneririz. Aksi takdirde, veriler çalışmak için yetersiz olacaktır. Bununla birlikte, bir varyantın ödeme formlarının çalışmaması vb. gibi performansla ilgili sorunlar varsa testi durdurabilir ve ardından yeniden başlatabiliriz, ancak ideal olarak, çalışırken bakmamaya bile çalışırız.

(Bazı ajanslar, net bir kazanan varsa erken durdurmayı, hatta dönüşüm oranları %10'un altına düşerse belirli varyasyonları durdurmayı ve ardından daha yüksek performans gösterenlere daha fazla trafik filtrelerken testin çalışmaya devam etmesine izin vermelerini önerir. Açıkçası, bu etkileyebilir. Test sonuçları büyük ölçüde.)

Çok Değişkenli Test Nasıl Kurulur ve Gerçekleştirilir?

Çok değişkenli test oluşturma süreci, A/B testine çok benzer.

Adım 1: Nihai Hedefinize Karar Verin

İlk olarak, sayfanız, hedefi, mevcut sonuçları ve nasıl geliştirilebileceğini düşündüğünüz için bir hipotez oluşturmanız gerekir.

Neye ulaşmak istediğinizi netleştirmenize ve bazı somut hedefler belirlemenize yardımcı olması için hipotez oluşturucumuzu kullanabilirsiniz.

Adım #2: Neyin Test Edileceğini Belirleyin

Ardından, hangi öğelerin test edileceğine ve hangi varyasyonların mevcut sonuçlarınızı iyileştirebileceğini düşündüğünüze karar verin.

Örneğin, ekranın üst kısmındaki 'temel öğeleri' test etmenin dönüşümleri artıracağını düşünebilirsiniz, bu nedenle başlığı, kahraman çekimini ve CTA düğmesi metnini test etmek isteyebilirsiniz.

Adım #3: Test Zaman Çerçevesini Hesaplayın

Testi çalıştırmadan veya herhangi bir varlık oluşturmadan önce, bu testin çalıştırılması için zaman çerçevesini ve trafik gereksinimlerini tahmin edebilmeniz için bir ön test örnek boyutu hesaplaması yapmanızı öneririz. Bu, tekrarlayan trafiğinizle kaç tane varyasyonu uygulanabilir bir şekilde çalıştırabileceğinize ve yine de hızlı sonuçlar alabileceğinize dair bir fikir vermenize yardımcı olacaktır. (Veya daha az seçeneği test etmeniz gerekiyorsa size bildirin).

Yukarıdaki örnekte 3 öğeniz var: başlık, kahraman çekimi ve CTA düğmesi metni.

Her biri için tek bir varyasyonu test etmek istiyorsanız, bu 2x2x2=8 kombinasyon olacaktır. Bunu bilerek, ne kadar trafiğe ihtiyacınız olduğunu anlamaya başlayabilirsiniz.

Mevcut haftalık sayfa trafiğinizi ve dönüşüm oranınızı hesap makinesine girin (güç ve güven ayarlarıyla birlikte).

Ardından, test etmek istediğiniz sayfa sayısını ayarlayın. (bu örnekte 8)

Bu size minimum kaldırmayı tespit edebilmek için ne kadar süre koşmanız gerektiğine dair bir zaman çerçevesi verecektir.

4. Adım: Testi Oluşturun

Ardından, aracınıza gidin ve çok değişkenli testiniz için farklı sürümleri ve kombinasyonları ayarlayın.

Çok değişkenli test seçeneğini seçerek başlayın.

Bir ad verin ve ardından test etmek istediğiniz sayfanın URL'sini ekleyin (böylece araç, WYSIWYG düzenlemeleri için onu çekebilir.)

Bu örnekte, ana sayfa dönüşüm oranımızı iyileştirmeye çalışacağız.

Sayfa araca yüklendiğinde, test öğelerinizi ayarlamanız gerekir.

Burada Convert'te, çok değişkenli testlerde düzenlenecek parçalar için 2 adlandırma dönüşümü kullanıyoruz:

• Başlık veya CTA gibi sayfadaki test etmek istediğiniz öğeye atıfta bulunan Bölüm ve
• Söz konusu öğeyi düzenlemeniz olan Varyasyon.

Her varyasyonu düzenlemek ve eklemek için her seferinde bir bölüm seçmenizi öneririm.

Bölüme 'Başlık' gibi bir ad verin, ardından devam edin ve o bölümün varyasyonlarını düzenleyin ve ekleyin. (Üzerinde çalışırken her varyasyonu kaydettiğinizden emin olun.)

Ardından, test etmek istediğiniz bir sonraki 'bölüme' veya öğeye geçin. Bu örnekte, başka bir arka plan kahraman çekimi ayarlanacak ve ardından bir CTA düğmesi metin varyasyonu ayarlanacaktır.

Adım 5: Her Şeyin Çalıştığından Emin Olun

Her varyasyonu ayarladıktan sonra, hepsinin çalıştığından ve her bir unsurun mantıklı bir şekilde birbirine uyduğundan emin olmak için her yeni tedavide bir QA testi yapın. (Rakip CTA'lar veya uyumsuz bilgi/görüntüler yok veya yazı tipi rengi ve düğmelerini ikiye katlayın.)

'Kaydet ve devam et' üzerine tıklayın, yeni bir sayfa yüklenecektir. Ardından, devam edin ve “Raporlar” sekmesine tıklayın.

Buradan sayfa varyasyonlarını ve bunlarla ilgili bilgileri göreceksiniz. Ön izlemesini görmek ve bağlantıların çalışıp çalışmadığını test etmek için her sayfanın yanındaki 'göz simgesine' tıklayın.

Buradan bir KG testi çalıştırabilir ve aynı URL'yi mobil testler için kullanabilirsiniz.

Adım #6: Canlı Yayına Aktarın

Her varyasyon çalıştığı sürece, artık testi başlatabilir ve yeterli veriye sahip olana kadar çalışmasına izin verebilirsiniz.

(Testi doğrudan KG testlerini açtığınız rapor sayfasından canlı yayınlama seçeneği olduğuna dikkat edin.)

Optimizasyon Programınızı Olgunlaştırmak için En İyi Çok Değişkenli Test Araçları

Artık çok değişkenli testin nasıl çalıştığını anladığınıza göre, piyasadaki çok değişkenli test sunan web sitesi optimizasyon platformlarını inceleyelim. Ücretsiz denemeler ve birkaç başka ayrıntı sunarlarsa, özelliklerini fiyatlandırmalarıyla birlikte ele alacağız.

Bunu yapmadan önce hızlı bir şey.

Kullandığınız aracın SADECE onu kuran kişi kadar iyi olduğunu unutmayın. Nakit akışı sıkıysa, önce dahili olarak yardımcı olacak (veya harici bir ajansa ulaşacak) birine yatırım yapın ve şimdilik daha ucuz bir araç kullanın.

Harika bir MVT test aracına sahip olmak çok iyi, ancak kişi onu doğru, yeterince hızlı kuramazsa veya verileri anlayamazsa anlamsızdır!

#takımovertools

1. Deneyimleri Dönüştür

G2 Puanı : 4.7/5.0 (46 İnceleme)

Fiyatlandırma: Ayda 699$'dan başlayan fiyatlarla, bundan sonra her 100.000 ziyaretçi için 199$.

Ücretsiz bir plan veya deneme sunuyorlar mı? Evet, kredi kartı gerekmeden 14 günlük ücretsiz deneme.

100.000 ziyaretçi başına maliyet: 199 $.

Artıları

• Tamamen gizlilik uyumlu: hiçbir kişisel veri saklanmaz
• 1. taraf çerezlerin kullanımı nedeniyle doğru raporlama
• Hızlı ve titreşimsiz
• Sınırsız test çalıştırın
• Ayrıntılı hedef kitle segmentlerini hedeflemek için 40'tan fazla filtreyle koşul yığınlaması
• Proje, deneme ve varyasyon seviyelerinde esnek JavaScript ekleme
• Özel JS koşulu hedefi tetikleme
• 100'den fazla 3. taraf araçla entegre olur (ör. Shopify, WordPress, Mixpanel, Hotjar)
• Telefon, e-posta ve sohbet yoluyla 4 kat daha hızlı, insan müşteri desteği.

Eksileri

• Kickstart planında temel gönderi segmentasyonu

Çok Değişkenli Test Özellikleri : Tam faktöriyel. Ayrıca bu testleri çalıştırırken doğrudan destek ve tavsiye sunuyoruz.

İstemci Tarafı, Sunucu Tarafı veya Her İkisi mi? Convert, istemci tarafı WYSIWYG düzenleyicisi olarak çalışır, ancak sunucu tarafında da kurulabilir ve özel JS çalıştırılabilir.

Enterprise'a hizmet ediyorlar mı? Evet. Sony, Jabra, Unicef ​​ve diğerleri gibi şirketler için tercih edilen araç biziz.

Müşteri desteği sunuyorlar mı? Evet, davanın başlangıcından itibaren. Ne tür? Daha fazlası ile canlı sohbet, blog ve bilgi tabanı.

Gizliliğe önem veriyorlar mı? Tamamen GDPR ile uyumluyuz. GDPR'ye uymayan diğer şirketlerin dahili çalışmalarımız için araçlarını kullanmayı bile bıraktık, bu bizim için çok önemli.

Dünyayı umursuyorlar mı? Evet. DNA'mızda var. Ağaç dikiyoruz, topluluk programları yürütüyoruz, ilk başvurudan itibaren çeşitliliği savunuyoruz, hayır kurumlarına bağış yapıyoruz ve çok daha fazlasını yapıyoruz. Heck, biz 15x karbon negatifiz.

TrustRadius İncelemesi:

2. AB Lezzetli

G2 Puanı: 4.5/5.0 (76 İnceleme)

Fiyatlandırma: Essentials planı için aylık 400 bin test edilmiş ziyaretçi için aylık 1900 ABD Doları'ndan başlar. Büyüme planı ayda 3800 ABD doları tutarken, Elit plan ayda 5700 ABD dolarından başlar.

Ücretsiz bir plan veya deneme sunuyorlar mı? Hayır. Yeni özelliklerini görmek için demo arama talebinde bulunabilirsiniz.

100.000 ziyaretçi başına maliyet: Yaklaşık 475 dolar.

Artıları:

• Optimizasyonda yerleşik olarak bulunan AI ve ML
• Sınırsız deneme çalıştırın
• Temiz ve kullanımı kolay kullanıcı arayüzü
• Kurulumu ve önizleme testleri kolay
• Dinamik Widget'lar
• Çoklu entegrasyonlar
• Kapsamlı analiz raporları
• Kişiselleştirmenin yanı sıra çok çeşitli hedefleme seçenekleri mevcuttur
• Güvenilir müşteri desteği
• Fiyatlandırma orta seviye

Eksileri:

• Kitle performansı hakkında fikir verecek (özellikle aktif bir deneme için) pazarlama otomasyonu yoktur ve bazen görmek için müşteri desteği gerekir.
• İstatistiksel Önem hesaplayıcı, UX'inde biraz temeldir
• Google Analytics entegrasyonu karmaşıktır, kodlama gerektirir
• Ücretsiz deneme yok

Çok Değişkenli Test Özellikleri: Tam Faktöriyel

İstemci Tarafı, Sunucu Tarafı veya Her İkisi mi? İkisi birden

Frekansçı mı yoksa Bayesian mı? Bayes.

Full Stack'i destekliyor mu? Evet.

Temel Web Verileri Hazır mı? Evet. Bu araç hızlı yüklenir.

ML veya AI var mı? Evet.

Enterprise'a hizmet ediyorlar mı? Evet. Disney, L'Oreal, Kalviyo ve diğerleri gibi şirketler için tercih edilen araçlardır.

Müşteri desteği sunuyorlar mı? Evet. Bir bilgi tabanına ve canlı sohbete sahipler.

Gizliliğe önem veriyorlar mı? Evet. Kullanıcı IP adresleri bir kimlik kodu oluşturmak için kullanılır ve ardından araca geçmeden hemen silinir. Kimlik kodları anonimleştirilir ve 13 ay sonra silinir.

Dünyayı umursuyorlar mı? Doğrudan STK'lara bağışta bulunuyorlar, sosyal eylem gruplarıyla çalışıyorlar, geri dönüştürüyorlar ve arı kovanlarına sponsor oluyorlar.

TrustRadius İncelemesi :

Bu çok değişkenli test aracı çalışırken nasıl görünür:

3. Google Optimize ve Optimize 360

G2 Derecelendirmesi: 4.3/5.0 (27 İnceleme)

Fiyatlandırma : Bu aracın 2 versiyonu vardır. Optimize ücretsizdir, ancak gelişmiş özellikler için Google Optimize 360'ı seçmeniz gerekir.

Optimize 360 ​​için fiyatlandırma özeldir (yılda yaklaşık 150.000 dolar olduğu söylense de). Aylık fiyatınızı almak için satış ekibiyle iletişime geçmek için bir form doldurmanız gerekir.

Ücretsiz bir plan sunuyorlar mı? Evet.

100.000 ziyaretçi başına maliyet: Yok

Artıları:

• Kullanıcı dostu — az teknik bilgi gerekli
• İlk kez A/B testi yapanlar için harika
• Google Analytics ile hızlı entegrasyon
• Google'ın devasa veri kaynakları sayesinde süper ayrıntılı bir kitle segmentasyonuna sahiptir

Eksileri:

• Ücretsiz kullanımda aynı anda 5 testle sınırlıdır
• Sürükle ve bırak düzenleyici işlevi yok
• Resimlerinizi doğrudan yükleyemiyorum
• Uygulamalar test edilemez, yalnızca tarayıcılar
• Karmaşık testler için uygun değil
• UI/UX ve raporlar, piyasadaki diğer araçların çoğu kadar görsel olarak çekici değil
• Titreme bazen oluyor.

Çok Değişkenli Test Özellikleri: Görünüşe göre Optimize, ne tam faktöriyel ne de kesirli olmayan hibrit bir yaklaşım kullanıyor. Destek tabanlarına göre

“Modellerimiz hibrit bir yaklaşım kullanmamıza izin veriyor, bu yüzden bu ödünü vermenize gerek yok. Bir testin tüm kombinasyonlarını sunuyoruz, böylece etkileşimler ve en iyi kombinasyonlar hakkında bilgi edinebilirsiniz. Ancak, bazı varyantların kombinasyonlar arasında ortaya çıktığı gerçeğini de modelliyoruz - ve böylece sadece kombinasyonları değil, bir faktör içindeki varyantları da öğrenebiliyoruz”

İstemci Tarafı, Sunucu Tarafı veya Her İkisi mi? İkisi birden.

Frekansçı mı yoksa Bayesian mı? Google Optimize, Null Hipotez Önem Testi (NHST) olarak da bilinen Frequentist yöntemler yerine Bayes yöntemlerini kullanır.

Full Stack'i destekliyor mu? Evet.

Temel Web Verileri Hazır mı? Evet. Bu araç hızlı yüklenir, ancak titreyerek CLS sorunlarına neden olabilir.

ML veya AI var mı? Numara.

Enterprise'a hizmet ediyorlar mı? Evet, ancak yalnızca Optimize 360 ​​aracılığıyla.

Müşteri desteği sunuyorlar mı? İpuçları, video eğitimleri, yardım topluluğu ve daha fazlasını içeren bir kaynak merkezlerine sahiptirler.

Gizliliğe önem veriyorlar mı? Ürünlerinin kullanıldığı ülkelerdeki geçerli veri koruma yasalarına uyarlar.

Ayrıca, kullanıcıların verilerini güvende tutmak için üçüncü taraflarla ve veri koruma yetkilileriyle birlikte çalışırlar.

Dünyayı umursuyorlar mı? Google, 2007'den beri karbon nötrdür ve 2030'a kadar karbonsuz olmayı planlıyor. Bunun dışında, 1 milyar dolarlık taahhütleriyle sayısız hayırsever jestleriyle tanınıyorlar.

TrustRadius İncelemesi :

Bu MVT test aracı çalışırken nasıl görünür:

4. Adobe Hedefi

G2 Derecelendirmesi: 4.0/5.0 (29 İnceleme)

Fiyatlandırma : Yalnızca 11 parçalık bir form, bir e-posta ve bir aramadan sonra kullanılabilir. Başlangıç ​​ücreti ayda 10.000 $ 'dır.

Ücretsiz bir plan veya deneme sunuyorlar mı? Numara.

100.000 ziyaretçi başına maliyet: Yok

Artıları

• Arayüz kullanımı kolaydır
• Doğru gerçek zamanlı veri raporları sağlar
• Adobe Analytics ile iyi bir şekilde bütünleşir ve bir üst satış teklifi olarak tasarlanmıştır
• Hem yeni başlayanlar hem de uzmanlar için web sitesi kişiselleştirme araçları
• Kurulum ve test sürecinde size yol gösterir
• Kampanyaları ve kişiselleştirmeyi sürekli olarak test etmek ve iyileştirmek için gelişmiş yapay zekaya sahiptir

Eksileri

• Büyük ölçekte optimizasyon yapmak yavaş olabilir
• En iyi şekilde çalışması için çok yüksek trafik hacmi gerektirir
• Form tabanlı düzenleyici bir öğrenme eğrisi gerektirir
• Yüksek fiyat noktası
• Deneme seçeneği yok
• Adobe Analytics'i zaten kullanırken en iyi sonucu verir
• Diğer ücretli Adobe Marketing Cloud araçlarına bağlandığında harika bilgiler edinebilir

Çok Değişkenli Test Özellikleri: Tam Faktöriyel ve Taguchi (kısmi faktöriyel yöntemi olarak).

İstemci Tarafı, Sunucu Tarafı veya Her İkisi mi? İkisi birden.

Enterprise'a hizmet ediyorlar mı? Evet. Neredeyse sadece maliyet nedeniyle.

Müşteri desteği sunuyorlar mı? Evet, bilgi tabanı ve video eğitim programları şeklinde.

Gizliliğe önem veriyorlar mı? Evet, ancak ironik bir şekilde, bu konuda daha fazla bilgi edinmek için e-postanıza ve telefon numaranıza ihtiyaç duyuyorlar. Bununla birlikte, müdahaleci olmayan izleme için 1. taraf verilerinde çok fazla iş yapıyorlar.

Dünyayı umursuyorlar mı? Çok çok. Çeşitliliği savunuyorlar, %100 yenilenebilir enerji binaları için çalışıyorlar, emisyonları düşürüyorlar, topluluk eylem programları yürütüyorlar ve çok daha fazlası.

TrustRadius İncelemesi :

Bu çok değişkenli test aracı çalışırken nasıl görünür:

5. Kameleon

G2 Puanı: 4.7/5.0 (24 İnceleme)

Fiyatlandırma : İhtiyaçlarınıza göre özelleştirilmiş. Satış ekibiyle iletişime geçerek benzersiz fiyatınızı alırsınız.

Ücretsiz bir plan sunuyorlar mı? Evet.

100.000 ziyaretçi başına maliyet: Yok

Artıları

• Kurulumu kolay tıklama izleme
• Diğer birçok araçla sorunsuz entegrasyon
• Geliştirici olmayanlar için kullanımı kolay bir WYSIWYG düzenleyicisine sahiptir
• Gelişmiş titreme önleme teknolojisi
• Bilgili ve yardımsever destek ekibi
• Testlerin doğru ve detaylı planlanması ve yürütülmesi

Eksileri

• WYSIWYG düzenleyicisi yavaş yükleniyor
• Raporlama panosu biraz daha kişiselleştirme kullanabilir
• Bazı karmaşık senaryoları uygulamak için geliştirici düzeyinde beceriye ihtiyacınız var
• Testler arşivlenemiyor
• IE7 gibi eski tarayıcılar testlerin dışında tutuluyor

Çok Değişkenli Test Özellikleri: Tam Faktöriyel ve Kesirli Faktöriyel (test kurulumundaki tahsisler aracılığıyla).

İstemci Tarafı, Sunucu Tarafı veya Her İkisi mi? İkisi birden. WYSIWYG düzenleyicide düzenlemeler yapabilir ve ayrıca CSS ve JS'yi düzenlemek için Kameleoon'un yerleşik kod düzenleyicisini kullanabilirsiniz.

Enterprise'a hizmet ediyorlar mı? Evet. Lexus, Unity, Providence, Toyota ve Rakuten Kameleoon kullanıyor.

Müşteri desteği sunuyorlar mı? Evet. Karmaşık projelerde size yardımcı olması için özel bir hesap yöneticisi bile alabilirsiniz.

Gizliliğe önem veriyorlar mı? HIPAA, GDPR ve CCPA uyumludur. Ayrıca, her A/B testi için gizlilik politikanızı uyarlamak için esnek bir izin yönetimi özelliğine de sahiptirler.

Dünyayı umursuyorlar mı? Destekledikleri herhangi bir hayır kurumuna veya destekledikleri çevresel nedenlere dair kanıt bulamadım. Yine de Almanya ve Fransa ofislerinde iki canlı bukalemun olduğunu bilmek ilginç.

TrustRadius İncelemesi :

Bu MVT test aracı çalışırken nasıl görünür:

6. Optimize

G2 Puanı: 4.3/5.0 (109 İnceleme)

Fiyatlandırma : Özel bir fiyatlandırma modeli kullanıyorlar. Ancak Splitbase, yılda en az 36.000 dolara mal olduklarını tahmin ediyor.

Ücretsiz bir plan sunuyorlar mı? Hayır. Ücretsiz planı 2018'de durdurdular.

100.000 ziyaretçi başına maliyet : Yok

Artıları:

• Sınırsız deneme çalıştırın
• Temiz ve kullanımı kolay kullanıcı arayüzü
• Widget özelliğinin kullanımı eğlencelidir
• Çok çeşitli gelişmiş hedefleme seçenekleri mevcuttur
• Güvenilir müşteri desteği

Eksileri:

• Kitle performansı hakkında otomatik bilgi sağlamaz (özellikle aktif bir deneme için)
• Google Analytics entegrasyonu karmaşıktır, kodlama gerektirir
• Optimizely snippet genellikle sayfa yükleme süresini artırır

Çok Değişkenli Test Özellikleri: Tam Faktöriyel, Kısmi ve Taguchi.

İstemci Tarafı, Sunucu Tarafı veya Her İkisi mi? İkisi birden. Javascript snippet'i aracılığıyla istemci tarafında deneme ve geliştirici SDK'ları aracılığıyla sunucu tarafında denemeyi optimize bir şekilde sunar.

Frekansçı mı yoksa Bayesian mı? Optimizely'nin İstatistik Motoru, diğer platformlarda göreceğiniz sabit ufuklu deneyleri değil, sıralı deneyleri kullanır.

Full Stack'i destekliyor mu? Evet.

Temel Web Verileri Hazır mı? Evet, bu araç hızlı yüklenir.

ML veya AI var mı? Evet.

Enterprise'a hizmet ediyorlar mı? Fiyatlandırma nedeniyle, çoğunlukla kurumsal bir düzeye hitap eder. Microsoft, IBM, HP, eBay, Yamaha, Pizza Hut ve Atlassian gibi markalar bunu kullanıyor.

Müşteri desteği sunuyorlar mı? Evet. Kullanıcıların sıkıntıdan kurtulmalarına yardımcı olacak bir kaynak bankasına ve 7/24 yardım için arayabilecekleri telefon numaralarına sahipler.

Gizliliğe önem veriyorlar mı? Eski ve yeni gizlilik yasalarını dikkate alırlar ve bunu ürünlerine entegre ederler, böylece kullanıcı olarak uyumluluk konusunda endişelenmenize gerek kalmaz.

Dünyayı umursuyorlar mı? Yeni işe alınanların çoğu ikinci günlerinde topluluğa gönüllü olarak gönderilir.

TrustRadius İncelemesi :

Bu çok değişkenli test aracı çalışırken nasıl görünür:

7. SiteSpect'i

G2 Derecelendirmesi: 4.4/5.0 (50 İnceleme)

Fiyatlandırma : İhtiyaçlarınıza göre özelleştirilmiş bir fiyat için SiteSpect ile iletişime geçmeniz gerekecektir.

Ücretsiz bir plan sunuyorlar mı? Evet, ücretsiz deneme sunuyorlar.

100.000 ziyaretçi başına maliyet: Yok

Artıları:

• Tüm biçimlendirme dillerini (HTML, WML, XML ve JSON), stil sayfalarını ve komut dosyası dillerini destekler
• Javascript etiketi olmaması, içerik yenileme veya titreme olmadığı anlamına gelir
• Neredeyse her senaryoyu test edecek kadar çok yönlü
• Müdahaleci olmayan test
• Analitik araçlarıyla entegre olur
• Kodunuzun üretim sürümünü değiştirmenize gerek yok

Eksileri:

• Testleri uygulamak için gerekli teknik bilgi
• Sitenizi biraz yavaşlatabilecek fazladan bir atlama ekler
• Raporlama arayüzü daha iyi olabilirdi

Çok Değişkenli Test Özellikleri: Tam Faktöriyel ve Kesirli Faktöriyel (128'den fazla kombinasyonu test ediyorsanız, araç kesirliye geçmenizi önerir).

İstemci Tarafı, Sunucu Tarafı veya Her İkisi mi? İkisi birden.

Frekansçı mı yoksa Bayesian mı? SiteSpect, güven aralıklarının örtüşmediği noktayı belirlemek için Varyasyonları Kontrollerle karşılaştırırken iki kuyruklu bir t testi kullanır ve bu nedenle önem gösterir. SiteSpect ayrıca z puanını hesaplar ve bunu raporlarda kullanır.

Full Stack'i destekliyor mu? Evet.

Temel Web Verileri Hazır mı? Evet. Bu araç inanılmaz derecede hızlı.

ML veya AI var mı? Evet.

Enterprise'a hizmet ediyorlar mı? Evet. Staples, PetSmart, AmericanGirl ve Urban Outfitters, SiteSpect'i kullanır.

Müşteri desteği sunuyorlar mı? Müşteri desteği, ücretsiz ve ücretli sürümler için telefon görüşmesi ve e-posta yoluyla sağlanır. Ayrıca bilgi tabanlarında önceden kaydedilmiş web seminerleri de mevcuttur.

Gizliliğe önem veriyorlar mı? Onlar yapar. PCI DSS 3.2 sertifikalıdırlar; GDPR, CCPA ve gizlilik kalkanı uyumlu ve HIPAA'ya hazır.

Dünyayı umursuyorlar mı? SiteSpect'in 2014'ten beri bazı hayır projelerine sponsor olduğu biliniyor.

TrustRadius İncelemesi :

Bu çok değişkenli test aracı çalışırken nasıl görünür:

8. VWO Testi

G2 Değerlendirmesi: 4.2/5.0 (239 İnceleme)

Fiyatlandırma : 99 $/ay'dan başlar. Daha fazlası, ihtiyaçlarınıza göre özelleştirilmiş fiyatlandırma gerektirir. Ve sizinki için VWO satış ekibiyle iletişime geçmeniz gerekecek.

Ücretsiz bir plan sunuyorlar mı? Evet, 30 günlük ücretsiz deneme ile başlayabilirsiniz.

100.000 ziyaretçi başına maliyet: ~500$

Artıları:

• Testinizi birçok senaryoya uyarlamak için esnek özelleştirme seçenekleri
• Az kodlama bilgisi ile testleri planlamak ve yürütmek kolay
• Her türlü zorlukta size rehberlik edecek özel destek ekibi
• Uzun vadeli hedefleri takip etme yeteneğine sahiptir
• Testleri birlikte gruplayabilme
• Kullanıcıları gözlemlemek ve sorun gidermek için faydalı kayıtlar

Eksileri:

• VWO'nun tam işlevselliğini anlamak için bir öğrenme eğrisi var
• Fiyatlandırma planları sık sık değişir
• Sadece müşteri tarafını test ediyorlar

Çok Değişkenli Test Özellikleri: Tam Faktöriyel (ancak sayfa varyasyonu başına trafik yüzdeleri ayarlayabilirsiniz).

İstemci Tarafı, Sunucu Tarafı veya Her İkisi mi? Sadece müşteri tarafı.

Enterprise'a hizmet ediyorlar mı? Evet. Kurumsal müşterileri arasında Ubisoft, AMD, Penn Foster, Optimeria ve IMB Bank bulunmaktadır.

Müşteri desteği sunuyorlar mı? Evet, yardıma ihtiyacınız olduğunda onları arayabilirsiniz. Veya kaynak sayfalarına bakın.

Gizliliğe önem veriyorlar mı? Evet. Başlıca gizlilik yasalarına ve düzenlemelerine uyarlar ancak bazı ziyaretçi verilerini sunucularında depolarlar.

Dünyayı umursuyorlar mı? Son zamanlarda, Wingify'ın (VWO'nun arkasındaki marka) başkanı Paras Chopra, Delhi'de 10 yataklı bir COVID bakım tesisi kurmak da dahil olmak üzere birkaç COVID yardım girişimine desteklerini tweetledi.

TrustRadius İncelemesi :

Bu MVT test aracı çalışırken nasıl görünür:

9: Web Trendleri Optimize Edin

G2 Puanı: 4.9/5.0 (107 İnceleme)

Fiyatlandırma : Ayda 212 dolardan başlar, ancak neye ihtiyacınız olduğuna bağlı olarak daha düşük veya daha yüksek olabilir. Çok esnek bir fiyatlandırma yapıları var, ancak fiyatınızı teyit etmek için satış ekipleriyle konuşmanız gerekiyor.

Ücretsiz bir plan sunuyorlar mı? Evet, ayda 1.500'den az seans için.

100.000 ziyaretçi başına maliyet: Yok

Artıları:

• Kullanıcı dostu, teknik bilgisi olmayan kullanıcılar için uygun, WYSIWYG düzenleyicisi ile
• Ekip işbirliğini destekler
• Veriye dayalı içgörüler sağlar
• Destek ekibi başarınıza gerçekten ilgi gösteriyor
• Web siteniz ve mevcut araçlarla sorunsuz entegrasyon
• Açık ve anlaşılır raporlar

Eksileri:

• Kullanıcı arayüzünün yeni kullanıcılar için kullanımı zor olabilir
• Basit testleri ayarlamak bile zaman alır
• Tam hizmetin maliyeti yüksek tarafta

Çok Değişkenli Test Özellikleri: Tam Faktöriyel ve Kesirli Faktöriyel.

İstemci Tarafı, Sunucu Tarafı veya Her İkisi mi? İkisi birden. İstemci tarafı işleme ve sunucu tarafı test yetenekleri için proxy'siz bir görsel düzenleyiciye sahiptirler.

Enterprise'a hizmet ediyorlar mı? Microsoft, Londra Kuzey Doğu Demiryolu, Marks and Spencer ve Virgin Wines, Optimize'ı kullanır.

Müşteri desteği sunuyorlar mı? Evet. Teknik desteğe, eğitime ve kendi özel dönüşüm optimizasyon danışmanınıza erişebilirsiniz.

Gizliliğe önem veriyorlar mı? Bunlar tamamen GDPR uyumludur.

Dünyayı umursuyorlar mı? Nisan 2021'de Webtrends Optimize, Cancer Research UK için fon toplamak amacıyla bir GoFundMe etkinliğinde günde 100 Şınav çekme konusunda meydan okudu. Ve 2020'de Xmas Charity Bağışları adlı benzer bir şey yaptılar. Yani umursuyorlar.

Güven Yarıçapı İncelemesi :

Bu araç için Trust Radius'ta incelemeler olmasına rağmen, en son Aralık 2019 ve ondan önce 2018'di. Bir araç değişebileceğinden ve hizmet de değişebileceğinden, en son incelemelerini G2'den aldım.

Bu çok değişkenli test aracı çalışırken nasıl görünür:

Çözüm

İşte orada.

2021'de çok değişkenli testler sunan en iyi A/B test araçları listemiz. Ayrıca test etmek için hangi yöntemi kullandıklarını, özelliklerini, fiyatlarını ve incelemelerini de gösteriyoruz.

Artık bu farklı parametreler arasında en iyi çok değişkenli araçları karşılaştırabilir ve test ihtiyaçlarınız için en uygun olanı seçebilirsiniz.