다음 테스트에 영감을 주는 26가지 A/B 테스트 예제

게시 됨: 2022-02-01
다음 테스트에 영감을 주는 26가지 A:B 테스트 예제

A/B 테스트를 하다 보면 2004년 Jeff Bezos의 유명한 인용문을 접했을 것입니다.

연간 실험 횟수를 두 배로 늘리면 창의력도 두 배가 됩니다.

다 좋은데 무엇을 테스트해야 할지 모르겠다면?

A/B 테스트가 비즈니스 성장으로 이어질 수 있는 통찰력을 풀고 수익 창출에서 새로운 기록을 세울 수 있다는 것을 알고 있지만 문제는 앉아서 웹사이트, 랜딩 페이지, 이메일 등에서 무언가를 테스트하고 공백이 될 때입니다.

최적화의 기회는 어디에 있습니까?

다행히 다른 사람에게서 힌트를 얻을 수 있습니다. 마케팅에서 A/B 테스트가 성공을 거두고 기업의 전환율을 높이는 데 도움이 된 예가 있습니다.

이러한 예는 전환율 최적화 여정을 위한 발판이 될 수 있습니다. 즉, 성공적인 가설에 더 가까워질 수 있도록 일련의 생각을 촉발할 수 있습니다.

나는 당신과 관련된 것으로 분류하여 깊이 파고 그 중 가장 좋은 것을 뽑아 냈습니다. 산업별 또는 채널별. 테스트 아이디어를 제공하고 자신의 성공 사례에 영감을 주는 A/B 테스트 패턴을 찾는 데 도움이 되는 정보를 얻을 수 있습니다.

숨다
  • A/B 테스트 예제에서 최대한의 통찰력을 추출하는 방법
  • 자신의 테스트에서 배우고 영감을 주는 A/B 테스트 예제
    • B2B A/B 테스트 예
      • Csek Creative: 홈페이지 태그라인 테스트
      • 고층: 가입 페이지 헤드라인
      • Techinsurance.com: 방문 페이지 전환
    • DTC A/B 테스트 예
      • NuFace: 인센티브 테스트
      • 고급 수제 유리 브랜드: 무료 배송 수익성
      • Vancouver 2010 Olympic Store: 단일 페이지 대 다단계 결제
    • 전자상거래 A/B 테스트 예
      • Lampenlicht.nl: 제품 이미지 아래의 사양
      • 온라인 그루밍 스토어: 구매 안내 제공
      • 버튼 텍스트: 장바구니에 추가 vs 장바구니에 추가
    • NGO A/B 테스트 예
      • Kiva.org: 접힌 부분의 기부 시작 페이지
      • 존 C. 쿡: 텍스트 대 비디오
    • SaaS A/B 테스트 예
      • Earth Class Mail: 방문 페이지 최적화
      • HubSpot: 사이트 검색 기능
      • Netflix: 추천 비디오 아트워크
    • A/B 테스트 방문 페이지
      • Humana: 랜딩 페이지 배너
      • Brookdale Living: 시각적 요소
      • 방문 페이지 양식 위치
    • A/B 테스트 이메일 예
      • Designhill.com: 이메일 헤드라인 스타일
      • "메리 크리스마스" vs "해피 홀리데이" 이메일 헤드라인
      • Microsoft: 이메일 색 구성표
    • A/B 테스트 PPC 예
      • Adspresso: Facebook 광고 카피
      • Sony: 맞춤형 배너 광고
      • PPC 광고: CTA 카피
    • A/B 테스트 Shopify 예제
      • Oflara: 메가 메뉴
      • BattlBox: 개인화된 전자상거래 콘텐츠 마케팅 전략
      • 별점 vs 별점 없음
  • 결론

A/B 테스트 예제에서 최대한의 통찰력을 추출하는 방법

시작하기 전에 A/B 테스트 예제에 대한 올바른 기대치를 설정하고 올바르게 사용하는 방법을 알아보겠습니다.

경쟁자나 다른 사람이 무엇을 하고 있는지 확인하고 스스로 생각하는 것은 쉽습니다. 정확히 그렇게 하고 무슨 일이 일어나는지 지켜보겠다”고 말했다.

그것은 당신을 위해 작동하지 않을 가능성이 있습니다. 고유한 비즈니스 모델, 청중 및 브랜드에 맞지 않는 것을 테스트하는 데 리소스를 낭비하게 될 것입니다.

대신 그들이 하는 일에서 영감을 얻습니다. 승리한 테스트뿐만 아니라 패배한 테스트에서도 영감을 얻습니다.

그러나 우리가 정직하게 말하면, 통찰력이 가득 차 있음에도 불구하고 실패한 테스트에 대한 이야기를 거의 듣지 못합니다. 적어도 테스터는 작동하지 않는 것을 배웠습니다.

이러한 예에서 영감을 얻고 테스트한 솔루션의 요소를 사용하여 가설을 개발하십시오(수행한 정성적 및 정량적 연구와 일치하는 경우). 그런 다음 A/B 테스트를 실행하여 원하는 측정항목이 이동하는지 확인합니다.

이러한 A/B 테스트 사례 연구는 고정관념에서 벗어나 생각하는 데 도움을 주기 위한 것이며, 가장 중요한 것은 연구를 통해 수집하는 이질적인 데이터 포인트가 특정 솔루션과 얼마나 자주 연결될 수 있는지 확인하는 것입니다.

그 자체로는 고립된 사건처럼 보일 수 있지만 종합하면 특정 솔루션 추세가 작동하는 이유가 됩니다. 이는 종종 "모범 사례"를 발생시킵니다. 하지만 앞서 말했듯이 이것을 복사하여 붙여넣는 것이 아니라 고유한 경우에만 적용해야 합니다.

따라서 요소와 솔루션이 DTC 또는 B2B 산업에서 제공되거나 PPC 캠페인 또는 이메일 뉴스레터에 사용되었는지 여부에 관계없이 향상 및 결과를 추적하면 패턴 을 볼 수 있습니다. (이것은 GoodUI에서 Jakub Linowski가 수행한 작업의 기초입니다).

이러한 패턴은 다음 번 큰 통찰력을 불러일으키고 실험 프로그램을 새로운 승리로 이끌 수 있습니다.

자신의 테스트에서 배우고 영감을 주는 A/B 테스트 예제

아래의 모든 A/B 테스트 예는 서비스를 제공한 산업과 실행한 채널에 따라 다양한 범주로 나뉩니다.

업종별 A/B 테스트 사례

다양한 산업 분야의 몇 가지 예부터 시작하여 이들 사이에 어떤 유사점을 그릴 수 있는지 살펴보겠습니다.

B2B A/B 테스트 예

Csek Creative: 홈페이지 태그라인 테스트

Csek은 "Csek Creative는 비즈니스에 합당한 결과를 제공하는 Kelowna 기반 디지털 대행사"라는 홈페이지 태그라인을 가진 디지털 대행사입니다.

카피 라이팅에 대한 경험이 있다면 그 라인의 모호함을 즉시 느낄 수 있습니다. 그것은 독자의 마음에 즉각적인 필요를 일으키지 않습니다. 그래서 사람들이 페이지에서 이탈한 이유일 수 있습니다.

그리고 Csek은 이탈률을 낮추기를 원했습니다. 그래서 목표는 태그라인이 범인인지 테스트하는 것이었습니다.

가설: 사이트의 다른 페이지에 대한 이탈률과 클릭률이 개선되는지 알아보기 위해 제공되는 서비스에 대해 더 설명적이고 구체적인 태그라인을 변경합니다.

"B" 태그라인은 "Csek Creative는 기업의 온라인 및 오프라인 마케팅 요구 사항을 지원하는 디지털 대행사입니다."였습니다.

B2B A/B 테스트 예제 원본
이전 "A" 태그라인(출처)
B2B A/B 테스트 예시 변형
새로운 "B" 태그라인(출처)

업데이트된 텍스트는 600명 이상의 사이트 방문자에게 표시되었으며 Csek 사이트의 다른 페이지에 대한 클릭률이 8.2% 증가했습니다.

이를 통해 배울 수 있는 점: 사이트를 방문하는 첫 몇 초 동안 제공하는 제품에 대한 명확성은 매우 중요합니다. 온라인 청중은 모호함에 대한 내성이 낮고 당신이 하는 일을 알아내기 위해 칼로리를 소모하고 싶어하지 않습니다. 귀하의 홈페이지에서 이탈률이 올라가면 사람들이 귀하가 하는 일을 즉시 이해할 수 있는지 확인하십시오.

고층: 가입 페이지 헤드라인

Highrise는 더 많은 가입을 원했고 다양한 헤드라인과 부제목이 전환율에 얼마나 효과적인지 확인하기로 결정했습니다. 그래서 그들은 4000 페이지 뷰의 샘플에 대해 다변수 테스트를 실행하기로 결정했습니다.

가설: 서로 다른 이점을 강조하기 위해 헤드라인과 부제목을 변경하면 이러한 이점 중 하나가 원본보다 더 나은 성능을 보일 것입니다.

B2B A/B 테스트 예시 헤드라인 원본
원본은 "숨겨진 수수료 없음" 이점 강조 (출처)

변형:

B2B A/B 테스트 예시 광고 제목 변형 B
변종 B — 승자, 원본보다 30% 우수(출처)
B2B A/B 테스트 예시 광고 제목 변형 C
변형 C - 원본보다 27% 우수(출처)
B2B A/B 테스트 예시 광고 제목 변형 D
변형 D - 원본보다 15% 우수(출처)
B2B A/B 테스트 예시 광고 제목 변형 E
변형 E - 원본보다 7% 우수(출처)

우승자(원작보다 30% 더 나은 성과를 보인 사람)는 "30일 무료 평가판"과 가입 속도를 강조했습니다. 그리고 CTA 버튼은 매우 간단했습니다. "시작할 계획을 선택하세요".

이 다변수 테스트에서 알 수 있는 내용: 제품이나 서비스에 여러 가지 이점이 있는 경우 방문 페이지, 홈페이지 또는 가입 페이지에서 강조할 사항을 아는 것은 추측에 맡길 일이 아닙니다. A/B/n 테스트를 사용하여 한 번에 모두 테스트하고 대상 고객에게 가장 적합한 테스트를 확인하십시오.

Techinsurance.com: 방문 페이지 전환

Techinsurance.com은 클릭당 지불 캠페인에 대해 더 높은 전환율을 원했습니다. 원래 모든 트래픽은 웹사이트의 홈페이지로 연결되었습니다.

그래서 그들은 캠페인 전용 랜딩 페이지를 만들고 트래픽을 유도하고 웹사이트 홈페이지와 비교하여 실적을 보기로 결정했습니다.

가설: 전용 랜딩 페이지를 만들고 이 페이지로 트래픽을 유도하면 웹사이트의 홈페이지보다 전환율이 더 좋습니다.

B2B A/B 테스트 예시 랜딩페이지 전환 원본
홈페이지 홈페이지(출처)

변종:

B2B A/B 테스트 예시 방문 페이지 전환 변형
버전 B, 방문 페이지(출처)

PPC 캠페인을 위해 설계된 랜딩 페이지는 웹사이트 홈페이지보다 73% 더 나은 전환율을 보였습니다.

여기에서 배울 수 있는 점: 잠재 고객은 귀하의 메시지가 고객에게 직접적으로 말을 하는지 확인하기 위해 귀하의 웹사이트에 오래 머물지 않을 것입니다. "아, 더 있습니다."라는 즉각적인 불꽃이 있어야 합니다. 광고 캠페인의 실적을 개선하려면 PPC 광고로 유입되는 잠재고객에게 구체적으로 설명하는 지정된 방문 페이지를 테스트하십시오.

DTC A/B 테스트 예

NuFace: 인센티브 테스트

NuFace는 안티에이징 스킨케어 제품을 고객에게 직접 제공합니다. 그들은 사람들이 그들의 제품에 관심이 있지만 구매를 완료하는 사람이 많지 않다는 것을 발견했습니다. 그리고 이것은 온라인 프로세스를 성장시키고 판매를 개선하려는 NuFace의 목표와 일치하지 않았습니다.

가설: 총 주문 금액이 $75 이상일 때 고객에게 무료 배송 인센티브를 제공하면 더 많은 판매 및 주문 완료가 있을 것입니다.

DTC A/B 테스트 예제 제어
제어(출처)

변형: 그들은 인센티브가 사람들이 주문을 완료하도록 장려한다는 것을 발견했습니다. 90% 이상 더 많은 주문이 완료되었고 주문 가치가 7.32% 증가했습니다.

DTC A/B 테스팅 예시 챌린저
챌린저(출처)

이것에서 배울 수 있는 것: 특정 가격의 무료 배송 인센티브는 평균 주문 가치를 향상시킬 수 있습니다. 이것은 테스트할 가치가 있는 것입니다.

고급 수제 유리 브랜드: 무료 배송 수익성

고객에게 무료 배송을 제공하는 경우 해당 제안으로 여전히 수익성이 있다는 것을 어떻게 알 수 있습니까? 무료 배송 혜택이 없는 경우보다 무료 배송 혜택이 더 많다는 것을 어떻게 알 수 있습니까?

이것이 바로 이 고급 수제 유리 브랜드가 도움을 주기 위해 Brave One을 고용했을 때 알고 싶었던 것입니다.

가설: 무료 배송 서비스가 배송 비용을 상쇄하고 여전히 수익을 올릴 수 있을 만큼 충분한 수익을 가져오는가?

DTC A/B 테스트 예시 무료 배송 통제
제어(출처)

변종:

25,000명의 웹 방문자를 대조군과 도전자(무료 배송 프로모션 표시줄이 있는)로 50/50으로 나누고 15일 동안 실행했을 때 무료 배송 제안이 수익을 20% 증가시켰음을 발견했습니다. $16,000의 추가 수익입니다.

DTC A/B 테스트 예시 무료 배송 변형
프로모션 바가 있는 챌린저(출처)

여기 에서 배울 수 있는 점: 무료 배송은 확실히 전환율을 개선하지만 장기적으로 수익에 유익한지 테스트해야 합니다. A/B 테스트를 사용하면 가정에 따라 비즈니스를 운영할 필요가 없습니다.

Vancouver 2010 Olympic Store: 단일 페이지 대 다단계 결제

결제 프로세스를 여러 페이지로 분할해야 합니까 아니면 전체 프로세스에 대해 한 페이지만 사용해야 합니까? 이것이 전환율에 어떤 영향을 미칩니까? 이것이 밴쿠버 올림픽 공식 매장에 대한 이 테스트의 답변입니다.

가설: 다단계 결제 프로세스를 하나의 단일 페이지로 결합하면 더 많은 주문이 완료됩니다.

DTC A/B 테스트 예시 다단계 체크아웃
제어 — 다단계 프로세스(소스)

변형: 트래픽의 50%가 체크아웃 프로세스의 두 버전으로 이동하므로 300개의 트랜잭션으로 승자를 확인하기에 충분했습니다. 그러나 그들은 최대 606개의 트랜잭션을 실행하도록 했고 단일 페이지 체크아웃이 다단계 프로세스보다 21.8% 더 나은 성능을 보인다는 것을 발견했습니다.

DTC A/B 테스트 예시 다단계 체크아웃 변형
Challenger — 단일 단계 프로세스(출처)

여기에서 배울 수 있는 점: 모든 결제 프로세스가 동일한 방식으로 수행되는 것은 아닙니다. 이 목표 시장 및 제품 틈새 시장의 경우 테스트 결과에 따르면 청중은 단일 페이지 결제를 선호했습니다. 청중은 무엇을 선호합니까?

전자상거래 A/B 테스트 예

Lampenlicht.nl: 제품 이미지 아래의 사양

Lampenlicht.nl은 제품 페이지의 장바구니 담기 비율과 방문자당 수익을 개선하기 위해 Mintminds를 고용했습니다.

그래서 Mintminds는 정성적 및 정량적 데이터를 조사한 결과 방문자가 온라인 상점에서 제품을 다양한 각도에서 보고 싶어하며 실제로는 고도로 기술적인 사양이 아니라는 사실을 발견했습니다. 또한 "재고 있음" 및 "빠른 배송"과 같은 USP는 그들을 흥분시켰습니다.

그들은 원래 제품 페이지와 비교하여 이러한 요구에 부응하는 테스트를 설계했습니다.

가설: "하나의 중요한 제품 기능 또는 USP가 두 번째 제품 이미지 이후(캐러셀에서) 각 제품 이미지 아래에 텍스트로 표시되면 구매자 정보 요구 사항이 다음 위치에서 더 잘 제공될 것이기 때문에 거래 수가 증가할 것입니다. 이미 자주 보고 있습니다."

전자상거래 A/B 테스트 예시 상품 이미지 관리
제품 이미지 캐러셀을 탐색할 때 표시되는 제어(출처)

결과: 대조군과 변이체는 28일 동안 제공되었으며 대조군과 비교하여 변이체는 다음을 나타냈습니다.

  • 장바구니에 담기 13% 증가
  • 주문 전환율 4.96% 증가,
  • 방문자당 수익 6.58% 증가

전반적으로 테스트의 ROI는 116%였습니다.

전자상거래 A/B 테스트 예시 제품 이미지 변형
변형이 캐러셀의 각 이미지 아래에 중요한 제품 기능 또는 USP를 표시했습니다(출처).

주요 내용: 방문자가 사이트를 사용하는 방식에 대한 귀중한 데이터를 수집하십시오. 전환 유입경로에서 누출 또는 막힘을 발견할 수 있습니다. 이렇게 하면 문제에 대한 솔루션을 테스트하고 이미 수행 중인 작업을 수행하는 새롭고 더 나은 방법을 찾는 데 도움이 될 수 있습니다.

온라인 그루밍 스토어: 구매 안내 제공

온라인 그루밍 매장은 남성용 향수 번들 제공을 최적화할 방법을 찾고 있었습니다. 그들은 더 많은 사람들이 제품을 구매(또는 구독)하도록 설득하는 방법을 배울 수 있도록 Conversion Fanatics에게 도움을 요청했습니다.

Conversion Fanatics는 장애물을 밝히기 위해 설문조사를 실시했으며 사람들이 선택하기가 어려워 구매를 주저한다는 사실을 발견했습니다.

가설: 사람들이 어떤 향을 살지 선택하도록 하면 매출이 향상될 것입니다.

결과: 매장에 향이 어떤지 설명하고 향 선택에 대한 지침을 제공하고 2000명의 방문자에게 동등하게 보여 주는 가이드를 제공했을 때 방문자당 매출이 37% 증가하고 완성도가 53% 증가하는 것을 발견했습니다. 명령.

전자상거래 A/B 테스트 예시 구매 가이드 테스트
원천

이것에서 배울 수 있는 것: 사람들은 마찰이 조금이라도 나타나면 꺼립니다. 이것은 UI 또는 결정 문제일 수 있습니다. 의사 결정 문제의 경우 가려운 부분을 파악하고 솔루션을 테스트하기 위해 고객과 이야기해야 합니다.

버튼 텍스트: 장바구니에 추가 vs 장바구니에 추가

많은 성공적인 전자 상거래 브랜드는 버튼 문구에 "장바구니에 추가"를 사용합니다. 다른 전자 상거래 웹 사이트는 여전히 "장바구니에 추가"를 고수합니다. 패션 및 액세서리 브랜드는 "가방에 추가"라는 텍스트에 더 많이 의존하는 것 같지만 당신에게도 효과가 있습니까?

Conversion Fanatics는 고객 중 한 명이 "장바구니에 담기"와 비교하여 "장바구니에 담기"가 어떻게 수행되는지 알아보기 위해 테스트를 실행했습니다.

전자상거래 A/B 테스트 예시 장바구니에 담기
제어(출처)
전자상거래 A/B 테스트 예시 장바구니에 담기
챌린저(출처)

가설: 버튼 텍스트를 "장바구니에 담기"에서 "장바구니에 담기"로 변경하면 버튼 전환이 증가합니다.

결과:

전자상거래 A/B 테스트 예시 add to bag 테스트 결과
원천

이 경우 "장바구니에 추가"가 사용된 경우:

  • 결제 페이지의 페이지뷰가 95.% 증가했습니다.
  • 구매가 81.4% 증가했습니다.
  • 장바구니에 담기 22.4% 향상

이것은 주요 개선 사항이지만 참고: 이 특정 전자 상거래 상점을 위한 것입니다. 하지만 테스트할 가치가 있다고 생각하지 않습니까?

이것으로부터 배울 수 있는 것: 장바구니 버튼 텍스트에 많은 상승도가 숨겨져 있을 수 있습니다. 1,2,3 단어만 바꿔도 큰 차이가 날 수 있습니다. 버튼 색상도 마찬가지입니다.

NGO A/B 테스트 예

Kiva.org: 접힌 부분의 기부 시작 페이지

Kiva.org는 인터넷을 통해 사람들을 대출 기관에 연결하여 빈곤 완화를 돕는 비영리 단체입니다. $25부터 시작하여 전 세계 어딘가에 있는 누군가가 특정 목표를 달성하도록 돕습니다.

처음 방문자를 위한 랜딩 페이지는 최적화에 적합해 보였습니다. 브레인스토밍 후 개선할 몇 가지 기회를 생각해 내고 테스트하기로 결정했습니다.

그들은 원본에 도전하기 위해 3가지 변형을 설정했습니다(이미 훌륭해 보였습니다).

  • 플러스 버전(일부 설명, 형식 변경 및 회전식 자동 회전 포함)
  • 큰 슬라이더 버전(진행률 측정기로 시각적으로 매력적)
  • 동영상 버전(자동 재생 시 작동 방식에 대한 90초 설명)

페이지 하단에 신뢰 요소를 추가하는 데 중점을 둔 추가 변형도 있었습니다.

가설: 방문자에게 텍스트, 이미지 및 비디오 버전의 작동 방식에 대한 자세한 정보를 제공하면 더 많은 사람들이 기부할 것입니다. 아이디어는 더 많은 신뢰를 불러일으키는 것이었습니다.

NGO A/B 테스트 예제 기부 페이지
원천

결과:

처음 3개의 변형은 약간의 상승만 보여주었지만 통계는 승자를 자신 있게 선언할 만큼 충분히 견고하지 않았습니다. 그러나 하단 영역 신뢰 요소가 있는 변형은 95% 이상의 신뢰에서 전환율을 11.5%까지 높였습니다.

이것에서 배울 수 있는 것: 사람들은 특히 돈을 기부할 때 더 많은 것을 알고 싶어합니다. 그들은 돈이 어디로 가는지 알고 싶어하며 송금하려는 곳으로 돈을 가져갈 수 있을 만큼 충분히 신뢰할 수 있는지 확인합니다. 기부 페이지가 방문자가 귀하를 더 잘 신뢰하는 데 도움이 됩니까?

존 C. 쿡: 텍스트 대 비디오

비영리 단체인 John C. Cook은 비디오의 참여 이점에 대해 알고 있습니다. 그래서 그들은 참여 및 기부 측면에서 텍스트 이메일과 비교하여 얼마나 잘 수행되는지 확인하기 위해 이메일에서 테스트하기로 결정했습니다.

가설: 이메일의 마케팅 메시지를 텍스트에서 비디오로 재설계하면 참여와 기부가 증가할 것입니다.

NGO A/B 테스트 예제 텍스트 대 비디오 컨트롤
"자원)
NGO A/B 테스트 예시 텍스트 대 동영상 변형
"B"(출처)

비디오 메시지는 이 버전의 결과로 43% 더 많은 클릭률과 기부금이 114% 증가했습니다.

이를 통해 배울 수 있는 점: 선호하는 측정항목 중 하나를 개선하는 모범 사례에 대해 들어 보셨습니까? 먼저 작동하는지 테스트하십시오. 큰 흠집을 만들기 전에 유효성을 증명하십시오.

또한 비디오 또는 기타 상호 작용 요소를 사용하여 더 많은 신뢰를 얻고 조직의 개성에 한 차원 더 추가하는 것을 고려하십시오.

SaaS A/B 테스트 예

Earth Class Mail: 방문 페이지 최적화

Earth Class Mail은 Xenon Ventures에 인수되었으며 Xenon은 전환율 전문가를 초대하여 비즈니스를 최대한으로 성장시킬 수 있도록 지원했습니다.

그들이 한 일 중 하나는 이 A/B 테스트 사례 연구에서 랜딩 페이지를 최적화하는 것이었습니다. 그들은 모범 사례를 거부하고 간결하고 단순한 페이지로 이동했습니다. 컨트롤과 도전자는 다음과 같습니다.

SaaS A/B 테스트 예제 랜딩 페이지 테스트
원천

가설: 설문조사와 설문조사, 고객 서비스 팀 데이터, Google Analytics에서 수집한 정성적 및 정량적 데이터를 연구한 후 랜딩 페이지를 "간단하고 간결한" 버전으로 완전히 개조하면 원래보다 더 나은 성과를 낼 것이라는 가설을 세웠습니다.

결과: 그들이 맞았습니다. 도전자 버전에서 생성된 리드가 61% 증가했습니다.

이것에서 배울 수 있는 것: 항상 모범 사례를 따르지 마십시오. 자신의 연구를 사용하여 마찰을 조금 덜 사용할 수 있는 판매 깔때기의 포인트를 알아내십시오.

HubSpot: 사이트 검색 기능

HubSpot은 A/B/n 테스트를 실행하여 사람들이 사이트 검색 도구에 더 많이 참여하도록 하는 요소를 확인했습니다.

그들은 3가지 변형을 설계했습니다.

  • 변형 A - 사이트 검색 표시줄이 더 잘 보이고 자리 표시자 텍스트가 "주제별 검색"으로 변경되었습니다.
  • 변형 B – 사이트 검색 표시줄이 더 잘 보이고 자리 표시자 텍스트가 "주제별 검색"으로 변경되었지만 전체 사이트가 아닌 블로그에만 적용됨
  • 변종 C - "블로그 검색"이라는 자리 표시자 텍스트와 함께 검색 표시줄이 더 잘 보입니다.

가설: 사이트 검색 표시줄이 올바른 자리 표시자 텍스트와 함께 시각적으로 더 두드러지면 사람들은 도구와 더 많이 상호 작용하고 블로그 리드 전환율을 높일 것입니다.

SaaS A/B 테스팅 예시 사이트 검색 기능
원천
SaaS A/B 테스트 예제 사이트 검색 기능 변형
원천

결과: 3개의 변형이 원본보다 더 나은 성능을 보였습니다. 변형 C가 3.4%로 승리한 전환율이 더 높았고 검색 창에 대한 사용자 참여가 6.46% 증가했습니다.

이를 통해 배울 수 있는 점: 웹페이지에서 무시할 수 있는 것처럼 보이는 기능이라도 전환율을 높일 수 있습니다. 히트맵과 같은 정성적 데이터를 사용하여 사용자가 클릭하는 위치를 파악하고 사용자가 사이트를 사용하는 방식에 대한 스토리를 구축하는 데 사용합니다. 거기에서 무엇을 테스트할 것인지에 대한 아이디어를 찾을 수 있습니다.

Netflix: 추천 비디오 아트워크

Netflix는 실험의 세계에서 거물 중 하나입니다. 그들은 수천 개의 테스트를 실행하고 Netflix Tech Blog에서 이에 대해 공개하는 것으로 유명합니다.

가장 인기 있는 것 중 하나는 비디오에 가장 적합한 아트웍을 선택하는 것입니다. 그들은 A/B 테스트를 통해 이를 수행하며, 목표는 회원들이 각 타이틀에 대해 더 많이 보고 참여할 수 있도록 돕는 것입니다.

한 가지 예는 쇼트 게임에 대한 더 나은 아트워크에 대한 테스트입니다.

가설: 기본 아트워크는 영화의 스토리를 효과적으로 전달하지 못했습니다. 더 나은 작품은 청중을 넓히고 참여도를 높일 것입니다.

결과:

SaaS A/B 테스트 예제 Netflix
원천

하나의 변형은 14% 더 나은 선택률을 가져왔습니다.

이를 통해 배울 수 있는 점: 시각적 스토리텔링을 최적화하여 전환율을 높일 수 있습니다. 당신의 그래픽은 당신이 말하고자 하는 바를 정확히 말하고 있습니까? 아니면 더 높은 전환율로 이어질 수 있는 더 나은 고객 경험을 방해하고 있습니까?

이제 B2B, DTC, ECOMMERCE, NGO 및 SaaS에 대한 A/B 테스트의 몇 가지 예를 보여 주었으므로 테스트를 실행할 수 있는 여러 채널에 대해 동일한 작업을 수행해 보겠습니다.

채널별 A/B 테스트 예:

A/B 테스트 방문 페이지

Humana: 방문 페이지 배너

Humana는 랜딩 페이지 배너의 성능을 개선하기를 원했습니다. 컨트롤에는 CTA와 함께 성능이 좋지 않은 복사본이 많이 있었습니다.

가설: 헤드라인을 개선하고 더 짧고 간결한 문구와 더 강력한 CTA를 제공하면 클릭률이 향상됩니다.

A/B 테스트 예시 랜딩 페이지 컨트롤
"자원)

결과: 그들은 그렇게 했고 버전 B가 버전 "A"보다 클릭률이 433% 증가한 것을 발견했습니다. 엄청나긴 한데 더 좋아지면 어쩌지?

A/B 테스트 예시 랜딩 페이지 처리
"B"(출처)

버전 "C"의 경우 "shop"이라는 단어가 포함된 다른(그리고 더 강력한) 헤드라인과 CTA를 시도했습니다. 이것은 192% 더 높아졌습니다.

A/B 테스트 예시 방문 페이지 변형 C
"C"(출처)

이를 통해 알 수 있는 사실: 5배 더 많은 사람들이 페이지의 나머지 부분보다 랜딩 페이지의 배너를 볼 것입니다. 당신이 가지고 있는 것이 관심을 사로잡고 타겟 청중에게 직접적이고 명확하게 말하는지 확인하십시오.

또한 최선을 다할 수 있습니다.

Brookdale Living: 시각적 요소

Brookdale Living은 노인들에게 지역사회 및 생활 지원을 제공합니다. 그들은 "커뮤니티 찾기"가 더 많은 관심을 가진 사람들을 그들의 서비스로 끌어들이는 데 더 효과적이기를 원했습니다.

그래서 그들은 더 많은 신뢰 신호, 사회적 증거 및 USP로 페이지를 개선하는 아이디어를 모색했습니다. 하나의 요소가 더 필요했지만 이미지와 비디오 중 어느 것이 더 나은 성능을 보일지 확신하지 못했습니다.

A/B 테스트 예제 시각적 요소 테스트 컨트롤
버전 "A"(출처)

가설: 신뢰 신호로 구축된 새로운 랜딩 페이지에서 동영상은 이미지가 있는 경우보다 페이지 성능을 향상시킵니다.

A/B 테스트 예시 시각적 요소 테스트 변형
버전 B(출처)
A/B 테스트 예시 시각적 요소 테스트 변형 C
버전 C(출처)

결과: 주민들이 Brookdale과 함께한 놀라운 경험에 대해 이야기하는 비디오 버전은 정적 이미지가 포함된 버전으로 사라졌습니다. 실제로 정적 이미지는 $106,000의 수익을 증가시켰습니다.

이것에서 배울 수 있는 것: 다시 말하지만 모범 사례는 A/B 테스트에서 스스로를 방어할 수 없습니다. 모든 모범 사례가 나쁘다고 말하는 것은 아니지만 항상 테스트를 통해 고유한 고객과 비즈니스에 어떤 마케팅 전략이 효과적인지 알아내십시오.

방문 페이지 양식 위치

다음은 곡물에 반대되는 예입니다.

가설: 랜딩 페이지 양식을 랜딩 페이지의 오른쪽에서 중앙으로 이동하면 더 많은 양식 제출이 있을 것입니다.

A/B 테스트 예시 랜딩페이지 폼 테스트
원천

결과:

랜딩 페이지가 이미 최적화되어 11%의 전환율을 제공했음에도 불구하고 이러한 단순한 형태의 재배치로 전환율이 16%로 높아졌습니다.

여기에서 배울 수 있는 점: 양식을 페이지 중앙에 두는 것은 "모범 사례"가 아니지만 누군가는 다른 기능을 시도하고 이미 최적화된 페이지를 추가로 최적화할 수 있는 기회를 잡고 싶어했습니다.

A/B 테스트 이메일 예

Designhill.com: 이메일 헤드라인 스타일

그래픽 아티스트를 위한 P2P 크라우드소싱 플랫폼인 Designhill이 블로그 게시물을 홍보하기 위해 크리스마스 며칠 전에 이메일 뉴스레터를 보내려고 할 때 클릭률이 가장 높은 헤드라인이 무엇인지 궁금했습니다.

가설: 클릭 유도문안 스타일의 헤드라인에 비해 블로그 제목을 이메일 헤드라인으로 사용하면 클릭을 유도하기에 충분했습니다.

블로그 헤드라인: 2015년 스타트업을 위한 10가지 오프페이지 SEO 전략

CTA 스타일 헤드라인: 내 최근 게시물 확인 – 2015년 스타트업을 위한 10가지 오프페이지 SEO 전략

결과: 블로그 헤드라인 스타일은 CTA 스타일 버전보다 5.84% 더 높은 CTR과 2.57% 더 높은 공개율로 더 나은 성능을 보였습니다.

A/B 테스트 이메일 제목 스타일 예
원천

여기서 배울 수 있는 점: 헤드라인의 이점이 시작 부분에 가까울수록 잠재고객을 잃을 가능성이 줄어듭니다. 이메일 헤드라인의 시작 부분에 더 가깝게 이점을 얻고 더 나은 성능을 확인하기 위해 테스트하십시오.

"메리 크리스마스" vs "해피 홀리데이" 이메일 헤드라인

사람들이 귀하의 사이트를 방문하여 귀하의 컬렉션을 찾아보게 하려면 휴일 이메일의 헤드라인을 무엇으로 해야 합니까?

가설: "Merry Christmas"와 함께 하면 "Happy Holidays" 또는 이 두 가지를 조합한 것보다 실적이 좋습니다.

결과: 절대적으로 맞습니다(물론 이 경우에는). "Merry Christmas"는 CTR이 2.57% 더 높아졌습니다. 아래 스크린샷의 세부정보를 참조하세요.

A/B 테스트 이메일 제목 예
원천

이를 통해 배울 수 있는 점: 개인적으로 저는 모호한 "해피 홀리데이"나 그 자매인 "계절의 찬사"와 달리 "메리 크리스마스"로 인사받는 것을 선호합니다. 약간 짜증나네요. 그러나 후자는 더 포괄적이고 더 크고 다양한 청중에게 더 잘 작동합니다.

Microsoft: 이메일 색 구성표

Microsoft는 더 많은 사람들이 이메일의 링크를 클릭하기를 원했고 색 구성표의 효과를 테스트했습니다. 여기에는 버튼, 배경 및 텍스트 색상이 포함됩니다.

가설: 다른 색 구성표는 CTR에 상당한 영향을 미칩니다.

버전 A(흰색 배경, 전체 제품 이미지 및 자주색 CTA) 대 버전 B(주황색 배경, 잘린 제품 이미지 및 분홍색 CTA).

A/B 테스트 이메일 색 구성표 예제 컨트롤
버전 A(출처)

결과: 버전 A(흰색 배경)가 버전 B보다 325% 더 많은 클릭률을 보였습니다.

A/B 테스트 이메일 색 구성표 예시 변형
버전 B(출처)

이것에서 배울 수 있는 것: 이 주황색 음영이 시각적으로 너무 공격적일 수 있기 때문에 다른 색 구성표를 테스트할 것입니다. 따라서 컨트롤을 이기기 위해 더 부드럽고 평화로운 색상을 테스트하는 것을 고려하십시오. 배경색과 같은 일부 항목은 이메일 마케팅 테스트 아이디어의 맨 위에 있지 않을 수 있지만 그 영향은 사실상 비즈니스를 변경할 수 있습니다.

A/B 테스트 PPC 예

Adspresso: Facebook 광고 카피

Adspresso는 두 개의 Facebook 광고를 실행하여 가장 많은 좋아요를 받을 수 있는 광고를 확인했습니다.

가설: "프로 팁"이라고 표시된 다른 광고 문구가 "일일 팁" + "& ROI 증가!"라는 광고 문구를 능가할 것입니다.

A/B 테스트 광고 카피 예
원천

결과: "& ROI 증가!"가 추가되었습니다. 버전 A에 의해 지워지는 버전 B를 저장할 수 없습니다. 버전 A는 70개의 좋아요를 받았고 버전 B는 0개를 받았습니다.

이것에서 배울 수 있는 것: 대부분의 경우 사람들은 자신이 아직 알지 못하는 것을 알려주는 팁을 원합니다. "일일 팁"은 알다시피 여러 날 동안 무작위로 제공되며 가끔 놀라운 것을 얻게 될 것입니다. 그것은 "프로 팁"처럼 당신을 흥분시키지 않습니다.

소셜 미디어 마케팅 문구의 어디에 흥미로운 언어를 추가할 수 있습니까?

Sony: 맞춤형 배너 광고

Sony가 배너 광고에서 원하는 결과를 얻지 못했을 때, 그들은 카피를 수정하고 더 개인적인 사운드를 만들기 위해 방법을 테스트하기로 결정했습니다.

가설: 개인 맞춤 광고는 프로모션 광고보다 전환율이 더 높습니다.

A/B 테스트 광고 카피 예시 배너 광고 컨트롤
제어(출처)
A/B 테스트 광고 카피 예시 배너 광고 컨트롤 버전 A
버전 A(출처)
A/B 테스트 광고 카피 예시 배너 광고 버전 B
버전 B(출처)

결과: 개인화 수준이 있습니다. 말만 하면 개인화되는 느낌이 들죠.

나만의 VAIO 노트북 만들기 라는 버전 A가 다른 두 노트북보다 성능이 더 좋았습니다. CTR이 6% 더 높았고 대조군보다 21.3% 더 장바구니에 추가되었습니다.

여기서 배울 수 있는 점: "당신" 및 "당신의"와 같은 단어를 사용하여 청중에게 개인적인 어조로 직접 말하는 광고 카피는 종종 해당 광고의 더 나은 성공으로 이어지는 더 강한 감정적 연결을 만듭니다.

PPC 광고: CTA 카피

Brad Shorr는 Wordstream에 자신의 팀이 다음 중에서 어떤 CTA 카피가 가장 잘 수행되는지 찾기 위해 실행한 PPC 광고 A/B 테스트에 대해 말했습니다.


A. 첫 구매 시 $10 할인. 지금 온라인으로 예약하세요!

B. 추가로 $10 할인을 받으세요. 지금 온라인으로 예약하세요.

가설: CTA A는 CTA B보다 클릭률이 더 높습니다.

결과: CTA B의 클릭률은 실제로 버전 A의 2배였습니다.

이것에서 배울 수 있는 것: "추가"가 무언가를 "제거"하는 것과 비교할 때 트릭을 수행한 것처럼 보입니다. 그것은 더 긍정적 인 강화를 가지고 있습니다. 그것은 테스트할 가치가 있는 것입니다.

A/B 테스트 Shopify 예제

Oflara: 메가 메뉴

Oflara는 각 제품 카테고리의 탐색 모음에서 베스트 셀러 제품을 보여주는 메가 메뉴를 실험했습니다. 여기에는 전체 컬렉션을 볼 수 있는 CTA 링크도 포함되어 있습니다.

이것은 드롭다운이 없는 단순한 메뉴와 달리 베스트 셀러를 탐색 모음에 표시하기 위한 것입니다.

A/B 테스트 Shopify 예제 컨트롤
제어(출처)

가설: "사이트 메뉴를 활용하여 최고의 제안을 강조하면 매장 수익이 증가할 것입니다."

결과: 테스트를 실행한 후 변형이 수익이 무려 53%나 증가하여 확실한 승자가 되었습니다.

A/B 테스트 Shopify 변형 예시
변형 섹션 중 하나(출처)

이를 통해 배울 수 있는 내용: 메가 메뉴는 Shopify 사이트의 귀중한 자산이 될 수 있습니다. 이것을 테스트하여 청중의 공감을 불러일으킬 수 있는지 확인할 수 있습니다.

BattlBox: 개인화된 전자상거래 콘텐츠 마케팅 전략

BattlBox는 생존/전술 구독 상자를 배포합니다. 그들은 홈페이지 경험을 사용자 정의하여 전반적인 판매 유입경로를 최적화하기 위한 통찰력을 제공하는 방법에 대해 궁금해했습니다.

가설: 사이트 홈페이지에서 재방문 고객의 다양한 세그먼트를 별도의 콘텐츠 경험으로 표시하면 참여도와 전환율이 향상됩니다.

A/B 테스팅 Shopify 예시 콘텐츠 전략
원천

결과: 다양한 콘텐츠 경험을 실험한 후 다른 모든 사람들이 경험하는 일반 변형에 비해 잠재 고객 세그먼트의 전환율을 30% 높인 고유한 변형을 발견했습니다.

이를 통해 배울 수 있는 점: 전자상거래 브랜드는 개인화된 콘텐츠 경험을 활용하여 재방문 사용자의 사이트 참여를 높일 수 있습니다. 이 맞춤형 사용자 경험은 특히 크고 다양한 고객 기반이 있을 때 훨씬 더 개인적으로 느껴집니다.

별점 vs 별점 없음

일부 Shopify 매장에는 Amazon에서 찾을 수 있는 제품 리뷰와 별표 평점이 없습니다. 그것이 그들의 수익을 최대 잠재력에 도달하는 것을 막는 것이 가능합니까?

Growthrock.co는 고객 중 한 명을 위해 이것을 테스트했습니다.

가설: 리뷰 별표 평점 요약을 추가하면 장바구니에 담기 및 평균 주문 가치를 높일 수 있습니다.

A/B 테스트 Shopify 별표 평점 변형 예
원천

결과: 한 변형에서 제품 세부정보 페이지(PDP) 상단에 별표 평점을 추가했을 때 전환율은 94% 통계적 유의성으로 15% 증가했으며 세션당 수익은 97% 통계적 유의성으로 17% 증가했습니다.

평균 주문금액도 2.4% 소폭 상승했지만 이는 대부분 전환율이 높아진 결과다.

A/B 테스트 Shopify 예시 별점 결과
원천

이것에서 배울 수 있는 것: 사람들은 실제로 다른 사람들이 당신의 제품을 좋아하는지 알고 싶어합니다. PDP에 별 등급, 사용 후기 또는 리뷰가 없으면 Louis Vuitton과 같은 명품 브랜드에서 효과가 있을 수 있지만 모든 사람이 그런 것은 아닙니다.

결론

이 A/B 테스트 예제 목록이 당신의 머리에 빛나는 CRO 전구를 밝혀주고 자신의 실험을 시작할 때 어디서부터 시작해야 하는지 파악하는 데 도움이 되었기를 바랍니다.

A/B 테스트를 위한 단계별 프로세스, 실행 가능한 통찰력으로 이어지는 가설을 공식화하는 방법, A/B 테스트 도구를 유리하게 작동시키는 방법을 이미 알고 있다면 지금 탁월한 아이디어를 가지고 있는 것입니다. .

안정적으로 무료 평가판 시작
안정적으로 무료 평가판 시작