A/B 테스트 팝업: 팝업을 훨씬 더 효과적으로 만드는 방법

팝업은 어디에나 있습니다 .

Amazon, Pinterest 및 Adidas와 같은 가장 큰 브랜드 중 일부는 팝업을 사용합니다. 사실, 그들을 피하는 것은 꽤 어렵습니다.

우리는 당신이 오늘 적어도 6개를 봤다고 장담할 수 있습니다. 불행히도, 팝업은 인기 있는 유일한 것이 아닙니다. 최고의 팝업을 만들기 위한 "해킹"도 똑같이 만연합니다.

문제는 다음과 같습니다. 경쟁업체에 효과가 있었던 것에서 절대적으로 배울 수 있지만 맹목적인 믿음은 방문자를 외면하고 상당한 비용을 들이게 됩니다.

팝업: 성가심 또는 필요성?

CRO 전문가와 마케터로부터 다음과 같은 핫 테이크가 있습니다.

오, 짜증나. 그들은 절대적으로 최악입니다. 왜냐하면 사람들은 '설정하고 잊어버리는 것'이 전략이라고 생각하기 때문 입니다.

Speero의 시바 만주나트

팝업은 일반적으로 성가심입니다. 그러나 마케터는 어떤 식으로든 그것을 생성하므로 사용자는 성가신 것보다 더 가치가 있다고 생각합니다 .

Spacelift의 제품 디자이너인 Arek Nowakowski

그러나 그 질문에 대한 올바른 대답은 그것이 달려 있다는 것입니다.

팝업은 다른 채널에 비해 좋은 결과를 낳거나 완전히 나쁠 수 있습니다. 팝업이 있거나 없는 테스트 페이지를 분할할 때까지 확실히 알 수 없습니다.

팝업이 나쁜 평판을 받는 진짜 이유는 나쁜 사용자 경험입니다. 다음은 SparkToro의 마케팅 부사장인 Amanda Natividad가 최근에 경험한 내용입니다.

나쁜 사용자 경험은 다음과 같이 변경된 사용자 행동으로 이어질 수 있습니다.

그리고 사람들은 경험을 망치는 것을 방지하기 위해 팝업 차단기를 설치합니다(이것이 팝업을 조회할 때 이러한 광고 차단기가 Google에서 높은 순위를 차지하는 이유입니다.)

팝업이 여전히 성가시게 될 것이라는 점을 인정해야 합니다. 하지만 모든 사람 을 짜증나게 할 필요는 없습니다.

Speero의 Shiva는 다음을 공유합니다.

적절하게 수행되면 표적이 된 다음 가치가 있습니다. 모든 사람에게 제공하면 전체 참여율과 제출물이 더 높을 수 있지만 품질은 훨씬 낮을 것입니다. 그리고 아무도 이러한 유형의 팝업에 대한 '해로운' 효과를 추적하지 않습니다 .

다른 보조 및 가드레일 메트릭에 불리한 영향을 미치는 방법과 영향을 알아야 합니다.

가드레일 메트릭은 위반된 가정에 대해 실험자에게 경고하도록 설계된 중요한 메트릭입니다. 가드레일 지표는 Spitzer(2007)가 "정보에 입각한 조치를 유도할 수 있는 능력"이라고 부르는 것을 제공합니다. 처리 효과가 예기치 않게 가드레일 메트릭을 이동하는 경우 결과에 대한 신뢰를 줄이거나 사용자 또는 조직에 해를 끼칠 수 있는 경우 실험을 중지할 수 있습니다 .

Ronny Kohavi, A/B 테스트 컨설턴트

다양한 유형의 팝업(팝업 전환율 포함)

최초의 팝업 광고는 1990년대 후반 삼각대에 등장했으며 발명가인 Ethan Zuckerman은 그 이후로 그가 인터넷에 퍼뜨린 성가심에 대해 사과했습니다. 격동의 역사를 통틀어 팝업은 마케팅 매니아가 되는 단계를 거쳤습니다.

원래 모든 사기성 웹사이트에서 남용되는 반짝이는 새로운 것으로 여겨졌던 팝업은 피젯 스피너보다 더 빨리 알려지지 않았습니다. 팝업 실명(또는 배너 실명)은 사용자가 이를 성가신 것으로 보지 않았음을 의미합니다. 사용자는 이에 면역이 되고 즉시 무시했습니다.

팝업은 죽은 자들로부터 부활시키고 속담을 위해 침입성을 사용하는 능숙한 A/B 테스팅 마케터 덕분에 새로운 생명을 얻었습니다.

다음은 만날 수 있는 다양한 종류의 팝업입니다(예제 및 전환율 벤치마크 포함).

엔트리 팝업

항목 팝업은 웹사이트 방문자가 페이지에 도착한 직후에 표시됩니다. 일부는 전체 페이지를 보기에서 차단(환영 매트 팝업이라고도 함)하는 반면 다른 일부는 화면 중앙(라이트박스)에 표시됩니다. 예를 들어, Wishpond는 다음 두 가지 유형을 차례로 사용합니다.

이는 사용자가 즉각적인 조치를 취하도록 하는 데 효과적일 수 있지만 이를 첫 번째 팝업으로 설정하면 사용자가 즉시 이탈할 수도 있습니다.

여기서 트릭은 소액 약속을 사용하는 것입니다.

마이크로 약정은 이메일 옵트인 참여율에 큰 영향을 미칠 수 있습니다. 사용자가 예를 클릭하기만 하면 할인을 받을 수 있습니다. 그 작은 예, 그들은 관심이 있어야하며 팝업에 계속 참여하면서 일관성을 유지하기를 원할 것이라고 무의식적으로 믿습니다. 이렇게 하면 더 많은 동의와 의사 결정 능력이 필요한 양식을 작성하는 데 마찰이 줄어듭니다. 그것은 헌신과 일관성의 원칙입니다 .

Anthony Morgan, Enavi의 CEO 겸 설립자

클릭 활성화 팝업

이러한 팝업은 사용자가 링크를 클릭할 때 표시됩니다. 그것들은 훨씬 덜 방해가 되며 종종 도움이 됩니다.

Alexa에 대한 Amazon의 제품 페이지를 예로 들어 보겠습니다. "Alexa가 할 수 있는 일 보기"를 클릭하면 추가 정보가 포함된 팝업이 나타납니다.

원천

클릭 활성화 팝업은 쇼핑객이 원하는 대로 탐색하고 필요할 때 더 많은 정보를 제공할 수 있도록 하기 때문에 전자 상거래 상점에서 매우 일반적입니다.

이탈 의도 팝업

이 팝업은 방문자가 귀하의 사이트를 떠나려고 할 때 트리거됩니다. 즉, 장바구니를 버리기 전에 전환하도록 유도하는 성모송입니다.

모바일에서는 누군가가 빠르게 뒤로 스크롤하거나 뒤로 버튼을 누를 때 트리거됩니다. Elauz는 랜딩 페이지를 떠나려는 첫 번째 쇼핑객에게 15% 할인을 제공합니다.

시간 제한 팝업

지정된 시간 이후에만 방문자에게 시간 제한 팝업이 나타납니다. 얼마 후에 그 메시지를 표시해야 합니까? 다시 말하지만, 그것은 당신이 A/B 테스트를 해야 하는 것입니다.

Sumo의 이 팝업이 좋은 예입니다. 게시물을 읽는 데 약간의 시간을 보낸 후에 나타납니다.

어떤 유형의 팝업이 더 잘 변환됩니까?

최신 전환 연구가 마무리되었습니다!

Sumo는 2019년에 20억 개의 팝업 예시를 분석한 결과 다음과 같은 결과를 얻었습니다.

• 가장 실적이 좋은 팝업의 상위 10%는 평균 9.28%의 전환율을 보였습니다.
• 100개 브랜드 중 3개 브랜드에 전환율이 11% 이상인 팝업이 있습니다.
• 모든 팝업의 전환율은 평균 3.09%였습니다.

참고: 트래픽이 많은 사이트의 경우 전환율이 떨어집니다. 따라서 3.09%는 작은 숫자처럼 보일 수 있지만 100,000명의 방문자는 3,000회의 전환을 얻을 수 있습니다(전혀 나쁘지 않습니다).

다음은 TestGuide의 설립자이자 CEO인 Dave Evangelisti의 실제 사례입니다.

한 웹페이지에서 "계산된 전환율"(특정 페이지로 사람들을 유입시키는 것을 기반으로 한 목표)을 1.38% 높일 수 있었습니다. 이것이 중요하게 들리지 않을 수 있지만 수천 명의 사람들과 함께 1.38%는 실제로 바늘을 움직일 수 있습니다 .

Sleeknote는 2020년에 10억 개 이상의 팝업을 조사한 결과 다음과 같이 발견했습니다.

• 이미지가 있는 팝업의 전환율은 3.80%인 반면 이미지가 없는 팝업의 전환율은 2.07%였습니다.
• 8초 지연 후에 나타나도록 설정된 팝업은 3.62%의 전환율을 가지며 이전 또는 이후에 표시된 팝업보다 더 잘 전환되었습니다.
• 2개의 입력 필드가 있는 팝업은 1.08%의 전환율을 가진 3개의 필드가 있는 팝업에 비해 더 나은 3.31%로 더 높은 전환율을 보였습니다.

Sleeknote와 마찬가지로 OptiMonk는 2021년 사용자 팝업을 분석하여 다음과 같은 결과를 발표했습니다.

• 평균 전환율은 11.09%였습니다.
• 팝업 상위 10%의 평균 전환율은 42.35%였습니다.
• 데스크톱의 평균 전환율은 9.69%, 모바일의 경우 11.07%였습니다.
• 장바구니 포기 팝업은 17.12%의 전환율을 보였습니다.

참고: 이 벤치마크는 테스트를 거쳐 직접 비교에 사용해서는 안 되는 기존 연구 및 가설에서 나온 것입니다. 그러나 이러한 결과는 테스트해야 하는 요소에 대한 더 나은 통찰력을 제공할 수 있습니다(아래에서 더 자세히 설명함).

A/B 테스팅 팝업: 어떻게 해야 할까요 ?

우리는 두 가지 가정을 버리도록 요청합니다.

1. 팝업이 귀하의 업계나 경쟁업체에 적합하다고 해서 자동으로 귀하에게 적합하다는 의미는 아닙니다.
2. 효과가 있다고 해서 개선할 수 없는 것은 아닙니다.

확실히 알기 위해서는 팝업을 A/B 테스트해야 합니다.

이것이 얼마나 많은 차이를 만들 수 있는지 보여주는 Sumo의 예입니다.

버전 B가 모든 "모범 사례"를 따르기 때문에 더 나은 성능을 보인다고 가정할 수 있지만 실제로 첫 번째 팝업은 30% 더 나은 성능을 보였습니다.

팝업에 대한 A/B 테스트 및 분할 테스트란 무엇입니까?

A/B 테스트를 사용하면 하나 이상의 요소에 대한 변경 사항을 테스트할 수 있습니다. 요소를 추가, 제거 또는 수정하고 변경 사항을 추적하여 전환율을 높이는 방법을 확인할 수 있습니다.

A/B 테스트 팝업이 표시되면 거의 동일한 두 가지 버전을 만들고 변형(또는 도전자)을 원본(대조군)과 비교합니다.

대부분의 사람들이 분할 테스트와 A/B 테스트를 혼동하지만, 이는 완전히 다른 두 가지 전환율 최적화 기술입니다.

분할 테스트 또는 분할 URL 테스트에서는 트래픽을 균등하게 분할하여 방문자를 서로 다른 URL에서 호스팅되는 완전히 다른 두 버전으로 보냅니다. 이렇게 하면 가장 성능이 좋은 버전을 식별하는 데 도움이 됩니다.

팝업이 좋은 아이디어인지 알고 싶다면 분할 테스트가 가장 좋은 방법일 것입니다. 동일한 혜택과 가치를 제공하기 위해 복사 및 단서와 같은 요소가 혼합된 팝업이 다른 페이지와 겹쳐진 한 페이지.

막스앤스펜서를 예로 들어보자. 팝업을 사용하여 이메일 목록을 작성하는 대신 페이지 하단에 방문자가 구독할 수 있는 섹션이 있습니다.

팝업이 방문자를 놀라게 하지 않는다는 것을 알게 되면 일련의 실험을 통해 A/B 테스트의 효과를 분리하여 비즈니스에 효과적인 것이 무엇인지 알아보기 위해 한 번에 하나씩 변경하십시오.

Breeze의 그로스 해커인 Faizan Fahim은 A/B 테스트 팝업에서 몇 가지 일반적인 실수를 피할 것을 권장합니다.

• 동일한 팝업을 두 번 표시하지 마십시오. 팝업을 한 번 무시하고 닫았다는 점에서 유저들에게 모욕적인 일이지만 여전히 동일한 팝업을 표시하는 사이트입니다.
• 방문자가 있는 페이지와 관련된 팝업을 만듭니다.
  
  
  • 방문자가 장바구니 페이지에 있는 경우 할인을 보여줍니다.
  • 방문자가 비교 페이지에 있는 경우 '평가판 시작' 팝업을 표시합니다.
  • 방문자가 오랫동안 기사를 읽고 있다면 구독 팝업을 보여주십시오.

Spacelift의 제품 디자이너인 Arek Nowakowski는 또 다른 일반적인 실수에 대해 경고합니다.

축제 및 이벤트 기간에는 A/B 테스트를 실행하지 마십시오. 고객의 행동은 축제와 휴일을 전후로 바뀝니다. 업무가 정상일 때 모든 A/B 팝업 테스트 실행

팝업 A/B 테스트: 변경할 다양한 요소

전환 조사에서 벗어나는 한 팝업의 거의 모든 요소를 ​​테스트할 수 있습니다.

테스트 계획을 시작하기 전에 사용자 행동을 연구하고, 리뷰를 작성하고, 티켓을 지원하고, 방문자 리플레이를 보고, 현재 메트릭을 분석하십시오. 이것은 귀하의 비즈니스에 해를 끼칠 수 있는 임의의 변경을 하지 않도록 귀하의 가설의 기초를 형성할 것입니다.

즉, A/B 테스트를 거친 가장 일반적인 요소는 복사, 트리거, 배치, CTA 텍스트 및 다양한 유형의 팝업 입니다.

트리거 시간

Sleeknote의 연구에 따르면 8초가 목표로 삼아야 하는 최적의 지점이지만 테스트하지 않는 한 확실하게 알 수 없습니다.

그러나 대부분의 전문가들은 한 가지에 동의하는 것 같습니다. 방문자가 페이지를 방문하는 즉시 팝업을 표시하는 것은 좋은 생각이 아닙니다.

시간 기반 트리거는 나머지 사용자를 짜증나게 하지 않으면서 올바른 사용자를 대상으로 하고 있는지 확인하는 A급 방법입니다.

시바 만주나트, 스피로

Wise Pop의 고객 중 한 명이 다음 팝업으로 10초, 20초, 40초의 3가지 다른 지연을 테스트했습니다.

테스트 결과 제안을 표시하기에 가장 좋은 시간은 10초 후인 것으로 나타났습니다.

지연이 길어질수록 팝업을 보는 사람이 줄어들어 구독률은 높지만 수집된 이메일 수는 그렇지 않았습니다.

오탐에 빠지지 않도록 하십시오. A/B 테스트 결과를 올바르게 해석하고 개선하는 데 도움이 되는 가이드를 읽으십시오.

위치

페이지 시작 부분에 팝업을 배치해야 합니까? 환영 매트를 사용하여 전체 화면을 가리거나 라이트박스를 사용해야 합니까?

원천

또는 더 나은 방법은 페이지 측면에 팝업을 표시하거나 덜 방해가 되는 스크롤 인 팝업을 사용하는 것입니다.

블로그 기사에서 스크롤 트리거 팝업을 사용하는 것은 사용자가 귀하의 콘텐츠를 더 많이 읽도록 설득하는 좋은 방법입니다. 이렇게 하면 유용한 힌트와 새로운 블로그 콘텐츠에 대한 링크가 포함된 뉴스레터에 가입하도록 사람들을 설득할 수 있습니다.

BarBend의 최고 마케팅 책임자(CMO)인 Josh Pelletier

Getsitecontrol의 페이지에는 보기에서 페이지를 차단하지 않는 덜 방해가 되는 두 개의 팝업이 있습니다.

추신 팝업의 위치에 대해 생각할 때 모바일 대 데스크탑 경험도 고려하고 싶을 것입니다. Sleeknote는 모바일 팝업이 데스크톱(3.11%)에 비해 전환율(5.8%)을 높인다는 사실을 발견했으므로 모바일에 세심한 주의를 기울이십시오.

휴대폰용 팝업은 사용 가능한 화면 영역과 모바일 사용자 경험의 다른 측면을 고려하여 설계해야 합니다.

Veronica Miller, 디지털 마케팅 관리자, VPN개요

복사

올바른 사본은 고객이 조치를 취하거나 귀하의 시도를 완전히 무시하도록 할 수 있습니다.

복사는 매우 중요하며 바늘을 몇 퍼센트 포인트씩 움직일 수 있습니다. 우리는 항상 다른 사본을 시도합니다. 팝업 차단기의 헤드라인과 텍스트를 변경하여 30% 개선에 도달했습니다. 우리는 등록해야 할 수 있는 예약을 무효화하는 보다 적극적인 중지 팝업에서 사회적 증거와 룸메이트 찾기 앱이 제공할 수 있는 가치를 강조하는 팝업으로 이동했습니다 .

Rany Burstein, Diggz.co CEO 겸 설립자

카피의 헤드라인을 변경하거나 길이를 변경하거나 파워 워드를 사용하여 미세 실험을 실행할 수 있습니다.

Paperbell에서 Laura Roder(설립자)는 헤드라인 이 가장 큰 성과를 거둔 곳임을 발견했습니다.

히트맵과 클릭맵을 사용하여 방문자가 사본과 상호 작용하는 방법과 관심을 끄는 요소를 배울 수 있습니다.

연구할 수 있는 또 다른 예는 전자 상거래 마케팅 대행사인 Contrast의 것입니다.

우리는 미시적 긍정 가설을 중심으로 Contrast의 고객을 위해 방문 페이지별 이메일 팝업을 실행했습니다.

대부분의 상점은 "당신이 우리에게 이메일을 제공하면 x% 할인을 받을 수 있습니다"와 같은 팝업을 실행합니다. 우리는 이 아이디어를 테스트하기 위해 다른 변형을 실행하고 싶었습니다. 우리는 인간 심리학을 활용하기 위해 문구를 변경했습니다.

"오늘 주문 금액을 20% 절약하시겠습니까?"라는 메시지가 표시되었습니다. 누가 이것을 거부하겠습니까?

이를 달성하기 위해 2개의 버튼이 있습니다: 예 / 아니오

– 예, 이메일 정보를 입력하려면 다음 단계를 계속하십시오.

– 아니요, 팝업을 닫습니다.

이번 A/B 테스트를 통해 이메일 옵션 비율을 3.3%에서 9.1%로 끌어올릴 수 있었습니다. "

Contrast의 설립자이자 이사인 Elliot Davidson

권하다

제안에서 다양한 할인, 리드 자석 및 배송 정보를 비교하십시오.

웹사이트 방문 시 재방문 사용자에게 팝업을 통해 무료 배송을 제공하는지 테스트한 결과 해당 대상 고객의 전자상거래 전환율이 73% 증가했음을 발견했습니다. 팝업이 반향을 일으킬 뿐만 아니라 팝업이 수익에 긍정적으로 기여할 수 있도록 적절한 제안을 적절한 청중과 연결하는 것이 중요합니다. 제안 전략이 항상 가격을 기반으로 할 필요는 없습니다. 고객이 FSA 또는 HSA 카드로 제품을 구매하는 방법에 대한 자세한 정보를 요청할 수 있도록 FSA/HSA 페이지에 가입률이 6%입니다.

Medcline.com의 CRO인 Jonathan Finegold

OptiMonk 고객인 SwissWatchExpo는 원하는 결과를 얻을 수 있는 메시지를 확인하기 위해 두 가지 버전의 장바구니 포기 사본을 만들었습니다.

버전 A는 사용 가능한 마지막 항목이 있고 전환율이 17% 증가했음을 사용자에게 알려 FOMO를 호출했습니다.

버전 B는 30% 이상의 전환율을 가져오는 할인과 약간 다른 메시지를 제공했습니다.

클릭 유도문안(CTA)

클릭 유도문안 버튼의 색상, 사본, 크기 및 정렬을 테스트할 수 있습니다.

CTA 사본을 확인하는 것이 특히 중요할 수 있습니다. 귀하가 제공하는 것과 CTA 사이에 단절이 있는 경우 사용자는 전환할 가능성이 낮습니다.

아래 팝업에서 "예, 해당 팁을 보내주세요" 대신 "구독"이라고 표시된 경우 클릭하시겠습니까?

아마 아닐 것입니다. CTA가 약속한 내용과 일치하는지 확인하세요. 그리고 이것을 충격과 경외심의 기회로 사용할 수 있습니다.

Klientboost의 뉴스레터 가입 양식을 살펴보십시오.

평소의 '구독' 대신 '후회할 수도 있다'는 말이 눈길을 끈다.

사용자가 팝업을 닫는 데 사용하는 텍스트를 추가하거나 테스트할 수도 있습니다.

무료 확장을 시도하라는 CoSchedule의 종료 의도 팝업은 "무료 확장을 거부합니다"를 클릭하면 닫힐 수 있습니다.

고유한 쿠폰 코드로 추가 할인을 제공하는 제품 페이지에서 이탈 의도 팝업을 테스트한 결과 7%의 가입률을 찾았습니다. 이 경우 제안 전략이 큰 영향을 미쳤습니다. 10% 할인 쿠폰은 무료 배송 쿠폰 제안보다 2배 이상의 성능을 보였습니다.

Medcline.com의 CRO인 Jonathan Finegold

게임화

게임화된 팝업은 보상을 받는 대가로 사용자가 행동을 취하도록 동기를 부여합니다.

Optimonk의 연구에 따르면 "행운의 수레바퀴" 또는 행운의 수레바퀴는 13.23%의 전환율을 보였습니다.

하지만 여기서 멈출 필요는 없습니다. "선물 고르기" 또는 "긁기" 카드 팝업을 시도할 수도 있습니다.

원천

원천

Medcline은 기존의 "뉴스레터 가입" 제안에 비해 경품 행사를 통해 캡처율을 12% 높일 수 있었습니다.

또 다른 좋은 예는 다음 결과 이후에 고객을 위해 게임화된 팝업만 사용하는 Ross Kernez입니다.

우리는 2가지 유형의 게임화된 팝업을 테스트했습니다. 하나는 상품 팝업을 획득하기 위한 스핀 휠이었고 다른 하나는 €10 바우처를 획득했는지 확인하기 위해 상자를 선택하는 것이었습니다.

이전 최고 전환율은 8%였습니다. 게임화된 팝업 중 하나를 테스트했을 때 전환율이 최소 14%로 뛰어올랐습니다 .

Ross Kernez, 온라인 전략 수석 컨설턴트 - Ross Kernez Consulting

A/B 테스트 팝업 시 추적할 최상의 측정항목

A/B 테스트 아이디어를 수행할 때 테스트의 승자와 패자를 액면 그대로 받아들일 수는 없습니다. 결과를 달성한 방법 과 이유 를 모두 이해해야 하기 때문입니다.

바로 여기에서 측정항목이 필요합니다.

메트릭은 비즈니스 목표에 대한 A/B 테스트의 영향을 측정하는 데 도움이 되는 단일 데이터 유형입니다.

그러나 추적할 항목을 어떻게 결정합니까?

일부 는 추적해야 하고 다른 일부는 팝업 유형에 따라 다릅니다.

팝업의 종류(전자상거래용 쿠폰, 전자책 등)에 따라 최대한 상위 메트릭스로 이동하려고 합니다. 항상 '트리거' 비율을 추적해야 합니다(인게이지먼트 측정항목의 분모가 되기 때문에). 그러나 '팝업 종료' 및 '제출률'과 같은 항목은 추적하는 것이 매우 중요합니다. 히트맵/세션 기록을 트리거하여 창의력을 발휘하면 더 많은 통찰력을 얻을 수 있습니다! 종료율과 같은 항목에 대한 보너스 포인트는 소음으로 인해 까다로워지기는 하지만(예: 팝업을 본 사람을 포함하지 않는 한 종료율은 잘 정의되지 않을 수 있습니다 ).

시바 만주나트, 스피로

사내 A/B 테스팅 전문가인 Karim Naufal은 일반 메트릭이 여전히 적용된다는 데 동의합니다.

예, 전환율은 예를 들어 팝업 버튼 자체와 닫는 X에 대해 측정해야 합니다. 그러나 이탈률 또는 이탈률을 측정하는 것은 좋습니다(이것이 불만을 야기합니까?). 또한 팝업을 닫는 시간을 측정하는 것도 관련이 있을 수 있습니다(얼마나 많은 관심을 사로잡았습니까?).

장바구니에 추가와 같은 기타 클릭 측정항목은 여전히 ​​유용한 정보를 제공합니다. 그러나 추적하기에 가장 좋은 것은 수익을 측정하는 확실한 방문자당 수익(Revenue per Visitor) 메트릭으로, 그 자체로 전환율 및 평균 주문 가치(Average Order Value)에 대한 정보가 포함되어 있습니다.

사용자 참여를 측정하는 또 다른 유용한 측정항목은 사용자당 세션수 입니다.

그러나 Medcline.com의 CRO인 Jonathan Finegold는 수익을 추적해야 한다고 생각하지 않으며 그 이유는 다음과 같습니다.

우리 블로그의 경우 수익이 주요 KPI가 아니며 가입률은 유기적 트래픽에서 이메일 캡처를 최대화하는 것이 목표이기 때문입니다. 마찬가지로 전자 상거래 환경에서도 수익이 항상 최상의 지표는 아닐 수 있습니다. 마진에서 제안이 수익성이 없을 수 있고 따라서 올바른 KPI(이 경우 마진 달러의 변화율)가 될 수 있기 때문입니다 .

간단히 말해서 다음은 A/B 테스트 또는 분할 테스트 팝업이 표시될 때 확인해야 하는 측정항목입니다.

• 전환율
• 클릭률
• 이탈률
• 이탈률
• 사용자당 세션
• 장바구니에 추가
• 방문자당 수익
• 팝업 닫힘
• 제출 비율

Google 애널리틱스와 Shopify를 Convert와 같은 A/B 테스트 플랫폼에 연결하여 이러한 모든 측정항목을 정확하게 측정하세요.

다음은 해당 프로세스의 예입니다.

예를 들어 팝업이 사용자를 참여시키기 전에 시간을 테스트할 때 히트맵과 Google Analytics 데이터를 보고 사람들이 팝업을 닫는 비율을 알아냅니다.

우리는 15초 이하의 모든 것이 약 86%의 폐쇄율을 초래하고 이탈률 증가에 기여한다는 것을 발견했습니다. 팝업 시간이 사용자가 사이트에 있었던 시간으로부터 15-45초 사이인 경우 폐쇄율이 61%로 떨어지고 이탈률이 14% 감소하는 것을 보았습니다.

시간을 1분으로 설정했을 때 폐쇄율이 5% 추가로 떨어지고 이탈률이 6% 감소하는 것을 보았습니다. 또한 1분이 설정 시간일 때 CTA 버튼과의 상호작용이 40% 증가했습니다. 다른 두 구간에서는 CTA 클릭률이 거의 또는 전혀 변화하지 않았습니다.

CTA 버튼 내의 텍스트를 테스트하는 경우 CTA의 CTR%를 확인합니다. 시간 수식어(예: 지금, 오늘)와 함께 보다 직접적이고 구체적인 언어를 사용하면 CTR이 14% 증가했습니다.

CircleIt Inc.의 성장 마케팅 책임자 Joe Karasin

비즈니스에 중대한 영향을 미칠 수 있다고 생각하지 못한 또 다른 지표는 페이지 속도입니다.

A/B 테스트 팝업을 추적하는 가장 좋은 측정항목은 Page Speed입니다.

gif 및 비디오가 포함된 팝업으로 인해 페이지 속도가 느려져도 놀라지 마십시오. 팝업은 페이지와 동일한 HTTP 요청에서 로드되어 페이지 속도에 영향을 줍니다.

폭포수 차트를 분석하여 페이지에 대한 팝업의 영향을 계산할 수 있습니다. Pingdom 테스트를 통해 페이지의 변형을 실행하고 페이지 속도를 비교하십시오. 로딩 속도에 상당한 차이가 있는 경우 테스트가 이미 실패한 것입니다. 검색 경험이 전환율에 큰 영향을 미치기 때문에 웹사이트 로딩 속도가 팝업보다 먼저 나타 납니다.

Arek Nowakowski, 제품 디자이너 @ Spacelift

참고: 이전에 가드레일 메트릭에 대해 간략하게 언급했지만 팝업을 테스트할 때 이를 염두에 두는 것이 중요합니다. 성능 저하가 비즈니스에 막대한 영향을 미칠 수 있기 때문에 테스트할 때 저하되는 것을 원하지 않는 핵심 메트릭입니다.

A/B 테스트 팝업 시 유의해야 할 지침

A/B 테스트 팝업을 시작할 준비가 되면 다음 권장 사항에 따라 효율성을 개선하십시오.

• 샘플 크기가 올바른지 확인하기 위해 사전 테스트 계산을 수행합니다.
  충분히 많은 사람들을 대상으로 테스트를 수행하지 않으면 오탐지가 진짜라고 믿는 것과 같은 실수를 할 위험이 있습니다. 사전 테스트 계산을 수행하여 염두에 두고 있는 조정 주기를 실행할 발판이 있는지 확인하십시오.
  
  팁: A/B 테스트 계산기를 사용하여 유의성, p-값, 검정력, 표본 크기 및 MDE 계산을 수행합니다.
• 트래픽이 많은 사이트에 대해 소규모 MDE를 사용하여 미세한 변경 호스트를 계획합니다.
  트래픽이 많은 경우 작은 MDE(Minimum Detectable Effect)로 미세한 변화의 전체 주기를 그릴 수 있습니다. 대부분의 팝업 실험은 한 자릿수 상승만 발생합니다. 따라서 이 접근 방식은 작은 변경이 KPI의 해당 조정과 어떻게 관련될 수 있는지 이해하는 데 도움이 될 수 있습니다. 트래픽이 높을수록 더 작은 상승도를 감지하고 결과를 확신할 수 있습니다.
  
  참고: MDE는 단순히 우리가 관찰할 가치가 있는 최소 효과 크기이며, 그 아래에서는 새로운 변형을 구현하는 데 드는 비용이나 노력이 가치가 없습니다.
• 팝업이 잘 작동하지 않는 경우 변경 사항을 결합하십시오.
  팝업이 중요하지 않으면 여러 변경 사항을 결합하고 더 큰 MDE로 한 번에 롤아웃하십시오. 또한 트래픽이 충분하지 않은 경우 중요도에 도달하는 데 필요한 트래픽이 줄어들기 때문에 좋은 생각입니다. 개선을 위한 모든 시도는 두 자릿수의 가시적 개선으로 이어질 것이라고 가정합니다.
• 최적화할수록 오탐에 주의하십시오.
  가양성 또는 제1종 오류는 실제로 아무 것도 없는 경우에도 대조군과 변이체 사이에 차이가 있음을 나타냅니다. 이러한 가능성을 실제로 줄이는 한 가지 방법은 먼저 위에서 언급한 샘플 크기 계산기를 사용하는 것입니다.
  
  팁: 미션 크리티컬 실험의 경우 신뢰 수준을 99%로 설정하여 이러한 오류를 범할 가능성을 1%로 줄이십시오.
  
  팝업이 최적화될수록 가양성을 무시하는 데 더 주의해야 합니다.

Convert Experiences 앱에서 팝업 A/B 테스트

변환을 사용하면 상점의 팝업을 A/B 테스트하고 위에서 언급한 팝업 요소를 변경하여 사이트의 전환율을 향상시키는 요소를 확인할 수 있습니다.

가장 좋은 부분? UX 팀의 도움 없이 사용자 지정 팝업을 추가할 수 있습니다!

A/B Visual Editor로 기존 팝업 테스트

귀하의 웹사이트가 운영 중이며 Shopify 온라인 스토어 방문자가 귀하의 홈페이지에 방문하고 있습니다. 자, 여기서 어디로 갈까요?

1단계: 새 변환 환경 만들기:

2단계: 팝업이 포함된 Shopify 스토어 URL을 로드합니다.

3단계: 마우스로 팝업을 클릭하면 작업을 수행하고 형식을 변경할 수 있는 Visual Editor 메뉴가 표시됩니다.

변경 사항 미리보기가 완료되면 Visual Editor 내에서 라이브 미리 보기 옵션을 사용하여 새 팝업이 어떻게 보이는지 확인합니다.

새로운 모양과 느낌은 다음과 같습니다.

새 형식에 익숙해지면 Shopify 방문자가 경험을 활성화하여 둘 중 어느 것이 더 나은지 확인하십시오.

사용자 정의 편집기 변환을 사용하여 변형에 팝업 추가

이제 Shopify 템플릿의 일부가 아닌 팝업 제안을 홈페이지에 포함하려는 경우 걱정할 필요가 없습니다!

사용자 정의 CSS + HTML+ JS 변환 편집기를 사용하여 추가하고 A/B 테스트할 수 있습니다.

1단계: 다시 새로운 변환 환경을 만듭니다.

2단계: 팝업을 포함할 Shopify 스토어 URL을 로드합니다.

3단계: 사용자 정의 CSS 및 사용자 정의 Javascript 옵션을 사용하여 팝업 JavaScript 코드를 추가합니다(온라인에서 사용할 수 있는 많은 템플릿을 찾거나 직접 코딩할 수 있음).

이 예에서는 https://github.com/beeker1121/exit-intent-popup에서 사용할 수 있는 팝업을 사용했습니다.

4단계: 그런 다음 변경 사항을 적용하고 저장합니다.

변경 사항 미리 보기가 완료되면 Visual Editor 내에서 라이브 미리 보기 옵션을 사용하여 새 팝업이 어떻게 보이는지 확인합니다.

새 팝업에 익숙해지면 Shopify 방문자를 위한 경험을 활성화하여 제안이 어떤 변화를 가져올지 확인하십시오.

팝업은 A/B 테스트를 하지 않는 경우에만 성가시고 방해가 되며 비효율적입니다.

데이터는 적절한 사용, 배치, 타이밍 및 복사가 팝업을 의미 있는 행동을 유도하는 효과적인 방법으로 만들 수 있음을 보여줍니다. 사실 한 가지 흥미로운 사실은 팝업에서 제안을 사용할 때 웹사이트에서 동일한 다른 CTA보다 더 많은 상호작용을 받는다는 것입니다.

CircleIt Inc.의 성장 마케팅 책임자 Joe Karasin

"설정하고 잊어버리십시오" 전략에서 벗어나 A/B 테스트를 수용하십시오.

실험을 통해 사용자가 전략에 어떻게 반응하는지 파악하고 조정하며 원하는 결과를 도출할 수 있습니다.

사람들이 A/B 테스트를 할 때 저지르는 실수를 피하고 Convert와 같은 올바른 테스트 플랫폼을 선택하는 한 고객과 브랜드를 위한 윈-윈 상황을 만들 수 있습니다.