콘텐츠에 대한 A/B 테스트: 참여를 KPI로 사용하여 A/B 테스트를 실행하는 방법

게시 됨: 2020-08-13
사용자 참여

전환 최적화에서는 실험을 실행하여 전환과 수익을 높이는 데 중점을 둡니다. 그러나 일부 회사의 경우 최적화의 목표는 인수 및 거시적 전환뿐만 아니라 유지 및 브랜드 충성도입니다. 미디어 회사 및 기타 게시자는 유지 및 전환을 개선하기 위해 참여를 KPI로 A/B 테스트를 실행합니다.

그러나 참여도를 측정하는 것이 항상 간단한 것은 아닙니다. 참여를 위한 프록시 역할을 하는 마이크로 전환의 조합에 의존해야 합니다. 이탈률, 페이지에 머문 평균 시간, 스크롤 깊이 및 페이지 조회수와 같은 미시적 전환을 결합하여 방문자가 웹사이트에서 얼마나 참여하고 있는지 파악할 수 있습니다.

사용자 참여 측정항목이 유용합니다.

이러한 사용자 참여 측정항목은 매크로 전환이라고도 하는 금전적 측정항목이 아닐 수 있지만 무엇이 잘못되었는지에 대한 포인터 역할을 할 수 있습니다. 예를 들어 중요한 방문 또는 제품 페이지의 높은 이탈률은 전환에 부정적인 영향을 미칩니다. 따라서 모니터링 비율은 부정적인 추세를 파악하는 데 도움이 될 수 있습니다.

사례 연구 에서 BestSelf Co.는 주요 제품 페이지에서 전환에 영향을 미치는 높은 이탈률을 발견했습니다. 그리고 그들은 문제를 해결하기 위해 파트너 에이전시인 SplitBase를 고용했습니다. SplitBase는 Hotjar의 히트맵 기능을 사용하여 광범위한 분석을 실행하여 방문자로부터 피드백을 얻기 위해 페이지, 설문조사 및 설문조사에서 무슨 일이 일어나고 있는지 확인했습니다.

분석에서 SplitBase는 사용자가 중앙을 지나 스크롤하지 않고 제품 작동 방식을 이해하지 못하고 효과를 불신한다는 사실을 발견했습니다. 이러한 통찰력을 바탕으로 SplitBase는 방문자의 이점과 해결된 우려 사항을 명확히 하는 헤드라인을 중앙에 추가하면 더 많이 유지되고 더 나은 전환으로 이어질 것이라고 가정했습니다.

제품 구매자가 자신을 "전문가"로 식별했기 때문에 SplitBase는 이를 사용하여 "전문가"라는 단어가 포함된 헤드라인을 만들고 제품의 이점을 명확히 하고 사회적 증거를 추가했습니다. 그들은 2가지 변형을 디자인하고 Convert Experiences에서 실험을 실행했습니다.

변형 1

SplitBase 변형 1

변형 2

SplitBase 변형 2

원본에는 헤드라인이 없었습니다. 각 버전은 4주 동안 20,000명의 방문자를 보았습니다. 이는 결과가 일관되고 통계적으로 유의하다는 것을 확인하기 위한 것이었습니다. 첫 번째 변형27%의 전환 증가와 13%의 "장바구니에 추가" 증가로 다른 버전을 능가했습니다.

참여 측정항목으로 실험을 실행할 때 유사한 결과를 얻는 방법에 대해 알아보겠습니다.

귀사의 참여는 어떤 모습입니까?

참여를 KPI로 사용하여 A/B 테스트를 실행하기 전에 참여가 회사에 정확히 무엇을 의미하는지 결정하십시오. 참여는 다양한 사용자 참여 측정항목을 결합하여 측정되므로 참여 측정을 위해 정확히 결합할 참여 측정항목을 결정하는 것이 중요합니다.

BBC 는 참여도를 KPI로 측정하는 실험 프로그램을 운영하고 있습니다. A/B 테스트를 수행할 때 기사 또는 에피소드의 조회수 및 사용자가 채널에서 보내는 시간을 늘리는 것과 같은 목표를 사용합니다. 본질적으로 그들은 페이지뷰와 페이지에 머문 평균 시간을 사용하여 사용자의 참여를 측정하고 사용자가 라이선스 비용을 최대한 활용할 수 있도록 합니다.

참여 측정항목을 선택할 때 유지 및 고객 만족 유지의 목표를 반영하는지 확인하세요. 목표를 반영하는 사용자 참여 측정항목을 결정한 후에는 이러한 사용자 참여 측정항목의 기준 측정값을 설정해야 합니다.

참여 지표의 기준 측정 설정

기준 측정을 설정하려면 함께 트리거되는 2-3개의 메트릭을 결합해야 합니다. 예를 들어 스크롤 깊이와 페이지에서 보낸 시간(간격)을 결합하여 참여 KPI를 추적할 수 있습니다. 일반적으로 독자가 50% 스크롤 깊이로 페이지에서 60초를 보내는 것과 같은 특정 요구 사항을 충족하면 두 메트릭이 함께 트리거되기를 원할 것입니다.

스크롤 깊이 및 타이머 트리거
원천

Google 태그 관리자에는 타이머 트리거와 스크롤 깊이 트리거가 있습니다. 이 두 트리거를 만들고 둘 사이에 종속성을 만드는 동안 하나의 태그에 연결할 수 있습니다. 이렇게 하면 두 트리거의 조건을 충족해야만 태그가 마침내 실행됩니다. 그런 다음 두 트리거의 조건이 모두 충족되면 실행되는 새 Google Analytics 이벤트 태그를 만들 수 있습니다. 이렇게 하면 GA를 통해 추적할 수 있습니다. Simo Ahava 는 이 태그를 만드는 방법에 대해 자세히 설명합니다.

타이머 트리거가 60초이고 스크롤 깊이 트리거가 50%인 태그를 생성한다고 가정해 보겠습니다. 상호 의존적으로 만들면 사용자가 두 트리거에 대한 조건을 충족할 때까지 연결된 태그가 실행되지 않습니다. 또한 GA에서 이벤트 태그를 모니터링하여 사용자가 콘텐츠에 참여하는 방식을 파악할 수 있습니다.

이 방법을 사용하여 사용자가 콘텐츠와 상호 작용하는 방식에 대한 기준을 설정하면 참여를 KPI로 사용하여 A/B 테스트를 실행할 때도 도움이 될 수 있습니다. 테스트 결과를 비교할 측정값이 있기 때문입니다.

참여를 KPI로 사용하여 A/B 테스트를 실행하는 방법

참여를 KPI로 사용하는 A/B 테스트를 실행하는 첫 번째 단계는 사용자 참여 를 높이는 방법을 찾는 것입니다.

사용자가 웹사이트와 상호작용하는 방식에 대한 기준을 설정하면 웹사이트를 최적화하여 추적 중인 측정항목(이 경우 참여)을 더욱 개선할 수 있습니다. 또는 매달 참여도가 떨어지고 문제를 해결하기 위한 솔루션으로 사이트를 최적화할 수 있습니다.

어떤 이유에서든 참여를 KPI로 사용하여 A/B 테스트를 실행하라는 메시지가 표시되더라도 더 많은 데이터가 필요합니다. Convert와 잘 통합되는 Hotjar 와 같은 히트맵 도구를 사용하여 웹사이트 또는 콘텐츠 페이지에서 개선이 필요한 영역을 자세히 식별할 수 있습니다.

  • 변환 경험 에 로그인하십시오.
  • 나침반으로 이동하여 버튼 클릭으로 A/B 테스트로 전환할 수 있는 가설을 입력합니다. 변형을 디자인한 후에는 목표를 할당해야 합니다.

15일 동안 무료로 사용해 보세요!

원본 및 대안 페이지에서 스크롤 깊이와 시간을 사용하여 상호작용을 정확하게 측정하는 기본 목표를 만들어야 합니다.

  • 경험 변환 앱에서 목표 를 클릭합니다.
  • 그런 다음 목표 추가 .
  • 사전 설정된 목표에서 스크롤 깊이를 선택하고 추적하려는 스크롤 깊이와 추적하려는 페이지 URL을 입력합니다. 목표를 저장합니다.
스크롤 깊이 목표
스크롤 깊이 목표
  • 그런 다음 다시 목표 추가 로 이동합니다.
  • 사전 설정 메뉴에서 고급 목표 를 클릭합니다.
  • 페이지에 머문 평균 시간 을 선택합니다. 시간을 초 단위로 입력합니다. 최소 시간을 충족하거나 초과하는 시간만 추적하도록 선택할 수 있습니다.
페이지에 머문 평균 시간이 있는 고급 목표
페이지에 머문 평균 시간이 있는 고급 목표
  • 그런 다음 사전 설정으로 이동하여 트리거된 목표 를 선택합니다. And 섹션에 있는지 확인하십시오.
  • 그런 다음 이전에 설정한 스크롤 깊이를 선택합니다. 고급 목표를 저장합니다.
최소 스크롤 깊이가 있는 고급 목표
스크롤 깊이 목표가 있는 고급 목표
  • 기본 목표로 설정하면 모든 준비가 완료됩니다!

이제 선택한 두 가지 참여 측정항목을 기반으로 방문자가 대안 콘텐츠 및 원본 콘텐츠와 상호작용하는 방식을 추적할 수 있습니다. 실험을 실행하고 통계적으로 유의할 때 승자를 선언합니다.

결론

참여를 kPI로 사용하여 A/B 테스트를 실행하는 것은 간단하지 않을 수 있습니다. 비즈니스가 고객 유지 및 충성도에 중점을 둘 때 가치가 있습니다. 방문자가 블로그 또는 제품 페이지와 같은 콘텐츠와 상호 작용하도록 하면 방문자가 계속 재방문할 수 있습니다!

높은 ROI A/B 테스트 무료 평가판