트래픽이 적은 사이트에서 A/B 테스트하는 방법

트리거 경고:

우리는 통계적 의미, 95% 신화적(또는 아님?) 표시, 테스트 및 트래픽 등을 둘러싼 수많은 논쟁이 있다는 것을 알고 있습니다.

이 항목에 대해 강하게 느끼는 옵티마이저라면 촉발될 수 있습니다. 글쎄, 의견이 열려 있고 우리는 정말 계몽적인 대화를 나눌 수 있습니다.

의 시작하자!

트래픽이 적은 웹사이트에서는 테스트가 작동하지 않습니다.

그건 확실합니다.

통계적으로 중요한 통찰력을 얻으려면 실험의 변형을 (최소한) 수천 명의 사용자에게 보여줘야 하기 때문입니다.

실제로 Convert Experiences에서는 사용자가 각 변형에 대해 약 10,000명의 방문자를 보낼 수 있는 경우에만 가장 간단한 CRO 실험인 A/B 테스트를 실행하는 것이 좋습니다.

또한 대조 또는 변이의 우월성에 대한 결정적인 증거를 얻기 위해 약 1000회의 전환을 기록하는 것이 좋습니다.

이러한 종류는 CRO가 백만 고객 유형의 시장이 아닌 이유를 설명합니다. 성공 여부를 테스트할 수 있는 발자취가 있는 웹사이트(또는 비즈니스)가 100,000개에 불과하고 값비싼(빠르게 "기업"으로 가는) 최적화 솔루션에 대한 예산이 있기 때문입니다. !

트래픽이 적은 사이트는 테스트를 배제해야 합니까?

평균적인 중소기업의 웹사이트 방문자는 하루에 수백 명에 불과하기 때문에 A/B 테스트 실험은 의미가 없습니다.

하지만:

그렇다고 해서 중소기업이 실험을 전혀 할 수 없다는 의미는 아닙니다.

사실 중소기업도 할 수 있는 실험은 많다.

그리고 그것들을 실행하면 많은 이점이 있습니다.

예를 들어, 소규모 비즈니스를 소유하고 있는 경우 실험을 실행 하면 직감 기반에서 데이터 기반 의사 결정으로 전환하는 데 도움이 됩니다. 그것은 당신이 데이터를 보도록 강요할 것입니다 ... 그리고 눈에 띄는 숫자로, 당신은 * 제 생각 에 * 전략에 기본을 두는 것을 멈출 것입니다. 이 데이터 기반 접근 방식만으로도 비즈니스 구축 및 성장 방식을 혁신할 수 있습니다.

실험을 실행 하면 현상을 받아들이기보다는 시도함으로써 배우는 법을 배울 수도 있습니다. 그것은 일한다고 믿는 원칙이 실제로 당신에게 효과 가 있는지 확인하도록 영감을 줄 것입니다.

마지막으로, 실험을 실행 하면 "충분한" 트래픽이 있을 때 "실제" CRO를 준비할 수 있습니다 . 이는 효과적인 CRO의 전제 조건인 테스트에 대한 올바른 사고 방식을 개발하는 데 도움이 되기 때문입니다.

따라서 사용하는 마케팅 채널에 대해 가능한 모든 실험을 시작하십시오. 다음은 몇 가지 옵션입니다.

이메일로 테스트

놀랍게도 이메일 마케팅은 수많은 구독자(또는 "연락처") 없이도 다양한 아이디어를 실험할 수 있는 하나의 채널입니다.

"누가 그래?"

MailChimp, ConstantContact 및 Campaign Monitor에서 HubSpot(마케팅 자동화 소프트웨어에서 이메일 마케팅 지원)에 이르기까지 모든 이메일 마케팅 소프트웨어 제공업체는 말합니다.

HubSpot부터 시작하겠습니다.

따라서 HubSpot의 이메일 플랫폼을 사용하여 A/B 테스트를 실행하려면 1,000개의 연락처만 있으면 됩니다. 1,000개의 연락처는 이메일 전송 샘플에서 A/B 테스트를 실행하기 위한 벤치마크이기도 합니다. — 허브스팟

Campaign Monitor는 또한 작은 이메일 목록으로도 A/B 테스트를 실행할 수 있다고 말합니다. 그 뒤에 있는 수학은 다음과 같습니다.

이제 "내 목록 크기는 구독자가 500명에 불과합니다. 어떻게 내가 성공적인 테스트를 실행하기를 기대합니까?"라고 생각할 수 있습니다. 내 대답은 더 큰 MDE[최소 감지 효과(MDE)]에 초점을 맞춰야 한다는 것입니다. MDE를 늘리면 필요한 표본 크기가 줄어듭니다. 따라서 20%의 상대적 효과를 탐지하기 위해 변형당 592명의 구독자가 필요한 대신 50%의 상대적 효과를 탐지하기 위해 변형당 94명의 구독자만 필요합니다. 기준 전환율도 샘플 크기에 영향을 미칩니다. 전환율이 낮을수록(이 경우 공개 %) 정확한 테스트를 실행하는 데 더 많은 구독자가 필요합니다. — 캠페인 모니터

따라서 구독자가 500명 또는 1000명 정도인 경우 사용자의 말에 관심이 있는 반응형 데이터베이스가 있다면 테스트할 수 있습니다.

그러나 일부 이메일 마케팅 제공업체는 약간 더 높은 접촉 기반을 권장합니다.

예를 들어 이메일 마케팅 솔루션 제공업체인 ConstantContact는 HubSpot이 허용하는 최소 크기의 두 배에 더 높은 샘플 크기를 권장합니다. 의미 있는 A/B 테스트를 위해서는 표본 크기가 1,000개 이상의 연락처여야 한다고 제안합니다. 따라서 구독자가 2000명이라면 테스트하는 것이 좋습니다(A 및 B 버전은 각각 전체 연락처의 50%를 테스트 트래픽으로 가져옴).

제목 줄 테스트의 경우 가능한 경우 최소 1,000개 연락처의 샘플 크기에서 각 줄을 테스트하는 것이 좋습니다. 각 버전에 대한 1,000명의 사용자는 일반적으로 모든 A/B 테스트에 대한 좋은 벤치마크이지만, 해당 수치에 도달할 충분한 연락처나 방문자가 없는 경우에도 테스트를 실행할 가치가 있습니다. — 상수 연락처

MailChimp는 또한 A/B 테스트를 실행하기 위해 더 큰 목록을 권장합니다. 테스트를 실행하려면 최소 5,000명의 연락처가 있어야 한다고 제안합니다. 그러나 많은 소규모 비즈니스 연락처 기반이 그보다 훨씬 작기 때문에 전체 목록에서 아이디어를 테스트하는 것이 좋습니다.

테스트에서 가장 유용한 데이터를 얻으려면 최소 5,000명의 가입된 연락처에 조합을 보내는 것이 좋습니다. 목록 또는 세그먼트의 크기가 각 조합에서 5,000명의 구독자를 허용하지 않는 경우 전체 목록을 테스트하고 캠페인 결과를 사용하여 향후 캠페인 콘텐츠 결정을 알리는 것이 좋습니다. — 메일침프

거대한 표본 크기가 통계적 유의성에 훨씬 더 빨리 도달하는 데 도움이 되는 것은 사실이지만(훨씬 더 확실하게), 작은 목록으로도 테스트를 시작할 수 있습니다!

다음은 이메일 캠페인에 대한 150개 이상의 이메일 분할 테스트 아이디어입니다.

또한 이메일 A/B 테스트에 대한 빠른 가이드가 있습니다.

소셜 미디어로 테스트하기

소셜 미디어는 소셜 팔로워가 아무리 적더라도 아이디어를 테스트할 수 있는 또 다른 채널입니다. 게다가 어떤 면에서는 소셜 미디어에서 실제로 도달 범위를 제한하는 것은 없습니다.

예를 들어, Convert Experiences에는 수만 명의 팔로워가 없지만, 우리의 멋진 Social Seller는 해시태그, 이미지 등과 같은 소셜 미디어 사본의 요소를 계속 실험하고 있습니다.

그리고 그녀의 테스트는 우리에게 큰 승리를 가져다줍니다. 예를 들어, 특정 해시태그 세트를 사용한 그녀의 실험은 Google Analytics에서 리트윗을 받은 적이 있습니다!

자, 그것은 소셜 미디어 노출입니다. 그렇지 않습니까?

빠른 승리를 (어쩌면) 우연으로 치부하기 쉽다고 말할 수 있지만 해시태그 세트가 정기적으로 테스트한 다른 해시태그보다 더 많은 노출을 얻는 것을 볼 때 테스트 결과 이상을 얻게 됩니다. .

다양한 소셜 미디어 A/B 테스트를 실행하여 이러한 추세를 파악하고 소셜 미디어 성과를 높일 수 있습니다. 여기에서 소셜 미디어 A/B 테스트에 대한 훌륭한 입문서를 게시했습니다. 이 기사를 읽고 소셜 미디어 A/B 테스트, 실행할 수 있는 다양한 소셜 미디어 A/B 테스트, 명심해야 할 최고의 소셜 미디어 A/B 테스트 모범 사례를 시작하는 방법을 알아보세요.

유료 광고를 사용한 A/B 테스트(PPC)

이메일 및 소셜 미디어 마케팅 채널과 마찬가지로 PPC 마케팅 채널을 통해 광고 카피와 광고 캠페인의 다른 모든 요소를 ​​실험할 수도 있습니다.

Google Adwords든 Facebook 광고든 대부분의 유료 네트워크는 실험을 지원하므로 최고의 ROI를 얻을 수 있습니다.

그러나 PPC 실험에서 통계적으로 유의미한 결과를 얻으려면 각 광고 카피에 대해 수천 번의 노출이 필요합니다. Google은 주당 노출수가 5000회 이상인 광고그룹을 테스트할 것을 권장합니다.

그렇다면 수천 개의 광고 노출 비용은 얼마입니까?

플랫폼과 산업(다른 요인들 중에서도)에 따라 많이 다르지만 예산 책정에 도움이 되는 데이터가 있습니다.

예를 들어, AdStage는 2018년 1분기에 1억 1천만 회 이상의 광고 노출(Google Adwords에서)을 분석했으며 Google Ads에서 1,000회 CPM(노출수)을 얻으려면 평균적으로 116.91달러가 필요하다는 것을 발견했습니다. 작년에는 약 13% 저렴 했습니다.

Facebook과 같은 소셜 미디어 네트워크도 접근 가능한 CPM 옵션을 제공합니다.

Statista 연구 데이터에 따르면 Facebook의 평균 CPM(1000회 노출당 비용 또는 1,000회 노출당 비용)은 USD 1.26입니다. AdExpresso 및 WordStream의 다른 Facebook CPM 평균 비용 추정치는 $7-10 범위입니다.

문제는 제한된 예산으로도 광고 카피 테스트를 시작할 수 있다는 것입니다.

(거의) "교통 방지" 실험 방법: 개인화

방문자에 대해 알고 있는 정보를 기반으로 방문자의 웹 사이트 경험을 개인화하거나 개인화하는 것은 실험의 또 다른 일반적인 형태입니다.

개인화의 가장 좋은 점은 CRO 테스트에 적용되는 트래픽 제약이 개인화에 적용되지 않기 때문에 트래픽이 적은 웹사이트에서도 작동할 수 있다는 것입니다.

그 이유는 개인화의 최종 목표가 전환율을 최적화하는 것이 아니기 때문입니다. 그 대신 목표는 더 많은 전환 또는 더 높은 고객 만족도 및 유지로 이어지는 더 관련성 높은 사용자 경험을 제공하는 것입니다.

예를 들어 제품 페이지의 다른 버전을 만들어 고객과 비고객(또는 리드)에게 표시할 수 있습니다.

고객을 위한 제품 페이지에서 제품 가이드 및 비디오, 지원에 액세스할 수 있는 빠른 링크 등의 콘텐츠를 표시하여 고객이 보다 보람 있는 제품 경험을 얻을 수 있도록 할 수 있습니다. 리드를 보여주는 버전(예: 평가판에 등록한 사용자)은 전환을 돕기 위해 제품의 기능이나 사례 연구에 집중할 수 있습니다.

기업의 약 93%가 개인화를 통해 더 나은 전환을 경험합니다.

그리고 바로 개인화를 시작할 수 있습니다.

또한 경험 변환과 같은 도구를 사용하면 몇 분 안에 개인화된 웹 사이트 경험을 설정할 수 있습니다. 타겟팅 규칙을 설정하기만 하면 다양한 잠재고객 세그먼트에 개인화된 메시지를 표시할 수 있어 각 세그먼트가 구매 여정의 다음 단계로 이동하도록 유도할 수 있습니다.

정리하다…

웹사이트 트래픽이 적으면 실질적인 CRO 실험을 실행하는 데 제한을 받을 수 있지만 "학습"을 막을 수는 없습니다.

그리고 그것이 중요합니다. 일단 표준을 받아들이기보다는 시도함으로써 학습에 초점을 옮기면 효과적인 CRO의 전제 조건인 실험 문화를 개발하기 시작할 것이기 때문입니다.

어떤 성장 단계에 있든 상관없이 테스트 문화를 개발하는 데 투자할 수 있습니다. 하드코어하고 결정적인 CRO 실험을 하기 위해 웹사이트에 트래픽이 충분할 때 유용할 것입니다.