A/B 테스트가 비즈니스에 피해를 줄 수 있습니까? 잘못된 A/B 테스트 도구를 사용하면 비즈니스에 피해를 줄 수 있는 4가지 방법

A/B 테스트 도구를 무시하지 마십시오. 기술 스택의 또 다른 Martech 제품으로 무시하기에는 너무 중요합니다.

마케팅 예산을 할당하는 방법, 사이트에 발생하는 트래픽의 양, 운영 오버헤드의 규모, 2천만 유로의 벌금이 부과될 가능성은 테스트 도구 선택과 많은 관련이 있습니다.

따라서 이것에 주의하십시오.

다음은 잘못된 A/B 테스트 도구로 인해 회사가 손실을 입거나 손실을 입을 위험이 있는 몇 가지 방법입니다.

최적화 목표에 대한 초점 상실

모든 기능이 필요한 경우 올인원 도구가 편리합니다. 하지만 문제는 그렇지 않을 가능성이 높다는 것입니다. 실제로 2019년 Gartner 연구에 따르면 영국과 북미 지역의 마케터 중 42%가 마케팅 스택을 충분히 활용하지 못하고 있습니다.

따라서 공급업체의 관점에서 볼 때 많은 새로운 기능이 흥미롭습니다. 마케팅에 아주 좋습니다. 그러나 옵티마이저가 실제로 도구를 필요로 하는 작업과 관련하여 사용할 수 있는 기능은 무엇입니까?

모든 것을 하려고 하지만 아무 것도 잘 하지 않는 도구의 어수선한 UI를 탐색하는 것이 얼마나 쉬울까요?

이러한 도구를 사용하면 일반적으로 더 흥미로운 점을 발견할 수 있습니다. 기본 계획에는 정성적 데이터를 수집하는 데 도움이 되는 기능이 포함되어 있습니다. 그러나 테스트를 설정하고 실행할 때 필요한 기능이 더 비싼 계획 뒤에 숨어 있기 때문에 막혔습니다.

때로는 그것이 기업 계획입니다. "글쎄, 그냥 여분의 돈을 밖으로 껍질을 벗기자." 또 다른 문제가 있습니다. 가격은 맞춤식이므로 지불할 금액을 알아보려면 영업 팀과 전화를 걸어야 합니다. 5자리 숫자로 끝납니다.

그리고 그게 다가 아닙니다...

올인원 테스트 플랫폼은 A/B 테스트의 의사 결정 능력을 감소시킵니다. 사용자가 히트맵, 세션 기록 등에 의존하도록 권장되기 때문입니다. 결국 이러한 것들은 더 나은 마케팅 또는 개발 결정을 내리는 데 도움이 되지 않습니다.

예를 들어 히트맵은 사용자의 주의가 어디에 있는지 정확히 알려주지 않고 마우스 포인터가 어디에 있는지 알려줍니다. 그래서 Peep Laja는 그것을 "가난한 사람의 시선 추적 도구"라고 불렀습니다.

사람들이 마우스를 사용하는 방식과 주의를 기울이고 있는 위치를 연관시키려는 것은 부정확한 판단으로 이어집니다.

Google의 조사 결과:

• 94%의 사람들이 마우스 움직임과 시선 추적 사이에 수직적 상관 관계를 보여 주지 않았습니다 .
• 81%는 마우스 움직임과 시선 추적 사이에 수평적 상관 관계가 없음 을 보여주었고,
• 10%의 사람들이 링크 위로 마우스를 가져간 다음 페이지의 다른 내용을 읽습니다.

지금 스스로에게 물어보십시오. 마우스 포인터가 있는 곳에 눈이 있습니까?

히트맵은 위험을 측정하고 나타내는 데 도움이 되는 것으로 입증되지 않았습니다. 그리고 확실히 의사 결정이 아닙니다. 그들은 실제로 오류와 혼란을 일으키는 것으로 입증되었습니다.

따라서 결국 유용한 질적 데이터도 아닙니다. 투자를 낭비하고 목표 달성을 지연시킵니다.

생산성과 효율성을 높이기 위해 필요한 것은 복잡하지 않고 원하는 작업을 수행하는 도구입니다. Gartner는 또한 마케팅 기술에 통합 제품군 접근 방식을 사용한 마케터가 마케팅 목표를 달성하는 데 28%만 효과적이었고 고유한 요구 사항에 정확히 맞는 도구를 선택한 마케터는 45%라는 사실을 보여줌으로써 이를 증명했습니다.

기존 계획에서 복잡한 테스트를 처음부터 끝까지 실행하는 데 필요한 모든 기능을 제공하는 A/B 테스트 도구가 필요합니다.

이것이 바로 CRO 대행사인 Mintminds가 전자 상거래 브랜드의 제품 페이지를 개선하는 데 어려움을 겪을 때 한 일입니다.

그들은 히트맵을 평가하고 사람들이 페이지의 특정 섹션에 주의를 기울이는 것을 발견했습니다. 그들은 이것을 사용하여 사람들이 찾고 있는 데이터에 표시된 정보에 더 쉽게 액세스할 수 있는 페이지의 4가지 변형을 개발했습니다.

그런 다음 변환 경험에 대한 테스트를 설정하고 실행했습니다. 결과? 컨트롤을 능가하는 제품은 없지만 4개 모두 전환율이 떨어졌습니다.

그들이 한 다음 일은 사용자 조사로 전환하는 것이었습니다. 그들이 마이닝한 통찰력에서 그들은 이번에는 다른 가설로 페이지에 대한 새로운 변형을 만들었습니다. 그들은 28일 동안 통제에 대해 그것을 실행했고 다른 결과를 얻었습니다.

장바구니에 담기 비율은 컨트롤보다 13% 높았고 주문 전환율은 4.96% 증가하여 방문자당 수익이 6.58% 증가했습니다.

전체 기사 페이지의 헤드라인에서 알 수 있듯이 "컨텍스트 없는 데이터는 오해의 소지가 있습니다."

가치 있는 트래픽의 손실

오프라인 매장에서 유동인구가 중요한 것처럼 온라인 회사에서는 웹 트래픽이 중요합니다. 전 세계적으로 45억 명이 넘는 사람들이 인터넷을 사용하고 있습니다. 이 사람들은 대부분의 온라인 마케팅 활동의 대상입니다. 회사는 SEO 및 PPC를 사용하여 웹 사이트에 판매하기 위해 웹 트래픽을 유도합니다. 이러한 기술은 매우 효과적이고 수요가 많아 2017년에 PPC 지출이 100억 달러를 넘어섰고 SEO 서비스가 미국에서만 올해 800억 달러에 이를 것으로 예상됩니다!

팀이 SEO, PPC 또는 둘 다를 사용하여 웹사이트로 트래픽을 유도할 가능성이 있습니다. 잘못된 A/B 테스트 도구를 사용하는 경우 트래픽을 유도하는 데 소비한 노력과 리소스가 모두 헛수고일 수 있습니다.

A/B 테스트 도구는 동등하게 만들어지지 않습니다. 일부는 웹사이트의 로드 시간에 영향을 줄 수 있습니다.

페이지 속도는 전환, 유기적 순위 및 사용자 경험에 영향을 미치므로 중요합니다. 페이지에서 테스트할 때 A/B 테스트 도구로 인해 페이지 로드 시간이 늘어날 수 있습니다. 페이지의 추가 스크립트와 새로운 변형을 제공하는 시간 때문입니다.

Google 연구에 따르면 모바일 페이지 속도가 두 번째 지연되면 전환이 최대 20% 감소할 수 있습니다. 30억 명이 넘는 사람들이 스마트폰을 사용하여 인터넷에 액세스함에 따라 더 빠른 모바일 페이지 속도가 그 어느 때보다 중요합니다.

A/B 테스트 도구로 인해 힘들게 번 트래픽이 발생할 수 있는 또 다른 영역은 FOOC(Flash of Original Content)입니다.

이것은 테스트에서 깜박임이라고도 합니다. 테스트 페이지 방문자가 테스트 변형이 로드되기 전에 원본 페이지를 볼 때 발생합니다. 그것은 순식간에 발생합니다.

일부 테스트 도구는 페이지 속도에 미치는 영향을 줄이기 위해 스크립트를 비동기식으로 로드합니다. 그러나 이것은 깜박임을 유발할 수 있습니다. 방문자는 허가 없이 테스트를 받는 것을 즐기는 사람이 없기 때문에 이러한 문제를 계속 경험하면 떠날 것입니다.

그리고 그들이 플래시를 알아차렸지만 떠나지 않았다면, 그들이 지금 무슨 일이 일어나고 있는지 알고 있기 때문에 테스트의 무결성에 영향을 미칠 수 있습니다.

SmartInsert 기술이 포함된 Convert Experiences와 같은 A/B 테스트 도구는 깜박임을 제거할 뿐만 아니라 페이지 로드 속도에도 거의 영향을 미치지 않습니다.

작동 방식은 다음과 같습니다. 깜박임을 유발하는 A/B 테스트 도구는 사이트에 설치된 A/B 테스트 도구 스크립트를 통해 웹 페이지가 변경 사항을 로드하는 동안 방문자의 브라우저에 변경 사항을 적용합니다.

한편, 우리가 개발한 기술은 브라우저와 웹사이트 사이에 레이어로 로드됩니다. 이렇게 하면 원본 콘텐츠가 숨겨져 있는 동안 변경 내용이 표시됩니다.

원본 콘텐츠가 변형보다 빠르게 로드되면 깜박임이 발생합니다. 이것은 잘못된 버전이 결승선에 먼저 도달했음을 의미합니다.

MIT 신경과학자에 따르면 인간의 뇌가 이미지를 식별하는 데 13밀리초밖에 걸리지 않습니다. 깜박임은 100ms에서 1초까지 지속될 수 있습니다.

경험 변환을 사용하면 원하는 버전이 항상 결승선에 먼저 도달합니다. 깜박임 테스트가 없으므로 트래픽 손실과 테스트 결과가 손상되지 않습니다.

운영 비용 증가

Fortune 500대 기업이든 소규모 기업이든 관계없이 운영 비용을 낮추는 것은 모든 비즈니스의 목표입니다. 비생산적인 시간, 중단 또는 인건비를 줄이기 위해 기업은 간접비를 낮추기를 원합니다.

테스트 도구의 문제를 해결하기 위해 적합한 지원 상담원에게 연락하기 위해 매주 몇 시간씩 전화 통화를 하는 경우에는 이 작업을 수행하기 어려울 수 있습니다. 지원 전화에 소요되는 시간은 전반적인 생산성을 감소시키고 회사 비용을 절감합니다. Gallup은 비생산성으로 인해 기업이 매년 전 세계적으로 7조 달러의 비용을 지출하고 있다고 보고합니다.

인건비는 기업 운영비의 70%를 차지한다. 개발자를 자신의 책임에서 떼어놓고 복잡한 테스트 도구 설정으로 묶을 때마다 운영 비용이 증가합니다. 개발자가 새로운 CRO 도구를 현재 Martech 스택과 통합하는 작업을 할 수 있도록 초과 근무 수당에 대해 생각해 보십시오.

응답하지 않는 지원 에이전트와 함께 즉시 광범위한 개발 리소스가 필요한 테스트 도구는 운영 비용을 크게 증가시킵니다.

대신 전략은 도구에 합리적으로 지출하고 나머지 예산을 강력한 최적화 팀에 투자하는 것입니다. A/B 테스트 도구의 비용은 연간 $100,000이 아닙니다.

도구는 도구일 뿐입니다. 사용할 사람이 없으면 쇼 글라스에 앉을 수도 있습니다. 대부분의 최적화 전문가는 이에 동의하며 이것이 LinkedIn CRO 커뮤니티에 전체 #TeamOverTools 캠페인이 있는 이유입니다.

옵티마이저는 4배 더 빠른 지원과 함께 제공되는 Convert Experiences와 같이 충분히 강력한 도구를 사용하여 수익 창출 결과를 생성하여 팀의 성과를 더욱 높일 수 있습니다.

A/B 테스트 도구에 대한 6자리 연간 구독 대신 팀에 자금을 다시 투자하십시오. 가설을 세우고 실험 문화를 발전시키며 도구를 사용하여 비즈니스 결정을 이끄는 통찰력을 추출하는 사람들에게 투자하십시오.

도구는 그것을 사용하는 사람만큼만 훌륭할 수 있습니다. 물론 도구도 중요하지만 도구만으로는 최적화 프로그램을 실행할 수 없습니다. 사람들은 한다. 당신은 사람이 없으면 어디에도 없을 것입니다.

개인 정보 및 데이터 위험

오늘날 세상은 개인 정보 보호에 더 민감합니다. 기술 사용자의 개인 정보를 보호하기 위해 법률과 규정이 생겨났습니다.

오늘날 가장 영향력 있는 결정 3가지와 기술 산업의 데이터 및 분석 처리 방식에 큰 변화를 일으키고 있는 3가지:

• 일반 데이터 보호 규정(GDPR)
• 개인 정보 보호 및 전자 통신에 대한 개인 정보 및 전자 통신 지침(ePrivacy Directive라고도 함)
• 캘리포니아 소비자 개인정보 보호법(CCPA)

예를 들어 A/B 테스트에서 GDPR은 전 세계 어디에서나 EU 시민의 데이터를 처리하는 모든 사람이 GDPR을 준수해야 한다고 명시했습니다. 귀하는 이 데이터를 처리하기 전에 동의를 얻고 데이터 처리 목적을 명시하고 이 동의를 쉽게 철회해야 합니다.

실용적인 측면에서 이것은

• A/B 테스트를 위해 수집할 수 있는 데이터의 양에 영향을 미치고,
• 쿠키 수명 저장 제한 단축,
• 브라우저에서 "추적 금지"를 활성화하지 않은 사람들로 테스트 모집단 등을 제한합니다.

또한 ePrivacy 지침은 방문자 ID의 익명성을 요구하고 최종 사용자의 개인 데이터를 저장 및 처리하지 않으며 지리적 위치 및 시간대 타겟팅에 대한 동의를 요청합니다.

물론, 채무 불이행에 대한 벌금이 손목을 때리는 것보다 훨씬 더 많이 느껴지기 때문에 이것은 몇 가지 주요 우려 사항을 제기합니다.

국가별로 세분화하면 수치가 올라갑니다. 미국에서 데이터 유출이 발생한 기업의 비용은 819만 달러입니다.

EU의 데이터 보호법(GDPR)이 시행됨에 따라 데이터 침해 비용이 훨씬 높아졌습니다. EU 시민의 데이터를 처리하는 회사는 엄청난 벌금을 물지 않도록 GDPR을 완전히 준수해야 합니다.

2019년 프랑스의 데이터 보호 기관은 데이터 유출로 인해 Google에 5,700만 달러의 벌금을 부과했습니다. 최근 스페인에서는 스페인의 데이터 규제 기관인 AEPD가 GDPR 섹션을 위반한 작은 카페에 1,500유로의 벌금을 부과했습니다.

실험 도구는 유사 콘텐츠를 보는 방문자에 대한 데이터를 수집합니다.

이 데이터는 익명으로 처리됩니까? GDPR 표준을 완전히 준수합니까?

A/B 테스트 도구가 방문자(특히 EU)에 대한 개인 식별 정보를 수집 및 저장하는 경우 비즈니스에 수천 달러에서 수백만 달러에 이르는 벌금이 부과될 수 있습니다.

GDPR 준수 테스트 도구는 데이터 침해가 발생한 경우 방문자의 데이터를 수집, 저장 및 처리하는 데 있어 귀하의 비즈니스가 어떠한 책임도 지지 않도록 하는 유일한 방법입니다.

지금은 A/B 테스트 전에 동의를 받을 필요가 없습니다. 그러나 손가락을 꼬고 그런 일이 일어나지 않도록 기도하지 마십시오. 개인 정보 보호법의 안전한 면을 지켜야 할 때라고 느낀다면 Convert로 전환하십시오.

Convert Experiences는 실험 개인 정보 보호 분야의 선두 주자입니다. 따라서 모든 규정을 준수하고 개인 정보 보호 규정의 변경 사항에 적응하기 위해 당사의 도구를 신뢰할 수 있습니다. 쿠키가 없는 미래로 나아가면서 팀과 함께 성장하고 최적화 프로그램을 최상의 상태로 유지하는 테스트 도구를 얻으십시오.

결론

잘못된 A/B 테스트 도구는 회사에 비용을 낭비할 뿐만 아니라 시간을 요하고 회사를 부채에 빠뜨릴 수도 있습니다. 그런 상황에 처했다면 더 나은 도구로 전환해야 합니다. 페이지 속도에 미치는 영향을 최소화하고 업계 평균 지원 응답보다 4배 더 빠르게 요구 사항에 맞출 수 있는 도구가 필요합니다.

해당 도구의 이름은 Convert Experiences입니다. 15일 동안 무료로 사용해 보세요. 신용 카드가 필요하지 않습니다.