마인드 맵 시리즈 테스트: CRO 전문가처럼 생각하는 방법(8부)

GuesTheTest의 Deborah O'Malley와의 인터뷰

데이터는 비즈니스의 새로운 통화입니다. 가정에 도전하고 가설이 유효한지 확인하기 위해 데이터를 적극적으로 사용하지 않는다면 불리한 상황에 처한 것입니다.

이를 수행하는 한 가지 방법은 테스트를 통한 것입니다. 그러나 실행할 테스트와 결과가 의미하는 바를 아는 것이 항상 쉬운 것은 아닙니다. 그리고 CRO에 대한 확실한 이해가 있더라도 테스트에 편향이 있을 수 있으며 결과가 무효화될 수 있습니다.

다행히도 당신은 혼자가 아닙니다.

테스팅 마인드 맵 시리즈는 올바른 사고 방식을 익히고 자신 있게 테스트를 실행하는 방법을 알려줍니다.

이 인터뷰에서 우리는 8세에 첫 최적화 실험을 실행한GuesTheTest의 Deborah O'Malley와 이야기를 나눴습니다. 그녀는 실험 실행을 위한 최고의 리소스를 공유하고 다음 테스트를 안내하기 위해 입증된 전략을 간략하게 설명합니다.

데보라, 자기소개를 해주세요. 테스트 및 최적화에 참여하게 된 동기는 무엇입니까?

8살 때 나도 모르게 첫 최적화 실험을 실행했습니다!

초등학교 과학 실험을 위해 다양한 모양과 색상의 도화지를 오려 게시판에 게시하고 사람들에게 어떤 버전을 먼저 보았는지 물었습니다.

이것이 나의 첫 시선 추적 실험이 될 줄은 거의 몰랐습니다...

몇 년 후, 저는 결국 시선 추적 기술을 전문으로 하는 석사 학위를 취득하게 되었습니다!

내 연구 작업은 시선을 사로잡는 광고를 가장 잘 디자인하는 방법을 살펴보았습니다. 이 연구 결과는 동료 심사를 거친 6개의 저널 기사에 게재되었으며 전 세계 디지털 마케터에게 영감의 원천이 되었습니다.

석사 과정을 마친 후 현지 UX 회사에서 사용자 경험(UX) 테스트를 시작했습니다.

교육의 일환으로 회사는 WhereTestWon이라는 리소스를 확인하도록 권장했습니다.

그래서 성실히 등록하고 주간 A/B 테스트를 보기 시작했습니다. 이 작은 행동이 내 경력의 방향을 바꿀 줄은 몰랐습니다...

몇 년 후, WhereTestWon은 시니어 콘텐츠 제작자를 위한 채용 공고를 냈습니다.

나는 운이 좋게도 취직했다!

그리고 그 과정에서 시선 추적 및 UX에서 CRO 및 A/B 테스트의 놀라운 세계로 옮겨갔습니다.

여기에서 나는 마침내 내 자리를 찾았다는 것을 알았다.

저는 데이터를 사용하여 증거 기반 결정을 내리는 동시에 창의성을 적용하여 새로운 변종을 설계하고 테스트하는 전뇌 접근 방식을 좋아했습니다.

WhereTestWon은 훌륭한 경험이었지만, 그 길에는 많은 우여곡절이 있었습니다.

절정에 이르렀을 때 회사는 인수되고 브랜드가 변경되었으며 곧 완전히 해산되어 마케터는 낙엽송에 빠졌습니다.

그것은 많은 사람들에게 치명적이었습니다. 그 간극을 메워주는 것이 나의 의무라고 생각했다.

그래서,GuesTheTest가 태어났습니다.

GuesTheTest의 설립자로서 제 목표는 실험자들에게 귀중한 A/B 테스트 사례 연구 데이터와 테스트 성공을 알리고 영감을 주고 검증하는 데 유용한 리소스를 제공하는 것입니다.

수천 건의 클라이언트 A/B 테스트 사례 연구를 생성, 분석, 실행 및 게시하면서 CRO 및 A/B 테스트에서 작동하는 것과 작동하지 않는 것에 대한 풍부하고 독특한 관점을 얻었습니다.

그리고 저는 그 지식을 가르치고 다른 옵티마이저와 공유하는 데 도움을 주고 싶습니다.

몇 년 동안 최적화를 해오셨습니까? 테스터와 옵티마이저를 지망하는 사람들에게 추천하는 리소스는 무엇입니까?

나는 태어날 때부터 최적화 사고방식을 가지고 있었을 것입니다.

내가 기억하는 한, 나는 결점을 보았고 더 나은, 더 효율적이고 더 효과적인 것을 만들기 위한 창의적인 아이디어를 생각해 냈습니다.

그러나 공식적으로는 2009년 석사를 졸업하고 첫 번째 경력 관련 UX 직업을 얻었을 때 최적화 경력이 시작되었습니다.

젊은 밀레니얼 세대에게 인정하고 싶지는 않지만, 저는 10년 넘게 최적화 작업을 해왔고…

내가 추천하는 유일한 테스트 리소스에 관해서는 훌륭한 것들이 많이 있습니다.

하지만 한 가지만 선택해야 한다면 저는 추측해 봐야 할 것 같습니다. 나는 인정하지만, 나는 약간 편향적이다.

5단어 이내로 답변: 최적화 분야는 무엇입니까?

데이터 기반 실험 프로세스.

사람들이 최적화를 시작하기 전에 반드시 이해해야 하는 상위 3가지 사항은 무엇입니까?

1. A/B 테스트는 최적화의 황금 표준이지만 유효하고 신뢰할 수 있는 결과를 얻으려면 제대로 수행되어야 합니다.

2. 귀하의 가설은 견고한 A/B 테스트의 근간입니다. 타겟 고객, 전환 문제 및 제안된 솔루션을 명확하게 식별하고 예상 결과를 명시하고 테스트 전환 목표를 정의하는 "스마트 가설"을 정의하는 것으로 시작해야 합니다.

3. 실패한 테스트와 같은 것이 있지만 테스트 실패와 같은 것은 없습니다. 실험에서 무언가를 배운다면 말입니다.

편향되지 않은 이야기를 전달할 수 있도록 질적 및 양적 데이터를 어떻게 처리합니까?

정성적 데이터와 정량적 데이터를 함께 병합하는 것은 매우 가치가 있지만 CRO 및 A/B 테스트에서 활용도가 매우 낮은 전술입니다.

기껏해야 대부분의 실험자들은 결정을 내리기 위해 분석이나 전환 데이터에만 의존하는 경향이 있으며 다른 것에는 거의 주의를 기울이지 않습니다.

제 성향은 조금 다릅니다.

저는 질적 데이터로 시작하여 정량적 데이터와 병합하는 것을 좋아합니다.

그렇게 하려면 더 많은 시간과 노력이 필요하지만 청중, 청중의 요구 및 전환을 개선하는 데 필요한 사항에 대해 더 완전하고 전체적인 관점을 제공합니다.

아마도 이러한 편견은 제가 질적인 UX 세계에서 시작했다는 사실에서 비롯된 것 같습니다.

그러나 내가 참여했거나 본 것 중 가장 좋은 실험 중 일부는 일반적으로 UX 연구에서 정성적 발견을 취하고 분석 데이터를 조사한 다음 A/B 테스트로 결과를 검증합니다.

정성적 데이터와 정량적 데이터를 모두 병합하고 두 가지 접근 방식을 모두 사용하여 유사한 결과를 얻을 때 매우 견고한 작업을 하고 있다는 것을 알 수 있습니다.

최적화 팀을 위해 어떤 종류의 학습 프로그램을 설정했습니까? 그리고 왜 이러한 구체적인 접근 방식을 취했는가?

실험과 동지애의 문화를 구축하는 것은 정말 중요합니다.

수년에 걸쳐 저는 많은 조직에 학습을 주입하는 데 도움을 주었습니다.

현재 한 테스트 기관에서 테스트 승리를 공유하고 테스트 아이디어에 대한 대화식 토론을 만들고 테스트 지식을 전파하는 데 도움이 되는 "Testing Roundtable Discussions"를 실행하고 있습니다.

또한 A/B 테스트를 올바르게 설정하고 실행하는 것부터 데이터와 결과를 분석하는 것까지 모든 것을 다루는 튜토리얼과 교육 비디오를 만들었습니다.

저는 지식 공유가 핵심이라고 생각합니다. 특히 프로젝트 관리, 개발 또는 디자인과 같은 테스트 이외의 역할을 맡은 신입 사원이나 해당 주제에 정통하지 않을 수 있는 사람들의 경우 그렇습니다.

진정한 최적화는 지식과 정보를 갖춘 팀에서만 얻을 수 있습니다.

사라지고 싶은 가장 짜증나는 최적화 신화는 무엇입니까?

경쟁자를 모방해서는 안 된다는 것입니다.

당신의 경쟁자들은 훌륭한 영감의 원천이 될 수 있습니다.

사실, 하나의 사이트와 하나의 청중에게 잘 작동하는 것이 청중이 있는 사이트에 직접 적용되지 않을 수 있습니다.

하지만 테스트하기 전까지는 알 수 없습니다.

검증된 결과와 함께 경쟁사 사례 연구 증거를 사용하여 테스트 노력을 지시하십시오. 그런 다음 성공을 최적화하십시오.

Deborah와의 인터뷰가 전환율 최적화 전략을 올바른 방향으로 이끄는 데 도움이 되기를 바랍니다! 어떤 조언이 가장 마음에 들었습니까?

더욱 발전된 전략을 안내해 줄 CRO 전문가와의 다음 인터뷰를 기대해주세요! 아직 시청하지 않았다면 OptiPhoenix의 Gursimran Gujral, Speero 의 Haley Carpenter , Frictionless Commerce의 Rishi Rawat , ConversionAdvocates의 Sina Fak, Green Light Copy의 Eden Bidani , GoodUI의 Jakub Linowski 및 Shiva Manjunath 와의 인터뷰를 확인하십시오. 스피로 !