마인드 맵 시리즈 테스트: CRO 전문가처럼 생각하는 방법(15부)

라이언 레밴더 인터뷰

오늘 우리는 Rednavel Consulting의 Ryan Levander와의 독특한 인터뷰를 가지고 있습니다. Convert의 고객인 Ryan은 성공적인 테스트를 실행하는 데 필요한 사항에 대해 설명합니다.

Ryan은 CRO에서 가장 좋아하는 것 중 하나가 연구를 통해 고객 행동 통찰력을 얻을 수 있는 기회라고 말합니다. 분석 및 설문 조사에서 사용자 테스트 및 비디오 녹화에 이르기까지 다양한 방법을 사용할 수 있습니다. 그는 핵심은 테스트 아이디어에 대한 가설을 세우는 한 가지 방법으로 자신을 제한하지 않는 것이라고 말합니다.

따라서 CRO 프로가 되는 것에 대해 생각하고 있다면 연구를 할 준비를 하십시오!

당신은 CRO에 대한 당신의 생각을 바꿀 여행을 시작하려고 합니다. 실험의 세계가 실제 세계에서 실제로 어떻게 생겼는지 알아보려면 계속 읽으십시오(힌트: 큰 승리는 실제로 그렇게 자주 일어나지는 않습니다!).

라이언, 자기소개를 해주세요. 테스트 및 최적화에 참여하게 된 동기는 무엇입니까?

테스트 및 최적화에 들어가는 것은 실제로 청중의 의견에 귀를 기울였습니다. 당시(2015년경) 저는 웹 개발에서 비디오 제작으로 전환했습니다.

함께 작업한 클라이언트는 비디오를 정말 좋아했지만 여전히 인지도가 높아짐에 따라 결과를 얻거나 얻지 못하는 방법 에 대한 질문이 있었습니다.

당연히 나는 내 고객들이 그들의 가장 큰 고충을 해결하도록 돕고 싶었고 그 답이 없다는 것이 나를 괴롭혔다. 나는 또한 예측 가능한 방식으로 웹사이트를 측정할 수 있는 마케터를 위한 시장의 격차를 보았습니다.

측정을 깊이 있게 배우는 것은 CRO에 입문하기 위한 자연스러운 첫 단계였습니다. 숫자만 보고 끝나는게 아니었어요

몇 년 동안 최적화를 해오셨습니까? 테스터와 옵티마이저를 지망하는 사람들에게 추천하는 리소스는 무엇입니까?

저는 6년 동안 측정 및 최적화를 해왔습니다. 처음에는 보고/대시보드 설정으로 끝나는 분석 프로젝트로 더 시작했습니다. CRO는 지난 3년 동안 컨설턴트로서 저에게 주요 초점 중 하나였습니다.

의존해야 하는 리소스는 초기에 네트워크를 개발하는 것입니다 . 나는 결국 Measure Slack 커뮤니티에서 함께 작은 주역을 형성할 견고한 사람들을 찾았습니다. 내가 소통하는 대부분의 사람들은 오늘날에도 여전히 아이디어를 발산합니다.

또 하나 는 멘토를 고용하는 것입니다. 나는 이것을 하기 위해 너무 오래 기다렸다. 코스는 훌륭하지만(몇몇 예를 들자면 CXL, Optimization Academy, Online Persuasion Institute, Invesp를 통해 많은 것을 배웠습니다), 경험이 있고 가르치는 것을 좋아하는 멘토를 고용하는 것은 누구에게도 뒤지지 않습니다.

5단어 이내로 답변: 최적화 분야는 무엇입니까?

지속적인 테스트 + 실험, 항상 학습합니다.

사람들이 최적화를 시작하기 전에 반드시 이해해야 하는 상위 3가지 사항은 무엇입니까?

그들은 먼저 지도상의 위치(분석)를 알아야 합니다. 다음 달에 100개의 판매에 도달하려면 이번 달에 몇 개를 판매하는지 알아야 합니다. 숫자뿐만 아니라 방법(사용자가 사이트에서 취하는 행동을 이해하기 위해 분석을 통해 자세히 설명).

모든 테스트 아이디어는 (반드시) 연구에서 나옵니다. 수행해야 할 연구의 유형이 매우 다양합니다. CRO에 대해 내가 가장 좋아하는 부분 중 하나일 것입니다. 분석, 설문 조사, 수행할 작업 스타일 인터뷰, 사용자 테스트, 현장 설문 조사, 비디오 녹화, 영업 통화 참여/하루 종일 고객과 대화하는 영업 팀과의 대화(해당되는 경우 SaaS에서도 일함) 등이 있습니다. 테스트 아이디어에 대한 가설을 세우는 데 도움이 되는 모든 다른 유형의 연구. 한 가지 조사 방법만 사용하지 마십시오!

기본에 대한 강력한 기반을 가지고 있는지 확인하십시오.

통계 – 테스트 전 계산 도구를 사용하여 테스트에 소요되는 시간을 측정하거나 트래픽이 충분한 경우에도 측정할 수 있습니다.

프로세스 – 테스트를 시작하기 전에 최소 테스트 실행 시간에 동의합니다. 또한 선택한 테스트 도구가 어떻게 작동하는지 이해하고 있는지 확인하십시오. % 신뢰 수준을 결정하십시오.

목표/미시 목표 – 여기서 1차 및 2차 목표는 무엇입니까? 판매/가입/리드에서 멀리 떨어진 곳에서 테스트를 실행할 때는 일반적으로 데이터가 무슨 일이 일어나고 있는지 더 나은 "스토리"를 전달하도록 더 많은 목표를 설정하는 것이 좋습니다(힌트: 탐색 테스트를 위해 이 작업을 수행하십시오).

편향되지 않은 이야기를 전달하기 위해 질적 및 양적 데이터를 어떻게 처리합니까?

내가 선호하는 것은 항상 양적으로 시작하는 것입니다. 무슨 일이 일어나고 있는지에 대한 유용한 진실을 알려주는 경향과 패턴을 구축하는 데 도움이 될 것입니다. 그런 다음 일어나고 있는 일에 대한 인식을 취하고 정성적 데이터로 이를 더욱 검증할 수 있습니다. 사람들이 전환하고 있거나 전환하지 않는 "방법"에 대해 더 자세히 알아보십시오.

내가 Convert에 대해 정말 좋아하는 것 중 하나는 사용자 지정 이벤트 및/또는 dataLayer 작업으로 추가 작업을 수행해야 하는 시간을 절약할 수 있다는 것입니다. 통합은 버튼을 눌러 HotJar, Zuko, GA 등으로 이벤트를 보내는 데 도움이 됩니다. 이는 정량적(해당 테스트)과 정성적(예: Hotjar에서 비디오 화면 녹화 및 히트맵 보기)을 일치시킵니다. .

최적화 팀을 위해 어떤 종류의 학습 프로그램을 설정했습니까? 그리고 왜 이러한 구체적인 접근 방식을 취했는가?

테스트의 기본 영역에 대한 SOP가 있습니다. 궁극적으로 우리는 시간이 지남에 따라 일종의 "시험용 성경"을 갖게 될 것입니다. 저는 현재 Roam Research 및 Obsidian과 같은 도구를 사용하여 공간에서 읽은 기사에 대한 생각을 연결하고 특정 주제에 대한 내 자신의 생각과 주장을 개발한 후 팀과 공유합니다.

우리는 모든 고객에게 Airtable을 사용하지만 내부적으로 다양한 스와이프 파일 유형을 구축할 때도 사용합니다.

학습은 항상 저와 제 작은 팀에게 가장 중요한 것 중 하나였습니다. 당연히 나는 지식에 대한 갈망과 같은 올바른 자질을 가지고 더 나은 팀원을 원합니다. 그것이 테스트에 대해 가져야 할 동일한 태도인 "지속적인 개선" 유형의 사고방식입니다.

사라지고 싶은 가장 짜증나는 최적화 신화는 무엇입니까?

그 큰 승리는 많이 일어납니다. (나는 사례 연구를 비난한다)

큰 승리가 일어날 수 있습니다. 이전에 테스트를 많이 해보지 않았지만 트래픽이 괜찮은 "신선한" 사이트가 있다면(그리고 업계에 대해 상당히 숙련된 CRO임) 더 큰 승리를 일찍.

그 외에도 CRO에서 더 큰 성공을 거둘 가능성은 연구의 깊이와 이해와 상당히 관련이 있다고 생각합니다. 여러 입력이 실제로 핵심일 때 CRO가 한 가지 유형의 연구에 부분적으로 참여할 수 있다는 것을 발견했습니다(우리가 더 잘하는 것이 무엇인지에 따라 우리 모두가 유죄일 수 있음).

나는 항아리 예제에서 젤리 빈을 사용하는 것을 좋아합니다. 항아리에 얼마나 많은 콩이 들어 있는지 추측하는 유일한 사람이라면, 당신이 많이 빗나갈 가능성이 있습니다. 항아리에 몇 개의 콩이 있는지 추측하는 사람들이 있는 경우 모든 추측의 평균을 취하면 가능성이 낮아집니다. 연구 유형과 입력이 많을수록 테스트 우승자가 될 가능성이 높아집니다.

Ryan과의 인터뷰가 실험 전략을 올바른 방향으로 이끄는 데 도움이 되기를 바랍니다!

어떤 조언이 가장 마음에 들었습니까?

더욱 발전된 전략을 안내해 줄 CRO 전문가와의 다음 인터뷰를 기대해주세요! 아직 시청하지 않았다면 Gursimran Gujral , Haley Carpenter , Rishi Rawat , Sina Fak , Eden Bidani , Jakub Linowski , Shiva Manjunath , Andra Baragan , Rich Page , Ruben de Boer , Abi Hough 와 최신 인터뷰를 확인하십시오. 알렉스 버켓 .