실험 팀의 속도 향상: 실험 전문가 3명의 팁

Netflix, Google, Amazon 및 Booking.com과 같은 회사가 실험으로 살인을 저지르는 이유가 궁금하신가요? 하지만 회사에서 시도했을 때 물에 빠진 모루처럼 납작해졌습니다.

아니면 그렇게 나쁘게 나오지 않았을 수도 있습니다. 그 대신, “두 자릿수 상승은 모두 어디에 있습니까?”라고 자주 묻는 자신을 발견하게 됩니다. 특히 테스트 도구에 대해 6자리 숫자를 지불한 경우에는 더욱 그렇습니다. 쳇!

큰 도구는 큰 결과를 의미해야 하지 않습니까? 설마. 실험은 A/B 테스트 도구보다 팀에 관한 것입니다.

#teamovertools

도구는 그것을 사용하는 두뇌만큼만 훌륭할 수 있습니다. 당신의 사람들이 나쁘다고 말하는 것이 아니라 실험에 대한 투자를 최대한 활용하기 위해 그들에게 더 많은 것을 줄 수 있습니다.

따라서, 실험 프로그램을 혁신하는 데 필요한 지원을 팀에 지속적으로 제공할 수 있는 방법이 있습니다. 이 이야기를 직접 들어본 전문가의 조언을 참고하십시오.

도구보다 팀 - 새로운 실험 시대의 시대정신

옛날 옛적에 기업은 실험 플랫폼에 10만 달러를 투자한 다음 마케팅 인턴에게 넘겼습니다.

이 연습에서 어떤 결과가 나왔다고 생각합니까?

라는 감성

1. A/B 테스팅은 버튼과 양식과 같은 사이트 요소를 만지작거리며 (어쨌든) 더 많은 사람들을 심히 이기적인 "깔때기"로 밀어넣는 것입니다.
2. 상품화 된 CRO입니다! 실험 누구?
3. 최적화는 너무 엄격해서 제대로 하기 어렵습니다. 이제 우리는 "통계적 중요성"이라는 도장이 찍힌, 이제 믿을 수 있는 직감 중심의 의사 결정의 간소화된 버전을 사용해야 합니다.

요컨대, 아무도 결과를 보지 않고 검색 엔진 최적화의 좋은 이름이 "XYZ는 죽었다" 및 "유행어" 진흙탕을 통해 끌리는 $250 USD 월간 유지 SEO와 유사한 것입니다.

고맙게도 브랜드에서는 도구를 얻는 것이 여정의 끝이 아니라는 사실을 깨닫고 있습니다. 그것은 단지 시작일 뿐입니다.

한 명의 실무자는 그것을 바로 잡을 수 없습니다.

젠장, 자신의 장치에 맡겨진 여러 개업의조차도 어려움을 겪을 수 있습니다. 특히 그들이 나중 섹션에서 언급하는 자질과 기술이 없는 경우.

사실 실험 팀의 이상적인 구조는 계층화되고 로드된 주제입니다. Manuel Da Costa는 이에 대해 다음과 같이 길게 썼습니다.

그는 게시물의 두 번째 부분에서 더 나아갔습니다.

똑똑한 사람들의 뛰어난 업적을 요약하면 다음과 같습니다.

• 최적화/실험 — 이 부서를 뭐라고 부르든 상관없이 데이터 기반 전략을 지원하고 지원하는 부서에는 최고 경영진의 동의가 필요합니다. 정상에 있는 누군가의 열렬한 지지가 있어야 합니다.
• 그리고 실험의 "작업"은 테스트 그 이상입니다. 여기에는 조정, 의사 소통, 사일로를 무너뜨리고 테스트를 전파하는 것이 포함됩니다.
• 물론 10인 실험팀과 함께 파티에 올 필요는 없다. 그러나 A/B 테스트 성공을 정의하는 것은 팀이라는 것을 이해해야 합니다. 도구가 아닙니다.

이제 막 시작하는 경우 Alex Birkett은 홈으로 미끄러지는 부드러운 방법을 제안합니다.

실험 프로그램을 시작할 때 대행사 또는 컨설턴트와 협력하십시오. 나는 당신이 그것을 사내에서 할 수 있다고 생각한다는 것을 알고 있으며 아마도 할 수 있습니다. 그러나 종종 외부 전문가가 가장 잘 해결하는 기술, 문화 및 프로세스 문제가 있습니다.

귀사의 성장 책임자나 기술적 노하우와 전략적 지식을 겸비한 사람이 대행사를 관리하도록 하는 것이 좋습니다.

확장함에 따라 조직의 나머지 부분이 자체 실험을 실행하도록 가르치고, 활성화하고, 지원하는 "우수성 센터"를 궁극적으로 목표로 삼고 싶을 것입니다. 그렇지 않으면 실험 전문가가 자신의 팀을 통해 모든 것을 실행하여 병목 현상이 발생합니다. 이 우수 센터는 종종 실험 기술 스택을 구축 또는 관리하고, 팀 시작 및 실행을 돕기 위해 리소스와 시간을 빌려주고, 근무 시간 및 교육 세션을 주최하고, 질문에 답변하고 문제를 해결 합니다.

알렉스 버켓, 전지전능한 디지털

다기능 분대는 프로그램이나 비즈니스의 규모에 관계없이 이길 수 없습니다. 절충안 또는 위험 신호는 팀에 책임이 있지만 권한이 없는 경우 관계없이 형식적인 절차가 있고 작동하지 않는다는 것입니다. 그러나 여정이나 성장 레버(채널이 아님)에 중점을 둔 '연합' 스쿼드 그룹은 내가 가장 좋아하는 설정입니다. 예를 들어 획득과 관련된 목표 트리에 중점을 둔 스쿼드와 수익 창출에 중점을 둔 스쿼드가 있습니다.

벤 라베이, 스피로

대체로 각 CRO 프로그램은 다음과 같은 몇 가지 주요 과제에 직면해 있습니다.

그리고 그들 중 어느 것도 당신이 구입하는 도구에 초점을 맞춘다고 해결되지 않을 것입니다.

실험 팀을 훈련하는 방법?

실험 팀 교육은 채용부터 시작됩니다. 직원이 아닌 사람을 교육할 수는 없지만 올바른 태도를 가진 사람을 확보해야 합니다.

하지만 이는 한 단계일 뿐입니다. 이 프로세스는 온보딩 단계와 그 이후로 확장되며, 지속적인 개선을 소중히 여기는 것이 조직의 문화가 되어야 합니다. 실험 팀 교육에 대해 더 자세히 알아보겠습니다.

올바른 의사를 먼저 고용하십시오.

드래곤을 훈련시키는 방법과 거의 비슷합니다.

올바른 기질로 시작하십시오!

다음은 제레미 엡퍼슨(Jeremy Epperson)이 고기능 실무자의 6가지 특성에 대해 설명한 내용입니다.

용이 당신을 태울 수 있습니다. 내성적인 CRO 실무자도 마찬가지입니다.

그들은 확립된 프로세스를 따르지 않아 의사소통을 방해할 수 있습니다.

그들은 (새로운) 과정, 실험 결과 및 학습을 문서화하는 데 부지런하지 않을 수 있습니다. Insights는 게임의 이름입니다. 배우지 않는데 왜 테스트를 합니까? 가장 가치 있는 가설 중 일부는 반복할 가치가 있는 가설입니다.

그들은 데이터 분석에 비판적 사고를 가져오지 않을 수 있습니다. 그들은 그것을 하는 방법을 모를 수 있습니다. 아니면 주관적인 스토리텔링에 반대하는 것이 어렵기 때문에 선입견에 기반한 패턴과 연결을 두뇌에 제공하는 것을 선호할 수도 있습니다!

우리는 21명의 전문가에게 물었고, 이것은 그들이 다른 실무자들에게 중요하게 여기는 기술(및 사고방식)의 분석입니다.

• 실험 및 통계 기초 기초 : 실험을 실행하고 결과를 해석하고 모든 테스트에서 통찰력을 추출하는 데 기본 통계를 적용하는 방법을 알고 이해합니다.
• 리더십 및 의사 소통 능력 : 이해 관계자와 협력하는 데 탁월합니다. 실험을 믿고 그것을 복음화하고 올바른 기대치를 설정합니다. 테스트와 결과로 수준급; 숫자 뒤에 숨겨진 이야기를 말할 수 있습니다.
• 연구 능력 : 챔피언처럼 양적, 질적 연구를 처리할 수 있고, 올바른 질문을 하고, 올바른 문제에 대해 올바른 연구 방법론을 사용합니다.
• 데이터 주도형 : 직감적 본능과 창의적인 아이디어가 있지만 항상 데이터로 검증할 수 있습니다.
• Empathetic : 고객과 사용자를 이해하기 위해 노력하고 그들의 신발을 자주 밟습니다. 예를 들어 가장 효과적이고 비즈니스에 영향을 주는 방식으로 데이터를 전달하기 위해 이해 관계자에게 이러한 노력을 지시할 수도 있습니다.
• 회복력 : 테스트가 실패해도 실험에 대한 믿음을 잃지 않습니다. 그것은 그 자체로 실패가 아니다. 테스트를 올바르게 수행함으로써 그들은 무언가가 작동하지 않는다는 것을 검증할 수 있습니다.
• 프로세스 지향: 시스템, 프로세스, 워크플로 — 훌륭한 실무자는 이에 집착해야 합니다. 장기적인 성공을 위해서는 견고한 시스템이 필요합니다.
• 호기심: 열린 마음을 유지하고 새로운 것을 찾고 배우기를 열망합니다. 지속적으로 질문하는 것은 아이디어와 가설을 테스트하는 기초입니다.
• 가설 및 아이디어 생성 가능 : 단순히 질문을 하는 것을 넘어 대상 고객을 정의하고, 문제를 설명하고, 솔루션을 제안하고, 결과를 설명하고, 실험의 목표를 정의할 수 있습니까?
• 세부 사항 에 대한 주의: 거의 모든 이력서에서 찾을 수 있지만 특히 CRO에서 주의를 기울이지 않고 최적화할 기회를 잃는 경우 많은 부분이 균열을 통과할 수 있습니다.
• 개발자 기술 : 전문가 수준의 기술이 필요하지 않습니다. 시각적 편집기가 허용하는 것보다 더 깊이 테스트할 수 있도록 몇 가지 기본 지식이 중요합니다. 그리고 개발 팀이 지원하기를 기다리는 대기 시간도 많지 않을 것입니다.
• Creative & Entrepreneurial : 많은 모범 사례와 "시도되고 검증된" 방법이 있으므로 새로운 것을 하고 건전한 판단으로 근본적으로 다른 아이디어를 시도하는 데 끌리는 사람이 필요합니다.
• 실험에 관심이 있음: 실험에 흥미가 없다면(또는 최소한 관심이 있다면) 오래 지속할 수 있는 것은 많지 않습니다. 그리고 당신은 장거리 운전을 위해 이것에 있어야합니다.
• 비판적 사상가/분석가 : 데이터 에 대해 비판적으로 생각하기… 왜요? 알아보자” “그렇게 작동하지만 왜? 알아보자” . 그것은 타고난 테스터를 만든다.

이 확인란을 선택하는 사람을 고용하십시오.

( 참고: 이 모든 것이 한 사람이 아닐 수도 있지만 팀에 있어야 합니다.)

그런 다음 CRO 팀이 귀하에게 도전할 수 있는 권한을 부여하십시오. 실험의 DNA는 가정에 도전하고 날뛰는 HiPPos를 길들이는 것에 관한 것이기 때문입니다.

적절한 개인의 영향력 수준은 조직에서 실험 문화를 전파하는 데 도움이 됩니다.

자선과 데이터 기반의 견고한 사고는 모두 가정에서 시작됩니다. Jeremy Epperson은 현상 유지에 의문을 제기하지 않는 것이 침체로 이어질 수 있다는 점을 이해합니다.

그들에 대한 투자의 사고 방식을 취하십시오

그 동안 다음과 같은 사람들에게 더 많은 도움이 될 프로세스에 투자하십시오.

• 집중
• 생산적인
• 잘 정의된 실험 프레임워크의 범위 내에서 자유롭게 반성하고, 생각하고, 엉망으로 만들 수 있습니다.

이것은 실험에 매우 중요하므로 실험 성숙도의 4개 기둥 중 3개는 사람 및 프로세스와 관련이 있습니다.

• 프로세스 및 책임
• 문화
• 전문적 지식

Sina Fak은 사람과 프로세스를 성공적인 실험 프로그램에 가장 크게 기여하는 10가지 특성으로 분류했습니다. 한번 봐봐:

이 10가지 특성은 Netflix, Google, Microsoft 등이 보고 있는 결과를 생성하는 실험 프로그램을 실행하는 데 지침이 될 수 있습니다(물론 올바른 도구와 기술 스택을 사용하는 것은 제외).

1에서 5까지 세심한 주의를 기울이면 위의 파이 차트에서 동일한 품질을 볼 수 있습니다.

거기에 더하여 그들이 성장할 수 있도록 돕는 마음가짐이 있을 때 갈 수 있는 유일한 방법은 위로 올라가는 것뿐입니다. 결국 How to SaaS의 Shiv Narayan의 말에 따르면 뛰어난 팀의 구성 요소는 다음과 같이 요약됩니다.

1. 팀에 합류할 재능 있는 사람들을 찾고, 설득하고, 고용합니다.
2. 영감을 주는 비전을 중심으로 팀 조정
3. 팀이 성공하는 데 필요한 모든 지원과 리소스 제공
4. 팀원의 기술, 마인드, 능력을 향상시키는 데 도움
5. 도전과 성장 고원을 통해 팀원 코칭
6. 팀 구성원의 성장을 돕는 올바른 환경과 문화 구축
7. 1-6을 위험에 빠뜨리고 그들로부터 코칭을 받을 수 없는 사람들을 제거

프로세스에 대해 말하자면 Speero는 실험을 지원하는 운영 체제를 구축하고 있습니다. 그들은 뉴스레터에서 최고의 Miro 보드와 템플릿을 제공하고 있습니다. 실험 혁명에 참여하십시오.

온보딩은 체크리스트 그 이상

온보딩 방법은 지속적인 인상을 남깁니다. 실제로 대부분의 팀원 이탈은 온보딩에서 시작됩니다.

온보딩에는 다양한 방식(SOP와 보다 실질적인 학습 접근 방식)이 있지만 우리가 이야기한 세 명의 전문가는 모두 처음 90일의 중요성을 강조했습니다. 여기에서 세분화하기... 여기에 집중해야 하는 특정 버킷이 있습니다.

• 핵심 컨텍스트 요약
• 리소스(SoP, 비디오, 교육)에 대한 액세스 권한 부여
• 팀원의 참신한 아이디어 끌어내기
• 탐색할 수 있는 권한 부여(나머지 팀이 지원한다는 사실을 알고 있음)

다음은 새로운 팀원의 새로운 관점을 활용하는 방법에 대한 Alex Birkett의 조언입니다.

실험은 회사마다 다르므로 편안함을 느끼도록 돕는 가장 중요한 것은 가장 소화하기 쉬운 형태로 필요한 모든 컨텍스트를 제공하는 것입니다. 주요 전략적 이니셔티브는 무엇입니까? 어려움은 무엇이었으며 이 개인이 그러한 어려움을 극복하는 데 도움이 될 것으로 기대되는 것은 무엇입니까? 이 사람이 만나고 알아야 할 핵심 팀원은 누구입니까? 내부에서 작동해야 하는 엄격한 가드레일은 무엇입니까? 그리고 이 개인의 30-60-90일 계획과 기대는 무엇입니까? 투명하고 사전에 이루어져야 합니다.

그런 다음 테스트 도구, 정성적 연구 도구, 분석, Slack 채널, 내부 이메일 뉴스레터, 회의 등 필요한 모든 것에 대한 액세스 권한을 제공합니다. 조직의 이해를 용이하게 하기 위해 가능한 한 빨리 그들을 참여시켰습니다.

마지막으로 과소평가된 팁: 이 신입 사원에게서 가능한 한 많은 신선한 아이디어를 얻으십시오. 그들은 신선한 눈으로 들어오기 때문에 당신이 할 수 있는 것보다 당신의 프로세스와 프로그램의 문제를 더 잘 진단할 수 있습니다. 이 피드백을 최대한 빨리 받으십시오! 그들은 결국 당신 회사의 쿨에이드를 마실 것입니다. 실험 아이디어뿐만 아니라 더 나은 운영 및 확장 방법에 대한 아이디어도 가져옵니다.

알렉스 버켓

즉시 플라이휠에 새 팀원을 배치하는 것은 Ben Labay의 제안입니다.

SOP는 지루합니다. 가장 좋은 방법은 자신의 영웅의 여정을 시작하는 것입니다. 플라이휠에 참여시킨다는 의미: 고객 문제 및 기회에 대한 질문을 하는 데 도움이 되는 연구 과제 또는 기존 연구 세트를 제공합니다. 이것은 여정의 첫 번째 부분인 문제/동요를 밝히는 데 도움이 됩니다.

자, 이제 우리는 좋은 품질 문제를 가지고 있습니다. 그래서 그들에게 해결책을 제시하고 순위를 매기도록 하십시오.

붐, 이제 사양을 지정하십시오. 재미있는 테스트 문서/SOP를 모두 사용하여 개입에 대한 이야기를 들려주세요.

그런 다음 테스트하고 부분을 배우고, 실행 중인 것을 보고, 결과를 분석하는 등의 작업을 수행합니다. 그런 다음 결정 및 의사 소통이 최종 단계에서도 자신을 소유하게 합니다.

따라서 결국 그들은 온보딩 교육의 일부로 자체 플라이휠을 '소유'합니다. 하여 배우십시오 .

벤 라베이

ConversionAdvocates 대행사의 일반적인 90일 온보딩은 어떻습니까?

가장 좋은 사람은 Jeremy Epperson입니다. 그는 70시간의 개인 시간을 팀 훈련을 만들고 다듬고 표준화하는 데 보냈습니다. 왜요?

사람이 중요하니까!

고도로 구조화된 90일 온보딩이 있습니다. 흐름은 다음과 같습니다.

1. 첫째 날은 시간별로 나열됩니다.
    
   1. 모든 회의가 나열됩니다.
   2. 교육 자료는 매주 분석됩니다.
2. 주당 1시간은 직속 관리자와 새로 온보딩된 팀 구성원 간의 생산적인 세션에 전념합니다. 여기에는 일반적으로 다음과 같은 질문이 포함됩니다.
   
   
   1. 당신은 어디에 붙어 있습니까?
   2. 어떤 도움이 필요 하신가요?
   3. 어떤 훈련에 도움이 필요합니까?
3. 매주 우리는 CRO의 다양한 측면에 대한 교육을 진행합니다. 예를 들어, 테스트 가설이 구현 중에 문제로 판명되면 개발자는 이 문제를 직속 관리자에게 전달하여 클라이언트와 올바른 기대치를 설정하는 방법을 알 수 있습니까?
4. SoP는 새로 온보딩된 팀 구성원을 안내하고, 알리고, 권한을 부여하기 위해 존재합니다 .

제레미 엡퍼슨

온보딩을 넘어 교육을 확장합니다. 헉!

엄격한 온보딩 프로세스를 거친 후 신입 사원을 첫 번째 프로젝트로 보내는 것이 일반적입니다. 당신은 친절하고 그들을 L&D에 도입할 수도 있습니다.

그러나 최고의 성과를 내는 실험 팀과 함께라면 최소한의 작업(" 이봐! 우리는 당신이 사용하거나 사용하지 않을 수 있는 CXL 미니 학위에 대한 액세스 권한을 얻었습니다" )와 팀 교육을 위한 표준을 설정하는 것 중에서 선택할 수 있습니다. 이것은 다음과 같이 보일 것입니다:

예, Jeremy의 프로세스는 온보딩과 지속적인 지원 및 교육 제공에 탁월합니다. 귀하의 회사(이 경우 대부분의 회사)의 경우 지속적인 교육이 중간 어딘가에 있을 것입니다.

중간에는 다음이 포함될 수 있습니다.

• 온보딩 후 6개월간 일대일 미팅
• 고유한 요구 사항, 기술 및 숙련도 수준에 따라 맞춤화된 개인 개발 계획
• 실험 작업을 위한 SOP
• 지침 및 차단 해제를 제공할 수 있는 CRO 팀의 모든 사람에게 직접 액세스
• 개선에 도움이 될 수 있는 도구, 책 및 교육에 대한 환급

Alex, Ben, Jeremy를 제외하고 3명의 (다른) 전문가와 이야기를 나누고 팀 교육에 대한 의견을 정리했습니다. 그들의 통찰력은 일반적인 온보딩 프로세스를 넘어서 실험 팀 교육을 확장하기 위해 취할 수 있는 6단계의 기초를 형성합니다.

1. 조직 가치에 "지속적 학습" 추가

"가지고 싶다"는 소리가 들립니다.

그러나 Ben과 Jeremy는 답변에서 이 핵심 교리를 다루었습니다. 순항 문화는 우수 문화와 공존할 수 없습니다.

팀이 항상 호기심과 개선 없이 수행되어 왔던 것처럼 수행해야 하는 작업만 수행하면 환상적인 결과를 얻을 수 없습니다. 그리고 일반적으로 조직에서 일이 수행되는 방식을 반영합니다. 문화는 생각보다 중요합니다!

Speero에는 다음과 같은 메커니즘이 있습니다.

• 북클럽 — CRO 산업에 관한 또는 그와 인접한 훌륭한 독서에 중점을 둡니다.
• 'Learning Fridays' 월 1회 워크숍 세션으로 모두 CXL 코스를 시청하고 miro 보드에서 대화형 메모를 작성합니다.
• 테스트, SOP, 새로운 프레임워크 등에 대해 팀을 가르치기 위해 매주 다른 사람들이 'Show and tell' 세션을 진행합니다.
• '고양 및 교육'에 관한 특정 가치 및 우리는 각 가치에 대한 전용 여유 채널을 가짐으로써 이를 강화합니다. 그리고 누구든지 각 가치에 대한 여유가 있는 증거를 볼 때마다 해당 가치에 메시지를 자동으로 보내는 가치 이모티콘이 추가됩니다. 채널.
• 이것은 우리가 우리의 가치에 따라 생활할 때를 유기적으로 인식함으로써 팀이 가치를 강화하도록 합니다. 우리는 또한 매월 팀원을 지명하고 그들이 우리가 주는 자선 단체를 선택하는 'Living Our Values ​​Everyday(LOVE)' 상을 받습니다. 명목상 $50 기부. 그것은 토큰 제스처이지만 우리의 가치를 "교육"하는 데 도움이되는 메커니즘 '시스템'의이 부분이 그 중 하나입니다.

벤 라베이

그리고 그것은 제레미에게도 크게 다르지 않았습니다.

• ClickUp에는 팀원들이 액세스할 수 있는 실험 학습 저장소가 있습니다.
• 매주 개인 학습 및 개발을 위해 2시간을 할당합니다. 이것은 우리 실무자들의 계약에 내장되어 있습니다.
• 또한 비즈니스의 모든 측면을 문서화하고 이를 SoP로 전환했습니다. 비디오 및 문서화된 문서를 체크리스트 형식으로 제공합니다.
• 사람들이 질문하고 답변을 얻을 수 있는 다양한 주제에 대해 다양한 채널이 있습니다. 그런 다음 이러한 채널의 메시지를 캡처하여 ClickUp의 리포지토리에 넣습니다.
• 우리는 비즈니스 코치를 초대하여 프로세스와 문화의 격차를 감사할 수 있습니다.
• 우리의 핵심 회사 가치와 12개의 팀 휴리스틱은 우리의 일일 작업에 포함되어 있습니다.
• QA-ing 문제/클라이언트 불만 사항이든 간에 '무엇을 보고, 말하십시오' 팀의 누군가가 무언가가 잘못되었음을 감지하면 이를 전달해야 합니다.

Jeremy Epperson, ConversionAdvocates 최고 성장 책임자

여기서 패턴은 성장의 동반자, 끊임없는 공유, 우수 문화를 자주 강화하는 것입니다.

2. 쇼 & 텔

앞서 나열한 가치 있는 CRO의 자질 중 하나는 "실험에 관심"이라는 점을 기억하십시오. 때로는 이것이 바로 팀에서 점화되고 재배됩니다.

실험에 관심을 갖게 하여 훈련에 힘을 실어줄 내부 연료를 얻으려면 어떻게 해야 합니까? Alex가 하는 것처럼 보여주고 말하세요.

사람들이 관심이 없으면 무언가를 배우도록 강요할 수는 없습니다. 그래서 제 첫 번째 일은 사람들이 실험에 관심을 갖도록 하는 것입니다. 가장 쉬운 방법은 실험에 참여시키는 것입니다. 시간과 여유가 있다면 말 그대로 누군가가 자신의 실험을 실행하도록 돕는 것이 가장 좋은 방법입니다. 처음 테스트를 시작했을 때 받은 도파민 히트를 기억하십니까? 처음 우승자가 나왔을 때? 누군가에게 같은 느낌을 주면 곧 CXL Institute 과정을 스스로 수강하게 될 것입니다.

누군가가 자신의 테스트를 실행하도록 도울 수 없다면 실험 아이디어를 요청하는 게시판을 게시하십시오. Slack에 있는 사람들에게 어떤 아이디어가 있는지 직접 물어보세요. 그런 다음 로드맵에 넣고 아이디어를 제공한 사람에게 모든 공을 돌립니다.

사람들이 관심을 갖게 되면 교육 시스템에 연결할 수 있습니다. 여기에는 주간 뉴스레터 및 주간 실험 회의 정보, 근무 시간 세션, 코스 및 교육 자료, 회의 및 이벤트, 문서 등이 포함될 수 있습니다 .

알렉스 버켓

그런 다음 다음 제품을 홍보할 수도 있습니다.

3. 가르치고 배우기

지속적인 교육의 "Show & Tell" 측면을 기억하십니까?

글쎄, "보여주는"사람들에게는 인센티브가 있어야합니다. 넛지. Rishi Rawat은 이를 "Teach & Learn"이라고 부릅니다.

우리는 상당히 간단한 프로그램을 가지고 있습니다. 배우고 가르치라고 합니다. 작업이 완료되면서 우리는 끊임없이 새로운 것을 배웁니다. 이러한 통찰력 중 일부는 팀과 공유해야 합니다. 2주에 한 번 팀 회의를 통해 각 구성원이 자신의 직장 생활에서 배운 주요 내용을 공유합니다.

Rishi Rawat, Frictionless Commerce(테스트 마인드 맵 시리즈에서 가져옴)

학창시절에 이것은 시험 전에 공부한 것을 굳히기 위한 속임수였습니다. 동료가 이해할 수 있도록 개념을 설명할 수 있다면 훨씬 더 잘 이해하고 잊기 어려울 것입니다.

4. 제3자 학습 옵션을 테이블에 올려 놓으십시오.

지금까지 권장 사항의 대부분은 지식을 심화하기 위해 조직 프로세스와 학습 저장소에 의존했지만 (아직) 철저한 사내 ​​리소스를 보유하지 않은 회사의 경우 실무자가 Reforge와 같은 것에 액세스할 수 있도록 하는 것은 안전망이자 동기 부여 요인입니다. .

우리의 실험 챕터는 10명의 성장 마인드를 가진 개인으로 구성된 그룹으로, 데이터로 틀렸다는 것을 증명하기를 좋아하는 평생 학생입니다.

다양한 배경에서 온 70년의 최적화 경험이 결합되었습니다.

챕터 식과 동료 검토에서 기대할 수 있는 것 외에도 우리 팀을 위한 리포지(Reforge)가 있습니다.

우리는 모두 실험 심층 분석과 성장 시리즈를 모두 진행하기를 요청합니다.

공통 언어를 사용하는 것은 성과가 좋은 팀에게 과소평가된 초강대국입니다 .

John Ostrowski, 주요 성장 실험, iTech Media

5. 학습 여정을 적극적으로 관리

그래서 저평가.

이것이 Manuel Da Costa가 실험 팀 구조에 "오케스트레이터"를 포함시킨 것을 축하하는 이유입니다. 우리는 Orchestrator가 개별 성장 궤적을 "관리"해서는 안 된다는 것을 이해하지만, 실무자가 다음 큰 아이디어를 추구할 때 조직화되고 일상적인 것을 추적해야 한다는 사실을 인정합니다.

도구가 도와줍니다!

테스트의 기본 영역에 대한 SOP가 있습니다. 궁극적으로, 우리는 시간이 지남에 따라 일종의 "시험용 성경"을 갖게 될 것입니다. 저는 현재 Roam Research 및 Obsidian과 같은 도구를 사용하여 공간에서 읽은 기사에 대한 생각을 연결하고 특정 주제에 대한 내 자신의 생각과 주장을 개발한 후 팀과 공유합니다.

우리는 모든 고객에게 Airtable을 사용하지만 내부적으로 다양한 스와이프 파일 유형을 구축할 때도 사용합니다.

학습은 항상 저와 제 작은 팀에게 가장 중요한 것 중 하나였습니다. 당연히 나는 지식에 대한 갈망과 같은 올바른 자질을 가지고 더 나은 팀원을 원합니다. 그것이 테스트에 대해 가져야 할 동일한 태도, 즉 "지속적인 개선" 유형의 사고방식입니다.

Ryan Levander, Rednavel Consulting

6. 전문가의 도움 요청

마지막으로 CRO 에이전시는 실험을 하며 살아갑니다. 그들의 노하우를 활용하십시오.

이는 플라이휠에 윤활유를 바르고 시작하여 세계적 수준의 실험 프로그램을 구성하고 유지하는 데 도움이 되는 협업이 될 수 있습니다. 또는 개선해야 할 영역과 숙련도를 높여야 하는 팀 구성원에 중점을 두는 보다 사례별 기반 참여입니다. 최대한 빨리.

저는 에이전시 설립자 이며 항상 고객에게 한 가지는 고객이 우리의 도구, 템플릿 및 교육용 바퀴에 우리를 사용해야 한다는 것입니다. 우리는 열린 책입니다. 키워드 우선 순위를 지정하는 방법, 콘텐츠의 각도를 결정하는 방법, 성능 문제가 발생하기 전에 필요한 301 리디렉션 수, 이 블로그 게시물에 이 CTA를 선택한 이유 등 무엇이든 물어보세요.

에이전시는 매일 이 작업을 수행하며 이 작업에 대한 놀라운 답변을 제공해야 합니다. 그렇지 않으면 더 세게 밀거나 다른 기관을 구하십시오. 저와 같은 많은 기관들이 이 일을 적극적으로 하고 있습니다. 그러나 그러한 경우에도 브랜드 측에서는 더 많은 지식과 프레임워크를 요구해야 합니다. 그것이 에이전시에서 최대한의 가치를 얻는 방법입니다. 모든 비밀을 훔치려고 합니다 .

알렉스 버켓

Speero의 Ben도 참여합니다.

우리는 수많은 팀을 훈련합니다. 우리는 워크샵을 운영하고 CXL을 운영하고 컨설팅 등을 수행합니다. 우리는 스스로 배운 것을 고객의 조직에 구현합니다. 피드백 시스템 입니다.

벤 라베이

사내 프로그램에서 CRO 및 A/B 테스트 기관을 최대한 활용할 수 있는 방법에 대한 가이드를 작성했습니다.

결론

실험 도구의 출력은 제공한 입력으로 제한됩니다. 그리고 누가 입력합니까? 당신의 사람들. 팀 교육 및 교육에 투자하면 프로그램의 다른 어떤 측면보다 실험 프로그램과 여정에 더 많은 도움이 됩니다.

그들은 암석에서 물을 끌어오는 것 외에 도구로 훌륭한 일을 할 수 있는 더 강력한 위치에 있을 것입니다(올바른 A/B 테스트 도구를 선택하는 것은 여전히 ​​중요합니다).

우수성과 지속적인 개선의 문화로 전환함으로써 성장을 시작할 수 있습니다. 이 기사에서 우리가 당신을 위해 모은 전문가 팁을 따르십시오.