Куда следует инвестировать большую часть бюджета на тестирование?

Итак, вы только что получили бюджет на программу A/B-тестирования и не знаете, во что инвестировать в первую очередь.

Это инструмент? Агентство? Или, может быть, целая команда тестировщиков?

Мы рекомендуем вам в первую очередь инвестировать в свою команду, чтобы получать долгосрочные выгоды. Потому что без талантливых водителей за рулем ни один инструмент не даст прибыльных результатов. А агентства просто будут стоить дороже.

Однако, если вы хотите изучить весь спектр вариантов, вам придется взвесить свою стратегию и цели и посмотреть, какой из них лучше всего им соответствует.

Давайте исследуем…

Стоит ли нанимать агентство или управлять CRO собственными силами?

Честно говоря, это зависит.

Агентства хороши тем, что у них есть опыт и на них можно переложить почти весь процесс тестирования.

Если у вас около 10 000+ посетителей в месяц и вы просто хотите как можно скорее начать видеть рост ваших текущих кампаний, то лучшим выбором будет сотрудничество с агентствами, если у вас есть на них бюджет.

Сколько инвестировать в команду A/B-тестирования?

Вы, вероятно, могли бы найти людей на Fiverr, которые утверждают, что обладают знаниями CRO, но я бы держался подальше.

Средние затраты составляют от 2 тысяч долларов в месяц для фрилансера до 8 тысяч в месяц для небольшого агентства или до 25 тысяч в месяц для агентства высшего уровня с выделенной командой.

На самом деле у нас есть целый список рекомендуемых агентств здесь.

Конечно, агентства недешевы, но помните: CRO — это востребованная, высококвалифицированная роль с почти гарантированным возвратом инвестиций с течением времени.

На самом деле наши данные показывают, что агентства, как правило, получают в среднем больше успешных тестов при одинаковом объеме кампаний по сравнению с внутренними командами. Это потому, что они следуют принципу «сначала самые большие победы» и имеют больше опыта в том, где они могут оказать наибольшее влияние на вас.

Этот опыт складывается и помогает вам быстро получить результаты.

Сравните это с начинающими тестировщиками, которые могут испытывать трудности, потому что они сосредоточены на небольших действиях и улучшениях.

Это не значит, что агентства всегда лучший выбор. Внутренние результаты действительно могут продвинуться вперед, как только команда «созреет». Тогда вы с большей вероятностью увидите более высокий ROI от внутреннего тестирования просто потому, что вы действуете на большем количестве данных и становитесь компанией, управляемой данными, которая знает свою аудиторию и продукт.

Достаточно взглянуть на такие компании, как Booking.com, которые уделяют внимание CRO в масштабах всего бизнеса, чтобы увидеть, насколько это может повлиять на ваш рост.

Harvard Business Review написал тематическое исследование о том, как Booking.com стал крупнейшей в мире платформой для размещения путешественников, и все это благодаря тестированию.

Что делать, если у вас нет 2-25 тысяч, чтобы нанять агентство? Что, если вы хотите не только подняться сегодня, но и стать «управляемой данными», компанией, которая принимает все свои действия на основе информации от своей аудитории?

Затем вы захотите запустить CRO внутри компании.

Внутреннее тестирование — отличное место для начала, если:

• Вы хотите получить больше результатов от текущих тестов за меньшие деньги, чем агентство.
• Являются малым и средним бизнесом, который может не соответствовать критериям агентства. (трафик/бюджет и т. д.)
• Если вам нужна возможность масштабирования и роста с течением времени, а также создание культуры тестирования в масштабах всей компании.

Это может немного сбить с толку, если вы только начинаете, поэтому в этом руководстве я расскажу вам, на что вы должны потратить свой бюджет на A/B-тестирование.

Что, если бы вы захотели запустить собственную CRO? Куда вы должны инвестировать свой бюджет на A/B-тестирование?

Имейте в виду, что все это субъективно, но это точный процесс, которому я бы следовал, если бы у меня был бюджет на A/B-тестирование и я хотел бы запустить CRO для компании, а затем использовать ROI и полученную информацию для дальнейших инвестиций.

Я составил этот список по нескольким критериям:

• Какова основная потребность или приоритет для проведения тестов?
• Что вам нужно, прежде чем вы сможете сделать следующий шаг?
• В какие привычки, инструменты и программы вы должны инвестировать, чтобы ваша команда тестировщиков стала более зрелой, основываясь на самых «зрелых» компаниях? (Те, кто лидирует в игре и зарабатывает 500 миллионов долларов в год, в основном благодаря тому, что они ориентированы на данные).

Если вы не знаете, что означает зрелость с точки зрения CRO, мы говорим о том, насколько сложна или вложена ваша компания в CRO. От того, кто начинает и проводит базовые тесты, до компании, которая делает каждый выбор на основе своих результатов.

Я расскажу вам о каждой части, почему это важно и когда в них стоит инвестировать.

Итак, давайте все разберем…

1. Сначала получите инструменты A/B-тестирования

Самое важное, во что вы когда-либо могли инвестировать, — это ваши люди. Однако вы не можете запустить тест без инструментов, верно?

В идеале вы рассматриваете 3 типа инструментов:

• Аналитика на вашем сайте для отслеживания ваших текущих данных. Это может быть Google Analytics или любой другой. (Примечание: вы также должны отслеживать свои текущие коэффициенты конверсии и иметь возможность видеть, откуда пришли продажи, прежде чем начинать тестирование.)
• Инструмент количественного тестирования, который может измерять точные действия людей, например, наше приложение Convert. Это даст вам цифры о том, кто предпринял какие действия, и как это улучшилось или уменьшилось, или просто не произошло никаких изменений. Без этого вы ничего не сможете проверить. С ним вы можете начать делать разумный выбор.
• Качественный инструмент, чтобы вы могли попытаться понять эти данные, такие как Hotjar или другие. Это позволит вам опросить вашу аудиторию, увидеть, куда они двигают мышью, посмотреть, есть ли у них проблемы с нажатием кнопок и т. д. Наилучший сценарий — получить инструмент контроля качества, который интегрирует свою информацию напрямую с вашим количественным инструментом.

CRO — это измерение результатов, выявление проблем, а затем попытка исправить и улучшить их. Вы не можете этого сделать, если не можете отслеживать и измерять данные.

Теперь вам все еще нужно платить за инструменты, и они бывают разной стоимости и с набором дополнительных функций. Мы расскажем, как купить инструмент A/B-тестирования здесь, а стоимость инструментов A/B-тестирования — здесь.

(Мы даже покажем вам, как проанализировать, не переплачиваете ли вы за свой текущий инструмент, и как переключиться на нового поставщика в середине контракта.)

Итак, сначала инструменты, но помните, любой инструмент хорош настолько, насколько хорош человек, который его использует…

2. Наймите и инвестируйте в выделенного тестировщика

Большинство тестов, которые вы запускаете, потерпят неудачу.

Это неплохо, потому что вы доказываете, что работает, а что нет, и получаете дополнительные выигрыши, избегая потерь.

Наличие преданного сотрудника, который проводит ваши тесты , дает вам возможность запускать больше, узнавать больше и расти быстрее. Черт возьми, вы даже можете использовать эти знания, чтобы помочь улучшить продукты и опыт.

Дело в том, что многие компании, которые только начинают заниматься тестированием, пытаются добавить его к текущей роли сотрудника. Не отрывайте своего маркетолога от проектов и не превращайте его в 1% тестировщика.

Вот почему большинство людей думают, что CRO им не подходит. Они провели несколько тестов и сосредоточились на неправильных вещах или даже неправильно прочитали данные.

Не экономьте здесь. Если вы можете получить тестер у себя, это будет одним из лучших долгосрочных вложений, которые вы можете сделать, и вы не сможете продвинуться дальше без них.

3. А потом тренировать их!

#teamovertools

Если у вас есть тестер, найдите время, чтобы обучить его! Тесты, которые вы можете запустить, и информация, которую вы можете получить, зависят от опыта тестировщика.

Без него они могут:

• Неправильно расставь вещи,
• Борьба за поиск тестовых идей,
• Выдвинуть непроверимую гипотезу,
• Не запускать тест достаточно долго,
• Неправильно прочитайте данные и упустите выигрыш,
• Прочтите неправильно и реализуйте неудачников,
• Проверьте не то, что нужно, или еще хуже,
• Не тестировать то, чем они должны быть…

Не все работает так, как нам кажется. Лучшие практики дизайна веб-сайтов могут работать, но не всегда…

Начинающий тестировщик, возможно, не проверял это или даже не думал, что проверял. Они могут просто запускать кампании на определенных страницах и не проверять эти данные. Вот почему так важно обучить их ВСЕМ тонкостям тестирования.

Так где же их тренировать?

CXL Institute предлагает фантастическую программу, ориентированную исключительно на CRO и A/B-тестирование.

Примечание: когда вы становитесь клиентом Convert, мы предоставляем вам доступ к обучению CXL.

Он невероятно подробный и сделан одними из самых умных тестировщиков. Я очень рекомендую это.

Это не только даст вашему тестеру понимание всех элементов тестирования, но и поможет ему расставить приоритеты в тех важных областях, над которыми нужно работать в первую очередь, и о типах тестов, которые будут иметь значение.

Как только ваш тестер поймет все это, это поможет ему разработать надежную стратегию A/B-тестирования.

4. Создайте обучающий депозитарий и культуру тестирования

Это важно, если вы хотите масштабироваться, стать организованным, заручиться поддержкой менеджеров, быстро исправлять ошибки и создать культуру тестирования в своей компании.

Мы говорили об этом в другом посте, но позвольте мне кратко повторить здесь. Учебный репозиторий — это база данных всех ваших прошлых тестов.

Это показывает:

• Каждый тест, который вы когда-либо проводили,
• Страница, которую вы тестировали,
• Какова была ваша гипотеза,
• Тест и что вы изменили (включая контроль и вариант)
• Результирующее изменение подъемной силы, падения или, если оно остается прежним,
• Изменение средней стоимости заказа. (Либо положительный результат, либо отрицательный, показывая деньги, сэкономленные за счет того, что они не были запущены в жизнь.)
• Ваши мысли об этих результатах. (Привело ли это к новым открытиям и т. д.)

Что-то сломалось на вашем сайте?

Наличие репозитория с прошлыми проблемами поможет вашей команде находить и устранять проблемы намного быстрее.

Хотите обучать новых людей?

Наличие всех знаний в одном месте позволяет тестировщику учиться на прошлых тестах.

Получите лучший бай-ин!

Представление такой информации позволяет легко передать ваши тесты вашему боссу и доказать ценность CRO.

Создайте культуру тестирования

Говоря о заинтересованности, вы даже можете использовать эти тесты для создания корпоративной культуры тестирования. Поделитесь параллельными снимками и гипотезой со своей командой и посмотрите, смогут ли они угадать, какая из них показала лучшие результаты. Поделитесь потом результатами.

Это приводит людей в восторг от CRO. Особенно, если большинство людей считают, что тест провален, только для того, чтобы они увидели, что он победил. Это помогает им увидеть, что не все зависит от мнений.

Вы также можете помочь им стать лучше в тех областях, о которых они, возможно, и не подозревали! (Представьте, что вы узнали, что определенные слова и выражения лучше связаны с вашей аудиторией, а затем ваша служба поддержки клиентов, копирайтеры и рекламные команды узнали об этом и о том, какое влияние это может оказать.)

Но энтузиазма недостаточно, чтобы полностью избавиться от предубеждений и создать долгосрочную культуру тестирования в вашей компании.

Это не так эффективно, как когда вы привлекаете руководителей высшего звена — лиц, принимающих окончательные решения, — к внедрению культуры экспериментирования.

Видите ли, де-буферное тестирование работает не так хорошо, потому что требует совсем другого набора навыков. Но если вы тесно сотрудничаете с руководством, чтобы найти веские причины для тестирования, постепенно они перейдут к постоянному тестированию и методам принятия решений на основе данных.

Как вы можете представить эти тесты и расположить к себе руководство?

Есть фантастический сайт GuessTheTest, который вы можете смоделировать.

Он разработан, чтобы помочь тестировщикам получить идеи, а также помочь им улучшить свои навыки гипотез. Сайт работает, показывая несколько тестов A/B, и читатель может угадать, какой вариант победит.

Они регулярно показывают различные тесты A/B, на которые вы можете нажать, а затем увидеть результаты того, сколько людей угадали это правильно или неправильно, а также данные, лежащие в основе теста, что было проведено и как оно конвертировалось с победителем.

Это очень полезно для тестировщиков, так как помогает нам оспаривать собственное мнение.

Это то же самое, что вы можете сделать, чтобы создать культуру тестирования в своей компании, и вам это ничего не стоит. Вам не нужно создавать веб-сайт, как это делает GuessTheTest. Вместо этого вы можете просто поделиться тем, что вы уже делаете, с изображениями и информацией, которую вы помещаете в свой репозиторий.

Отправьте электронное письмо компании с контролем и вариантом и попросите людей проголосовать за то, что, по их мнению, победило. Затем отправьте электронное письмо с результатами теста, гипотезой и любыми выводами.

Убедитесь, что вы привлекли к этому упражнению свою управленческую команду. Или, по крайней мере, расскажите им историю, от начала до конца. Пусть они увидят, насколько ошибочными могут быть мнения. Вы будете поражены тем, как это начинает помогать создавать культуру тестирования и насколько это помогает командам в совершенно разных областях.

Итак, как создать репозиторий?

Это может быть просто папка на вашем компьютере, или вы можете посмотреть на таких платформах, как «Эксперименты» от GrowthHackers. Это учебное хранилище и инструмент управления проектами в одном.

5. Оптимизируйте свои процессы

Одна из самых ценных вещей, которую вы можете сделать, чтобы:

• Улучшайте свои тесты,
• Увеличивайте их частоту и количество,
• Удалить ошибки,
• И снизить стоимость теста…

… заключается в настройке систем и процессов для оптимизации всей вашей системы тестирования.

От гипотезы и организации того, что вы хотите протестировать, до настройки предварительного тестирования, того, как запустить его в жизнь, что делать во время тестирования и что делать после.

Если вы создадите системы и СОПы (стандартные операционные процедуры) для каждого повторяемого элемента, то вся ваша программа тестирования не только улучшится, но и повысит ваши шансы на успех.

Почему?

Каждый тест будет проходить более плавно, с меньшей вероятностью человеческой ошибки, а также быстрее. Это беспроигрышная ситуация.

Проблема, конечно, в том, что почти ни одна компания не делает этого. На самом деле, он снова и снова появляется в отчете CXL о состоянии отрасли.

Но агентства, которые управляют ими весь день?

Или внутренние команды, которые масштабируют свою культуру тестирования?

Это те, кто ВСЕГДА сосредотачивается на построении систем как можно скорее…

Их также достаточно легко сделать.

Наметьте, что вы делаете для каждого теста, а затем создайте документы для каждого нового. Вы можете просто поставить галочки, чтобы убедиться, что все сделано.

Например, вот простой процесс экспериментального тестирования (основанный на платформе тестирования Phase-Gate Бена Лабея), с которого вы можете начать…

Этап 1. Сбор предварительных сведений (чтобы обнаружить проблемы или возможности)

Начните с понимания ваших клиентов и вашего положения на рынке. Чтобы собрать эту информацию, исследуйте своих клиентов и рынок, проводя опросы и опросы, интервью с заинтересованными сторонами, пользовательские тесты и т. д.

Основные вопросы, на которые вы хотите получить ответы:

• Удовлетворяем ли мы потребности наших клиентов/пользователей?
• Как нас воспринимает целевая аудитория?
• Какова позиция нашего бренда на рынке?
• Какие данные мы уже собрали об этих проблемах/возможностях?
• Что нам нужно изменить в нашем продукте, маркетинге или услуге?

Это приведет вас к краткой постановке проблемы. Вы будете четко понимать, какие показатели измерять и как их достичь. Кроме того, вы сможете оценить, стоит ли решать проблему или возможность, о которой идет речь, или ее можно отложить на более позднее время.

Выводы, которые вы извлечете из этой первоначальной оценки, помогут вам подготовить резюме исследования на основе предложенной вами гипотезы.

Используйте это, чтобы заручиться поддержкой заинтересованных лиц, поскольку они должны быть согласны с соответствием теста бизнес-целям.

Это подводит нас к следующему этапу…

Этап 2: Подготовьте план испытаний и докажите его осуществимость

На этом этапе вы обосновываете возможность проведения теста, чтобы заручиться поддержкой руководства.

Они захотят увидеть, насколько ценность потенциального результата оправдывает ресурсы, необходимые для его реализации.

Вот вопросы, на которые вы хотите ответить на этом этапе:

• Какие ресурсы необходимы для запуска теста?
• Какие ключевые изменения необходимо будет внести?
• Влияет ли это на другие проекты/тесты?
• Что такое KPI и как они указывают на успех?
• Каковы возможные результаты?

Обобщите ответы на эти вопросы в документе, описывающем базовый объем тестов. Убедитесь, что это легко понять, например, в виде электронной таблицы, чтобы вы могли использовать ее для получения одобрения руководства.

Получив одобрение, можно переходить к планированию…

Этап 3: Подготовьте более подробный план проекта

Здесь вы вовлекаете всех, кто участвует в проекте. Руководители должны согласиться с балансом между затратами и ожидаемыми результатами. И кросс-функциональные заинтересованные стороны должны быть готовы к участию.

Для этого подготовьте более подробный план проекта, который ответит на следующие вопросы:

• Какие данные/информация нам нужны для завершения теста?
• Где и как мы проводим тест?
• Какие показатели указывают на успех и как мы их измеряем?
• Подготовили ли мы дерево решений с изложением возможных результатов?

Свяжите все это вместе в плане, чтобы добиться полного согласия всех участников проекта. Это также будет ценным дополнением к вашему хранилищу знаний.

Вы можете запустить тест, когда все заинтересованные стороны согласны со всем планом.

Этап 4: Запустите и запустите тест

Вы запустите свой тест на этом этапе, выполняя проверки, чтобы убедиться, что все в порядке. Выполняйте однократные или многократные проверки качества и контроля качества, а также еженедельные проверки производительности.

Ясность, которую вы хотите получить на этом этапе, должна отвечать:

• Тест построен и работает в соответствии с планом на предыдущих этапах?
• Собираем ли мы данные и отчитываемся ли так, как планировали?
• Соблюдаем ли мы график тестового проекта?
• Решили ли мы влияние этого теста на другие проекты/тесты?
• Все ли участники все еще согласны с прогрессом?

Если что-то выделяется как проблема или необходимо внести какие-либо необходимые изменения, задокументируйте их в журнале инцидентов.

Отчитайтесь перед исполнительными заинтересованными сторонами и дайте им знать, как проходит тест. Все идет по плану? А вы точно собираете данные и готовите отчеты?

Это станет началом следующего этапа…

Этап 5: Подготовьте отчет об испытаниях

На этом заключительном этапе вам потребуется подготовить полную документацию по тесту с подробным описанием анализа, результатов, выводов и решений, принятых в результате теста. Это будет частью вашего архива тестов и учебного хранилища.

Что вы хотите включить в этот тестовый отчет:

• Достиг ли тест поставленных целей
• Какие немедленные исправления были сделаны благодаря полученным вами сведениям
• Если вы узнали что-то новое, выходящее за рамки теста, и
• Ключевые решения, которые были вдохновлены результатами тестирования

Помимо подробной документации по тесту, будет полезно создать оценочную карту теста, которая дает краткую информацию.

Теперь все, что вам нужно сделать, это повторить 5 фаз для следующего теста.

6. Улучшите качество ваших данных

Как только вы начнете получать гораздо больше трафика и результатов, может быть хорошей идеей переключить вашу аналитическую платформу на более подробные отчеты.

Вы можете перейти на Google Analytics 360, когда у вас будет 10 миллионов посетителей в месяц (я знаю, верно?… вау)

Или вы можете начать использовать многоканальные инструменты, работающие в режиме реального времени, такие как Adobe Analytics и Heap. (Оба из них напрямую интегрируются с приложением Convert.)

Эти инструменты могут предоставить вам более точные данные, помочь вам понять поведение пользователей, а также протестировать и отследить то, что стандартный GA просто не может.

Мало того, они также подключаются к вашей CRM и другим инструментам.

7. Добавьте дополнительную поддержку команде тестирования

До сих пор вы, вероятно, использовали WYSIWYG-редактор, который является частью вашего инструмента тестирования.

Однако, если вы хотите начать выполнять более сложные тесты с более быстрым и чистым кодом, стоит нанять разработчика Javascript.

Таким образом, вы можете попросить разработчика выполнить тест, используя предпочитаемые им инструменты и рабочие процессы, а затем загрузить код непосредственно в ваш инструмент тестирования без дополнительного раздувания кода.

А бонус?

Поскольку тест по-прежнему реализуется с помощью инструмента, это позволит вам использовать все функции сегментации и измерения, и его можно даже автоматически отключить, как только будет найден победитель.

(Один камень преткновения, который мы видим у людей, использующих разработчиков, заключается в том, что они обходят инструменты или создают собственную платформу тестирования. Это может сработать, но если вам нужен разработчик для разработки теста, отключения его после завершения и реализации победителя, он может стать проблема.)

Изучите знания, которые вы можете извлечь из своих A/B-тестов.

Попробуйте Convert Experiences. НАЧНИТЕ 15-ДНЕВНУЮ БЕСПЛАТНУЮ ПРОБНУЮ ПРОБНУЮ ВЕРСИЮ

8. Начните встраивать тестирование в другие команды

Теперь, когда вы проводите больше тестов, отслеживаете данные и опыт, самое время попробовать внедрить тестирование в разных командах.

Уже не просто продажи, а продукт или трафик и т. д. Любая команда, в которой можно сделать улучшения.

Помните: речь идет не всегда о крупных выигрышах, а о совокупности мелких. Повышение на 1% в сотнях областей может привести к огромным изменениям в том, как работает ваша компания.

Вы можете либо начать обучать кого-то из каждой команды, либо привлечь людей и обучить их управлению тестированием в этих областях. Обычно лучше начинать медленно и использовать основную группу тестирования в качестве образца для подражания, чтобы вдохновить и оказать поддержку новой команде.

Только не пытайтесь создать все команды сразу:

Ключ в том, чтобы помочь создать еще одну команду и сделать ее успешной, а затем перейти к следующей. Вы хотите, чтобы каждая команда могла работать и быть эффективной самостоятельно, если вы хотите создать культуру тестирования!

9. Добавьте инструменты измерения клиентского опыта

Компания Speero (агентство CXL) недавно написала отчет о зрелости CRO, основанный на отзывах 210 различных компаний, работающих с CRO в 2020–2021 годах.

Их цель состояла в том, чтобы получить более подробное представление о различных экспериментальных программах и о том, как зрелость программы влияет на результаты.

Несколько вещей действительно выделялись для меня:

• Самые успешные компании управляются данными. Они делают все выборы на основе тестовых данных, а не мнений.
• Они делятся своими результатами со всей компанией , чтобы помочь создать культуру тестирования.
• И это лишь некоторые из компаний, внедряющих измерение потребительского опыта.

Есть причина, по которой не все измеряют качество обслуживания клиентов. Это не то, о чем вы подумали бы, когда говорили о CRO, поскольку мы не улучшаем коэффициент конверсии. Однако мы отслеживаем, измеряем и улучшаем все связанные аспекты, которые способствуют увеличению продаж, повторных продаж и сохранению клиентов, используя ту же методологию, которую мы могли бы использовать для тестирования QA и Quant, только более подробно. (Все, что может иметь прямое влияние на коэффициент конверсии).

Измерение потребительского опыта часто требует более точного отслеживания, но когда вы это делаете, вы можете начать приравнивать денежную стоимость к улучшениям в клиентском опыте.

Не только это, но вы также можете отслеживать удержание с течением времени. (Гораздо выгоднее сделать больше продаж текущему клиенту, чем привлечь нового.)

Итак, что вы можете использовать для этого?

Процесс на самом деле довольно большой, что является еще одной причиной, по которой его не всегда принимают.

В идеале вы создаете системы взаимодействия и обратной связи на протяжении всего пути клиента, даже после того, как он покинет ваш сайт и получит свой продукт. Для этого требуется человеческий фактор и несколько дополнительных инструментов для опроса и т. д.

Некоторые агентства специализируются на CX, поэтому вы можете начать с их использования (или придерживаться их).

Или вы можете начать использовать такие инструменты, как Qualtrics и другие, и создать свою программу внутри компании.

CX — это новая тема, требующая изучения, но преимущества могут быть существенными, особенно если вы вернете это в свое тестирование CRO.

10. Избегайте ловушки связывания экспериментов с доходом

Заманчиво сказать: «Поскольку мы провели этот тест и использовали полученные данные для принятия решения, мы заработаем Х денег». Этот вывод игнорирует реальность.

Мир не так прост, как нам хотелось бы. На исход вещей влияет так много факторов, что нереально думать, что определенный результат, когда он развернут, будет постоянно повторяться.

Тогда почему некоторые инструменты A/B-тестирования, агентства и практики CRO до сих пор привязывают A/B-тестирование к прогнозам доходов?

Ответ прост: это интересно и часто привлекает внимание.

Но это простой способ разочаровать людей и заставить их потерять веру в A/B-тестирование. И именно поэтому людей ошибочно привлекает вливание денег в инструменты, сообщающие о доходах.

Вот почему тратить 100 000 долларов в год на такие инструменты — огромная ошибка:

В реальном мире много неопределенности.

Есть много причин, по которым результат теста не будет повторяться в точности, и вы не должны их игнорировать. Меняются рынки, меняется поведение клиентов, меняется конкуренция, меняются бюджеты и цены. Будущее не обязательно будет таким же, как в то время, когда вы проводили тест.

Когда вы экстраполируете свой результат, чтобы спрогнозировать прирост доходов на следующий год или около того, вы чрезмерно упрощаете расчет рентабельности инвестиций и скорее делаете неверные прогнозы, чем нет.

Настоящей целью тестирования должно быть принятие решений для продвижения вперед.

Тестирование больше связано с целями и идеями, чем с доходом. Информирование о лучших решениях должно быть в центре внимания A/B-тестов. Это позиционирует лиц, принимающих решения, на более уверенном пути к росту и прибыли, чем привлекательные цифры доходов, на которые можно равняться и рисковать быть разочарованными.

Но часто бывает трудно заинтересовать людей, если в конце радуги ваших экспериментов нет цели получения ощутимого дохода.

Что делать вместо этого?

Переместите разговор об экспериментах с прогнозируемого дохода на стоимость отказа от экспериментов. Каковы будут потери, если не будет предпринято никаких действий?

Кроме того, сформулируйте успех тестирования проектов как уровень уверенности, которую вы получаете при принятии определенных решений относительно конкретной цели. Это не только сместит акцент с ожидаемого прироста доходов, но и поможет заинтересованным сторонам настроиться на правильную направленность программы оптимизации.

Если вам все еще не хватает цифр, укажите диапазон. Поскольку эксперименты показывают только процентную вероятность получения результата, это разумный способ успокоить тех, кто просит цифры. Например, если результаты показали рост на 4,55%, скажите заинтересованным сторонам, чтобы они ожидали роста от 3,2 до 5,9%.

Вывод

Итак, у вас есть это. Точный способ, которым я буду тратить и инвестировать свой бюджет на A/B-тестирование, когда только начинаю, и как я буду масштабировать и инвестировать его с течением времени.

Вы можете использовать это руководство, чтобы понять, где вы находитесь на пути к зрелости тестирования, и выполнить все недостающие шаги, чтобы помочь вам расти дальше, или просто использовать его в качестве руководства, чтобы начать сегодня.

Как повысить рентабельность инвестиций в A/B-тестирование?

Закажите демонстрацию с Convert to Find Out.

Запросить демо