Бесплатный практический вебинар Исправляем 3 непростительных ошибки продающего сайта

5 шагов к запуску A/B тестирования. Часть 2

А/Б тестирование

Посмотрите сначала первую часть: 5 шагов к запуску A/B тестирования. Часть 1

Я рассказал о двух платформах: Google Analytics и Visual Website Optimizer. А так же о том, что именно выбирать как цель для тестирования. Продолжим…

Шаг 3. Как повлиять на основной параметр?

Нельзя тестировать что-либо в надежде, что это повлияет на показатель X. Должна быть сформулирована логически верная гипотеза.

Гипотеза не обязательно должна быть рациональна. Мы часто бываем иррациональны, потому гипотеза все равно будет логически верна.

Пример гипотезы: “С карточки товара часть посетителей уходит на страницу с информацией о доставке и оплате. Потом они не возвращаются. Скорее всего часть из них не устраивают наши условия, а часть просто теряется. Давайте перенесем самую важную информацию о доставке и оплате на карточку товара. Это уменьшит переходы на страницу доставки, увеличит % выходов и увеличит итоговую конверсию”.

Я делал этот тест год назад. Подробней можно прочитать тут.

В реальной жизни готовясь к тесту у вас будет много гипотез. Особенно если привлекаются дизайнеры, другие маркетологи и вообще “мимо проходящие” сотрудники.
Выбрать правильную гипотезу очень трудно. Я до сих пор считаю, что это субъективное решение одного человека.

Тут главное помнить, что в тесте может быть не одна вариация, а две-три-много. Теоретически можно попробовать протестировать все гипотезы.

Дальше все просто:

  1. дизайнер рисует макеты для вариаций;
  2. программисты готовят сайт;
  3. (!) проверяем отслеживание нужных параметров;
  4. запускаем тест.

Шаг 4. Сколько должен длиться A/B тест?

Правильно держать продолжать тест пока один из вариантов не выиграет тест по основному параметру со статистической достоверностью.

Что это значит? На русском языке, это означает, что с 95% вероятностью результаты верны. Система вам сама об этом скажет.

Для желающих разобраться более детально в алгоритмах и формулах, рекомендую почитать специальные разделы на сайтах Google Analytics и VWO.

В жизни ждать статистической достоверности можно очень и очень долго. Особенно когда варианты примерно равны.

Если в первые несколько дней один вариант выигрывает, то от момента выигрыша, я держу тест еще недельку.

Если варианты примерно равны, то я стараюсь держать тест две-три недели. Рекомендую прочитать мою статью “Что делать если А/Б тест ничего не показал?”, там как раз об этой ситуации.

Шаг 5. Завершение A/B теста

Текущий тест закрыт. Результаты известны и записаны. Выигравший вариант внедрен на сайте. Что дальше?

На самом деле “Что дальше?” надо спрашивать сразу после запуска теста. Как только запущен один тест начинайте готовить следующий.

Когда текущий тест завершается, у вас уже готов следующий и процесс не останавливается.

Удачного тестирования!

p.s. Сохраните статью у себя в социальных сетях! Еще пригодится!

Реальные кейсы роста продаж
и повышения конверсии!

Узнайте как другие увеличивают продажи на 10%, 30%, 50% или даже в 2 раза!

100% без спама!

  • Виталий Мусин

    Сергей, а вы сталкиваетесь с тем что вас читают через getPocket и тому подобное, у вас наверно большой показатель отказов из-за этого!?

    • Виталий, у меня в принципе большой процент отказов. Люди ищут что-то, находят, читают и уходят :)