Это может быть ваша домашняя страница или посадочная с высоким показателем посещаемости. В любом случае, это должна быть страница, которая имеет высокое влияние на ключевой показатель. Фокусируясь на одном аспекте в рамках одного теста, вы получите более точные данные. Тогда тестирование действительно будет эффективным и может привести к повышению уровня конверсии и увеличению вашей прибыли.
Вы можете проверить собственные данные с сайта на подобные на колебания. Создайте индивидуальный отчет в системе аналитики, которую используете, назовите его «Конверсии по дням недели». Это удобно делать, например, в системе сквозной аналитики ROMI center. Наверняка обнаружатся аб тестирование закономерности, которые можно использовать в дальнейшем. Например, больше всего конверсий с мобильного трафика — значит, нужно уделить больше внимания адаптивной верстке для таких устройств. Главное — применять одни и те же статистические правила к меньшим наборам данных.
Инструменты для проведения А/B-тестирования
Размер выборки — показывает, сколько людей должны увидеть каждый вариант, чтобы можно было доверять результату теста. Помогает рассчитать время теста и не выключить его слишком рано или слишком поздно. Мощность — процент уверенности в том, что результаты теста верны, если он не показал разницу. Если не знаете, какой процент указать, оставьте значения по умолчанию. Optimizely предлагает три плана, в которые включено A/B тестирование. Самый большой набор инструментов присутствует в
плане Intelligence Cloud.
В остальных случаях можно использовать вариант A/В тестирование. Изучение поведения пользователей на сайте помогает сделать интерфейс более удобным, повысить продажи и улучшить позиции сайта в выдаче. Одним из таких методов изучения является А/В тестирование. Помогает подготовиться к тесту и узнать, сколько нужно людей для достоверных результатов. Подходит для тестирования Open rate, Click rate, конверсии в заказы и других показателей.
Кому и для чего нужны АБ-тесты
Для эффективных сплит-тестов необходима большая выборка аудитории. Часто участники эксперимента из контрольной и тестовой групп находятся в разных городах/регионах, поэтому без онлайн-сервисов не обойтись. При положительном результате (когда конверсия повышается) необходимо масштабировать изменения на всю аудиторию. При негативном правки отменяем и ищем дальше способы повышения метрики, чтобы опять их протестировать.
Внедрив «проверенный» тестом вариант, вы можете потерять тысячи или даже миллионы рублей. Небольшая ошибка здесь обходится очень дорого, поэтому требования к статистической значимости намного выше — и это затрудняет тестирование. A/B-тестирование — это неотъемлемая часть процесса работы над продуктом. Это эксперимент, который позволяет сравнить две версии чего-либо, чтобы проверить гипотезы и определить, какая версия лучше.
Значение P, P-value
Он бесплатный, но не всегда подходит для крупного бизнеса. На обоих скринах средние значения какого-то KPI в аналогичных сегментах одинаковы, картинки отличаются только разбросом значений. На картинке 1 он более широкий — вокруг среднего есть еще несколько значимых результатов. На втором графике значения резко уходят вниз — таких показаний получилось гораздо меньше, чем среднего.
- Преимуществом метода является использование при проектировании объективных данных[1].
- — В самом начале проведения тестирования проверьте, действительно ли оно работает.
- Главное — применять одни и те же статистические правила к меньшим наборам данных.
- Например, две одинаковые посадочные страницы, с разными призывами к действию или заглавными изображениями.
- Если поставите тестирование на паузу — вариант Б не будет показываться посетителям, и иконка станет красного цвета.
- В материале разбираем, что это такое и для чего может использоваться.
В рамках примера с пластиковыми окнами в качестве дополнительных показателей допустимо отслеживать средний чек и чистую прибыль. Цель тестирования должна совпадать с глобальной целью компании. Продолжим рассматривать пример из начала статьи про компанию, занимающуюся производством и продажей пластиковых окон. Основная цель — увеличение объема продаж с лендинга, на который «льется» трафик с контекстной рекламы. — Контрольная версия, А выигрывает или между версиями нет разницы. — Создайте новую версию (B), отражающую изменения, которые вы хотите протестировать.
Проведите эксперимент
Ориентируйтесь на свои цели и бюджет при выборе лучшего варианта. Небольшим бизнесам стоит сосредоточиться на
инструментах, предлагающих максимум функций по минимальной цене. Convertize — платформа для A/B тестирования, для использования которой не нужны технические навыки.
То есть необходимо внести правки, дать потенциальным клиентам «попробовать» измененный лендинг. Тогда удастся получить объективные данные об изменении конверсии (исходная и экспериментальная страницы). Для оценки достоверности теста существуют специальные калькуляторы. Один из них — все тот же DriveBack, но уже другой его раздел — «Определение статистической значимости».
Шаг 3. Определиться с гипотезами
Поддерживает проведение нескольких исследований одновременно. Здесь самые расширенные возможности таргетинга среди популярных сервисов — до 35 параметров. Convert поддерживает интеграцию с GA. Программа может применяться для проведения сплит-тестов, мультивариантных и мультистраничных исследований.
Снизить риски при вводе изменений
После запуска тестирования останавливать его нельзя, даже если кажется, что все уже понятно. Реальные данные, полученные в итоге, могут кардинально отличаться от того, что ты видел в начале. Значит, при сравнении результатов ты будешь анализировать именно число проданных курсов № 3. В конце 90-х годов на сайте появилась возможность заказать товары в один клик.