Настройка A/B теста

Как настроить A/B (сплит) тестирование в квизе и тестировать конверсию отдельных элементов

Зачем нужен A/B-тест?

A/B тест - это способ поиска наилучшего варианта, при котором будет максимальная конверсия. Метод заключается в следующем: мы случайно показываем посетителю разные варианты того или иного элемента, текста, а затем анализируем, какой из них оказался лучше, с каким конверсия выше.

Со стартовой страницей или без? Темный дизайн или светлый? Какой тест лучше написать на странице сбора контактов? На все эти и прочие вопросы поможет ответить A/B тест, а в Marquiz он настраивается очень просто.

Для того, чтобы хорошо понимать методологию, знать, сколько нужно держать активным тест перед выбором варианта, прочитайте нашу полную статью про A/B тесты.

Как настроить A/B тест в Marquiz

Откройте редактор квиза. В правом верхнем углу нажмите на кнопку "Включить A/B тест". Создастся вариант B для квиза. В нём можно отредактировать любой элемент квиза, будь то вопрос, результат, консультант, стартовая страница или что-нибудь ещё. Изменение сохранится и новый вариант будет показываться случайным образом посетителю.

Если нужны дополнительные варианты - можно создать до 4-х. Созданный вариант можно поставить на паузу (он будет храниться, но не будет показываться), удалить и выбрать (он будет принят как основной, а все остальные варианты будут удалены). Также варианты можно переименовать: именования будут использоваться в аналитических системах.

Важно понять логику работы: вариант А - это базовая версия квиза. В других вариантах хранятся внесённые изменения относительно варианта А. То есть например, если поменять заголовок стартовой страницы в А, он поменяется во всех вариантах, за исключением тех, где изначально был создан другой заголовок.

Как использовать A/B тесты с аналитикой

Если не проводить аналитику, не замерять, какая конверсия с каким вариантом, то особого смысла в A/B тестах нет. На текущий момент делать аналитику можно с помощью нескольких систем:

Яндекс.Метрика

В метрику будет отправляться новый параметр посетителя: marquiz_ab.

Например, для вывода статистики только по варианту B нужно в фильтрах отчёта указать: Люди, у которых / Характеристики / Параметры посетителей: Имя параметра: marquiz_ab, Значение: B (строка).

Google Analytics

Для построения отчетов в GA используя значения вариантов A/B тестов нужно создать новый Специальный параметр. Находится он в Администратор / Ресурс / Пользовательские определения / Специальные параметры.

Настроить Специальный параметр нужно до начала A/B теста.

Создайте параметр с названием marquiz_ab, областью действия Сеанс.

Технически параметр будет называться dimension1. Если вы не впервые пользуетесь специальными параметрами в GA, параметр будет иметь другое имя, например dimension3. В этом случае вам нужно выбрать это значение в настройках GA в квизе и сохранить его.

Для построения отчётов создайте новый сегмент:

В новом сегменте выберите необходимый вариант, например B.

Теперь вы можете смотреть любые отчёты, сравнивать цифры, например Конверсии по каждому из вариантов:

Встроенная аналитика

Интеграция со встроенной аналитикой ещё пока в разработке.

👆 На этом пока всё