Цена или выгода? A/B-тестирование посадочной страницы с помощью Метрики

Решающий фактор при покупке авто — цена. В зависимости от комплектации она варьируется довольно сильно. Часто клиент в итоге выбирает автомобиль дороже, чем изначально рассчитывал — в процессе захотел более богатую комплектацию или выявил для себя новые требования к автомобилю, о которых раньше не задумывался.

Описать все факторы ценообразования на посадочной странице нельзя, тем более, что каждый покупатель при общении с менеджером получает индивидуальное предложение. Главная цель посадочной страницы — получить этот контакт с потенциальным клиентом.

Как делать это эффективнее?

Сколько трафика должно пройти через А/B тест, чтобы результаты были статистически значимыми? Для определения размера выборки можно воспользоваться сервисом калькулятора для A/B теста: указать процент конверсии до теста («Базовая конверсия сайта») и процент, на который нужно увеличить конверсию («Минимальный видимый эффект»).

Если исходная конверсия 2% и нужно увеличить до 3% (2+2*0.5), то для проведения теста нужно направить на каждую из тестируемых страниц минимум по 3292 посетителя.

На сайт добавили кастомный скрипт. Шанс нового посетителя увидеть один из вариантов составил 50%. Как только посетителю покажется один из вариантов — до конца эксперимента только его он и будет видеть при повторных заходах. Варианты закрепляются в cookies браузера, пользователь будет считаться новым, только если очистит кэш. Фактическое количество посетителей, которые увидели вариант, скорее всего, не будет точно соответствовать 50%, но с течением времени количество посетителей в каждом варианте будет приближаться к 50%.

От начала и до конца эксперимента изменений распределения трафика не производилось.