Немного о сплит-тестировании
Для начала расскажем что это. A/b тестом (или сплит тестом) называют сравнение пары вариантов и дальнейший выбор одного из них. Как правило, такой вид тестирование применяют для e-mail рассылок.
- Когда сплит-тестирование действительно необходимо и даст результат?
Перед тем, как заняться этим видом тестирования, советуем задать себе несколько простых вопросов. Во-первых, спросите у себя, что получиться в случае, если на целевой странице будет размещена именно эта картинка.
Поможет ли это вам в увеличении конверсии? На какую кнопку пользователи произведут больше кликов? Что произойдет в результате подчеркивания коммерческого предложения в заголовке?
Таким образом, вы в любом из случаев должны четко осознавать, что именно будете тестировать. Ведь абсолютное большинство случаев сплит-тестирований терпят крах именно по этой причине. - Которое число страниц можно одновременно подвергнуть A/B/n-тестированию?
Давайте мысленно смоделируем ситуацию. Вы имеете четыре замечательных идеи дизайна для главной страницы сайта. Тогда вам в голову может прийти идея одновременно протестировать все эти идеи. Но нужно ли поступать именно так? Принесет ли это ответ на вопрос какая идея лучше?
На самом деле вариант запустить одновременно четыре страницы не будет настоящим сплит-тестирование и, соответственно, не принесет должных результатов. Ведь вы не сможете определить того, какие именно факторы оказали влияние на рост конверсии.
Для того чтобы все получилось, оптимальнее всего будет запуск сначала первых двух страниц, затем двух последующих и в итоге голосование за лидеров первого и второго туров. - Что подразумевается под «нулевой гипотезой»?
Именно вышеупомянутая гипотеза способна пролить свет на самую распространенную ошибку сплит-тестирования. Речь идет о досрочной интерпретации данных. Здесь на помощь приходят знания по теории вероятности. Вы подбросили монетку и имеете равные шансы по ее приземлению увидеть орла или решку. Но если вы до момента падения начинаете производить выводы, то получаете неверные данные. - Какой объем трафика покажет наиболее корректные данные?
Не стоит ломать голову над этим вопросом. Большая часть платформ, на которых возможна организация и проведение сплит-тестов уже имеет свои уникальные механизмы определения победителя. Зашкаливает ли ваш трафик за сотни тысяч или весьма скромен, не имеет значения. - Что выбрать: мультивариантное или сплит-тестирование?
Два вышеупомянутых вида тестирований имеют под собой разные цели и задачи. Во-первых, для того, чтобы организовать и провести мультивариантное тестирование, вам понадобиться довольно объемный трафик и хороший временной запас. Такой вид тестирования подразумевает проверку одновременного изменения нескольких элементов на целевой странице или на сайте. При этом измененные элементы подвергаются самым разнообразным комбинациям.
Сплит-тестирование же, напротив, позволит сэкономить ваше время. Оно направлено для получения результатов от проверки одного точечного изменения, произошедшего на целевой странице или на сайте.
Читайте так же: