Мультивариантное тестирование или сплит-тест что выбрать?

А после определения общей картины вы можете протестировать взаимодействие элементов через мультивариантный эксперимент. MVT — прекрасный инструмент для последующей оптимизации победившего в сплит-тесте варианта. В то время как А/В не дает существенной информации о взаимодействии переменных на одной странице, MVT делает это. Так вы можете способствовать редизайну, увидев, в каких местах страницы различные элементы оказывают наибольшее влияние.

Что такое мультивариантное тестирование

Мультивариантные же, по сути, можно рассматривать, как несколько А/В тестов, запущенных параллельно на одной странице для того, чтобы за короткое время проверить сразу несколько версий в разных комбинациях. Запустите мультивариантное тестирование для «шлифовки» макетов. Убедитесь, что все элементы взаимодействуют между собой наилучшим образом. «Это совокупность эвристических методов, а не теоретически обоснованный подход.

Обзор мутационного тестирования[править править код]

Любой тест способен дать вам полезную данные для понимания ваших визитёров. Но при с мультивариантным тестированием данный вопрос остается открытым. «Мультивариантное тестирование — это выговор на небольших элементах, слабо воздействующих на остальные либо не воздействующих вовсе. Вместо этого маркетологи должны сосредоточиться на ведении программных и динамичных сплит-тестов, разрешающих взять сегментированный опыт нескольких целевых групп по всему сайту. Этого нельзя достигнуть через классические MVT-тесты».

Но вы стремитесь открыть реальный магазин и хотите, чтобы ваша конверсия увеличилась. Поэтому вы организуете A/B/C тест (в таком случае тестируется три варианта страницы) для вашего лендинга. В первом варианте у вас картинка с изображением куска мыла на синем фоне, в другом — коза на зеленом фоне, в третьем — вы и ваша семья на белом фоне. Трудно сказать — мнения профессиональных и широко известных маркетологов разделились.

Как пилотное тестирование может улучшить исследование пользователей

С помощью машинного обучения сайты, которые пока не генерируют много трафика, смогут также проводить многовариантное тестирование. Второй вариант потребует больше ресурсов и ограничит творческие идеи, но и в этом случае вам стоит помнить о том, что нужно больше трафика, чтобы проверить даже оставшиеся. Как вы уже убедились, даже три переменных с двумя вариантами привели к восьми вариациям, и добавив символы безопасности, мы получим до шестнадцати комбинаций. То есть трафик для каждого варианта будет снижен до 6.25%.

Что такое мультивариантное тестирование

Кроме того, в результате на сам тест уйдет меньше времени, т.к. Статистическая значимость будет достигнута быстрее. А если тесты выполняются быстрее, то можно позволить себе проводить их более часто. Они смогут побудить вас на тестирование многих элементов легко вследствие того что вы имеете возможность это сделать. Но сам факт придумывания нескольких запуска и гипотез теста на их базе еще не гарантирует вам никакого результата.

Мультивариантное тестирование или сплит-тест — что выбрать?

Между этими приверженцами различных подходов существуют кое-какие споры. Элементы, которые по отдельности показывают наивысшие результаты, вовсе не обязательно будут самыми эффективными по суммарному воздействию. Между этими приверженцами разных подходов существуют некоторые споры. Щелкните по ссылке, приведенной в этом письме, и подтвердите ваш адрес электронной почты. Далее необходимо выбрать, какой процент от этой аудитории примет участие в эксперименте. Значит, 3000 человек получит первый вариант письма, а 3000 — второй вариант.

К недостаткам MVT-тестирования можно отнести сложную настройку, которая занимает много времени. Еще одна проблема – для получения достоверных результатов этого теста требуется большой объем трафика. Причем чем больше проверяемых комбинаций, тем шире должна быть аудитория, которой нужно их увидеть. Многовариантное тестирование (или MVT) — это оценка эффективности взаимодействия N-ного количества элементов в рамках одного теста, целью которого является выявление наилучшей комбинации. UX является сложным для понимания предметом, поэтому предусмотрительные дизайнеры и маркетологи должны приложить все усилия, чтобы изучить его с как можно большего количества ракурсов.

Шаг 6. Выберите способ определения шаблона-победителя

Существуют хорошие способы подсчета этого показателя, которые обычно требуют внесения в тесты несколько корректив, но опять же — вам, как правило, понадобится больше посетителей, чтобы получить убедительные результаты». Они могут побудить вас на тестирование многих элементов просто потому, что вы можете это сделать. Однако сам факт придумывания нескольких гипотез и запуска теста на их основе еще не гарантирует вам никакого результата. Вполне возможно, что все ваши гипотезы ни на чем не основаны. Теперь вам надо создать отдельный шаблон для каждого варианта сообщения. Тестировать можно до 16 шаблонов одновременно, но помните, что, чем больше вариантов сообщения, тем больше должна быть ваша аудитория для теста.

  • Например, типичный МВТ – 3 х 2 (проверка двух версий трех элементов дизайна) потребует столько же трафика, сколько A/B-тест с 9 вариантами (32).
  • Именно поэтому множество компаний проводит тестирование своих сайтов и посадочных страниц, используя такие методы как сплит(A/B)- и мультивариантные тесты (MVT).
  • Но добавлять такое фото на бизнес-сайт — неуместно.
  • Чтобы оценить трафик, необходимый для значимого результата, используйте калькулятор.
  • Используйте A/B-тесты, чтобы определить лучшую структуру.
  • Также оно требует существенно большего трафика, просто чтобы работать, и больше отдачи от пользователя.

Тестируют такие же элементы, как в A/B/n тестах, но более детально и в комплексе с другими. Важно тестировать все варианты mvt тестирование одновременно, а не по отдельности. Результат зависит от времени суток, дня недели, сезонности и других факторов.

Теория тестирования ПО просто и понятно

Из тестовых сценариев, сгруппированных по некоему признаку (например, тестируемой функциональности), получаются некоторые наборы. Они могут быть как зависящими от последовательности выполнения (результат выполнения предыдущего является предварительным условием для следующего для Test script), так и независимыми (Test suite). Используйте A/B-тесты, чтобы определить лучшую структуру. Используйте МВТ, чтобы довести ее до совершенства, убедиться, что элементы взаимодействуют лучшим образом. В процессе мультивариативного тестирования возрастает вероятность ложноположительного результата.

Когда следует платить за участие в юзабилити-тестах

Это особенно актуально, если учесть, что при MVT трафик дробится между разными версиями страницы, и на каждый конкретный вариант приходится относительно небольшая его часть. Если вам не хватает трафика для полномасштабных тестов, попробуйте воспользоваться советом Леонида Пекелиса из Optimizely. Начните тесты с полным набором вариантов, которые вы хотите проверить, но запустите их на небольшой промежуток времени – ровно настолько, чтобы увидеть явные тенденции.


Posted

in

by

Tags:

Comments

Leave a Reply

Your email address will not be published. Required fields are marked *