Блог » Тесты A/B – шаг за шагом

Тесты A/B – шаг за шагом

30.10.2013 Oleksandr 1 min read
Аватар

Наиболее популярным методом оптимизации рекламной кампании являются тесты A/B.

Идея тестов была описана в статье A/B тестирование – сплит тестирование веб-сайтов. Чтобы тесты прошли результативно, к ним необходимо хорошо подготовиться. Дальше вы прочтете о тех шагах которые помогут вам при тестах:

Как провести тесты A/B – шаг за шагом

1. Определение исходного состояния

Если вы намеренны начать тестирование нового лендинга, можете пропустить это шаг. Если вы уже ведете кампанию и хотите улучшить ее результат, начните оптимизацию с исследования ее теперешнего состояния. Такая идентификация поможет на следующих этапах. Проверьте среди прочего:

На основании собранных данных вы сможете определить, какой элемент нужно исправить.

Например, короткое время посещения лендинга говорит о том, что рекламное сообщение составлено неправильно, или первое впечатление от лендинга оставляет желать лучшего.

После определиния проблемы вам будет легче приступить к поиску методов его решения.

2. Определение цели

После проведенного вступительного анализа вы уже знаете, где в вашем лендинге самая большая проблема. Самое время определить общий результат, который вы хотите достигнуть. В одном тесте установите только одну цель:

3. Гипотеза

Очередным этапом является формулировка гипотезы, которая будет проверять тестирование. Помните, одна цель — одна гипотеза. Чтобы ее определить, задайте элементы требующие поправок:

1. Определите предмет тестов

Выберите самое слабое звено вашей кампании (источник трафика — объявление — целевая страницы) и определите, что требует исправления: рекламное объявление, целевая страница, а может источник трафика? Именно здеть будет сосредочено основное внимание на следующих этапах.

Например: Высокий коэффициент отказов может быть из-за неправильного рекламного объявления, в таком случае исправлять нужно рекламные тексты.

В свою очередь низкий коэффициент конверсии вероятно говорит о проблеме в самом лендинге, т.е. редактировать нужно его.

2. Определите элементы тестов

Элементы могут быть такими:

Выберите один и измените его на странице. Задайте также, как глубоко вы будете тестировать. Т.е. Будут ли это абсолютно разные комбинации элементов, или они будут оличаться незначительно, например цветом.

3. Определите количество вариантов

Определите сколько комбинаций вы будете сравнивать. Если решите тестировать несколько вариантов рекламного объявления или лендингов, определите будет ли это тест a/b/c или будете сравнивать 3 версии целевой страницы в одно и тоже время. А может стоит поделить тестирование на этапы, в которых очередной вариант вы будете сравнивать с победителем предыдущего этапа? В небольших кампаниях, в которых количество посещений и конверсий невелико, лучше избегать мультитестов (более чем два варианта). Результаты могут быть слишком малы, чтобы делать какие-то выводы. Советуем здесь делать две версии.

Тест A/B/C

На этом этапе вы уже знаете, что будете тестировать. Так что можно приступить к формулировке гипотезы. Благодаря этому вы четко определите эффект, который нужно получить и сможете приступить к тестированию.

Например, если тестируется форма, гипотеза может звучать: Сокращение формы на два поля повысит конверсию на 20%.

Версия A

Версия В

4. Определение источников трафика

Определите, где находится ваш таргет, целевая группа. Выделите аудиторию, в которой видите потенциал конверсии и определите как вы в нее попадете. Например: через поисковик, рассылки, рекламой display, SMM и тд.

5. Выбор инструмента

Существует множество инструментов, которые помогают проводить тесты. В случае рекламных текстов вы можете самостоятельно отслеживать их качество в Google Analytics или Yandex Метрике. При тестировании лендингов нужно воспользоваться готовым инструментом. Наш сервис оснащен понятным инструментом для проведения тестов A/B. Здесь можно сделать и случайный показ пользователям нескольких вариантов лендинга, регистрацию статистики, а также ручной выбор победителя спустя заданное время, или после определенного количества конверсий.

6. Определение характера теста

Имея приготовленные тестовые варианты, определите принципы прохождения теста. Задайте минимальные требования, необходимые для получения реальных результатов теста:

Минимальные условия, которые дают более-менее реальные данные, это две недели, или минимум 1000 посещений или минимум 100 конверсий.

Указанные параметры зависят конечно от специфики отрасли, целевой аудитории, поэтому подбирать их нужно индивидуально для каждой кампании.

7. Создание вариантов и проведение тестирования

Еслы вы создали тестовые варианты согласно с п. 3, можно приступать к тесту. Помните, что варианты нужно тестировать в тоже самое время, направляя на них трафик с того же самого источника. Т.е. Правильные тесты проводятся в тех же самых условиях для всех вариантов.

8. Результаты и их анализ

После тестирования нужно определить победителя. Преимуществом A/B тестированя является простота понимания результатов. Достаточно проверить, какая комбинация достигла лучшего результата. Так что анализируя результаты, держите в памяти цель, которую вы хотели достигнуть. Соответсвенно самым важным будет показатель заданный в п. 2. Постарайтесь определить причину успеха варианта-победителя, это пригодится в будущем. Для этого используйте остальные цифры в статистике.

Определением победителя тесты не заканчиваются. Вы можете начать планирование очередного этапа, снова вернуться к первому и начать очередной тест. Создавайте новые гипотезы и исследуйте их. Учитесь на успехах и ошибках как отправных точках для очередных тестов и максимальной оптимизации целевой страницы.

Аватар

Oleksandr

Are you looking for the hottest landing page tips?

Enter your email to get updates straight to your inbox.

Subscribe
We are using cookies for analytical purpose. Learn more.