Энциклопедия маркетинга, https://www.marketing.spb.ru

Адрес документа: https://www.marketing.spb.ru/lib-comm/internet/ab_testing.htm
Обновлено: 20.11.2017

А/Б-тестирование на уровне различных маркетинговых каналов

Агентство эффективных веб-коммуникаций Texterra

Как известно, в бизнесе не бывает статичных состояний. Предприятие должно постоянно развиваться, чтобы соответствовать текущей рыночной ситуации, потребностям клиентов и собственников. Остановив развитие, проект в ту же секунду начинает деградировать. Например, нельзя создать интернет-магазин, добавить на сайт 200 товаров и ежемесячно получать прибыль в сумме 100 тыс. рублей. Чтобы прибыльность проекта хотя бы не падала, предпринимателю необходимо постоянно расширять ассортимент, увеличивать охват аудитории с помощью рекламы и публикации полезного контента, улучшать поведенческие метрики сайта и коэффициент конверсии.

Одним из инструментов развития веб-проектов является A/B-тестирование. Этот метод позволяет измерять предпочтения аудитории и влиять на ключевые показатели эффективности сайта, включая конверсии, время пребывания пользователей на странице, среднюю сумму заказа, показатель отказов и другие метрики. Из этой статьи вы узнаете, как правильно проводить A/B-тестирование.

Что такое A/B-тестирование

A/B-тестирование — это маркетинговый метод, использующийся для оценки и управления эффективностью веб-страницы. Этот метод также называется сплит-тестированием (от англ. split testing — раздельное тестирование).

A/B-тестирование позволяет оценивать количественные показатели работы двух вариантов веб-страницы, а также сравнивать их между собой. Также сплит-тестирование помогает оценивать эффективность изменений страницы, например, добавления новых элементов дизайна или призывов к действию. Практический смысл использования этого метода заключается в поиске и внедрении компонентов страницы, увеличивающих ее результативность. Обратите внимание еще раз, A/B-тестирование — это прикладной маркетинговый метод, с помощью которого можно влиять на конверсию, стимулировать сбыт и повышать прибыльность веб-проекта.

Сплит-тестирование начинается с оценки метрик существующей веб-страницы (A, контрольная страница) и поиска способов ее улучшения. Например, представьте себе посадочную страницу интернет-магазина с коэффициентом конверсии 2%. Маркетолог желает увеличить этот показатель до 4%, поэтому планирует изменения, которые помогут решить эту задачу.

Допустим, специалист предполагает, что изменив цвет конверсионной кнопки с нейтрального голубого на агрессивный красный, он сделает ее более заметной. Чтобы проверить, приведет ли это к увеличению продаж и росту конверсии, маркетолог создает усовершенствованный вариант веб-страницы (B, новая страница).

С помощью инструментов для проведения сплит-тестирования эксперт в случайном порядке разделяет трафик между страницами A и B на две приблизительно равные части. Условно говоря, половина посетителей попадает на страницу A, а вторая половина на страницу B. При этом маркетолог держит в уме источники трафика. Чтобы обеспечить валидность и объективность тестирования, необходимо направить на страницы A и B по 50% посетителей, пришедших на сайт из социальных сетей, естественного поиска, контекстной рекламы и т.п.

Собрав достаточно информации, маркетолог оценивает результаты тестирования. Как сказано выше, коэффициент конверсии страницы A составляет 2%. Если на странице B этот показатель составил 2,5%, значит изменение конверсионной кнопки с голубого на красный цвет действительно увеличило эффективность лэндинга. Однако показатель конверсии не достиг желаемых 4%. Поэтому маркетолог дальше ищет способы совершенствования страницы с помощью A/B-тестирования. При этом в качестве контрольной выступит уже страница с красной конверсионной кнопкой.

Изменение цвета кнопки увеличило конверсию. Теперь можно искать способы улучшить страницу B

Что тестировать

Как отмечалось выше, сплит-тестирование — это прикладной метод, позволяющий влиять на различные метрики сайта. Поэтому выбор объекта тестирования зависит от цели и задач, которые ставит перед собой маркетолог.

Например, если показатель отказов посадочной страницы составляет 99%, при этом большинство посетителей покидает лэндинг в течение 2-3 секунд после «приземления», стоит задуматься об изменении визуальных компонентов страницы. С помощью A/B-теста маркетолог может найти оптимальный вариант макета страницы, выбрать привлекательную цветовую гамму и изображения, использовать читабельный шрифт. А если перед маркетологом стоит задача увеличить количество подписок, он может попробовать изменить соответствующую конверсионную форму. Сплит-тест поможет специалисту выбрать оптимальный цвет кнопки, лучший вариант текста, количество полей в форме подписки или ее расположение.

Чаще всего маркетологи тестируют следующие элементы веб-страниц:

  • Текст и внешний вид конверсионных кнопок, а также их расположение.
  • Заголовок и описание продукта.
  • Размеры, внешний вид и расположение конверсионных форм.
  • Макет и дизайн страницы.
  • Цену товара и другие элементы бизнес-предложения.
  • Изображения товаров и другие иллюстрации.
  • Количество текста на странице.

Какие инструменты сплит-тестирования использовать

Чтобы выполнить A/B-тестирование, маркетологу необходимо воспользоваться одним из специализированных сервисов. Наиболее востребованным из них является Content Experiments компании Google, доступный пользователям системы Analytics. До середины 2012 года этот инструмент назывался Google Website Optimizer. С его помощью можно протестировать различные элементы страницы, включая заголовки, шрифты, конверсионные кнопки и формы, изображения и т.п. Сервис Content Experiments остается бесплатным, что относится к его основным преимуществам. К его недостаткам относится необходимость работы с HTML-кодом.

Также вы можете использовать для проведения сплит-тестирования следующие российские и иностранные инструменты:

  • Optimizely — наиболее популярный в буржунете платный сервис A/B-тестирования. Стоимость его использования составляет от 19 до 399 долларов США в зависимости от типа подписки. К преимуществам данного сервиса относится возможность создания экспериментов в визуальном интерфейсе, что избавляет маркетолога от необходимости работать с HTML-кодом тестируемых страниц.
  • ABTest.ru — русскоязычный сервис, функциональность которого повторяет Optimizely. ABTest работает в режиме бета-тестирования, плата за проведение экспериментов не взимается.
  • Perfomable от Hubspot. Этот сервис позволяет создавать посадочные страницы и проводить сплит-тестирование. Стоимость подписки составляет от 50 до 1200 долларов в месяц.
  • Visual Website Optimizer — платный сервис, позволяющий тестировать различные элементы страницы. Чтобы использовать этот инструмент, маркетологу необходимо иметь навыки работы с HTML-кодом. Стоимость подписки составляет от 49 до 249 долларов.
  • Unbounce — сервис, предназначенный для создания и оптимизации лэндингов. В том числе, он позволяет выполнять A/B-тестирование. Стоимость использования составляет от 50 до 500 долларов в месяц. Отечественный аналог — LPGenerator. Этот сервис позволяет тестировать только созданные с его помощью страницы.

Как провести A/B-тестирование с помощью Content Experiments

Сервис «Эксперименты» Google Analytics позволяет одновременно проверить эффективность пяти вариантов страницы. Используя его, маркетологи могут выполнять A/B/N-тестирования, отличающиеся от стандартных A/B-экспериментов возможностью следить за эффективностью нескольких новых страниц, каждая из которых может иметь несколько новых элементов.

Маркетолог имеет возможность самостоятельно определять долю трафика, участвующего в тестировании. Минимальная продолжительность теста составляет две недели, максимальная ограничена тремя месяцами. Специалист может получать данные о результатах тестирования на электронную почту.

Чтобы провести сплит-тестирование с помощью Content Experiments, выполняйте следующие действия:

  1. Войдите в аккаунт Google Analytics, выберите сайт, эффективность которого необходимо проверить. После этого выберите меню «Поведение — эксперименты».
Необходимо выбрать меню «Поведение — эксперименты»
  1. Введите в соответствующую форму URL страницы, которую вы будете тестировать, и нажмите кнопку «Начать эксперимент».
Вставьте URL и нажмите «Начать эксперимент»
  1. Выберите название и цель тестирования. Определите процент трафика, участвующий в эксперименте. Решите, хотите ли вы получать оповещения о ходе тестирования на электронную почту. Нажмите кнопку «Далее» после выбора необходимых параметров.
Интерфейс создания экспериментов понятен на интуитивном уровне
  1. Выберите варианты страницы, участвующие в тестировании. Добавьте их в соответствующие формы и нажмите «Далее».
Окажется ли вариант со смайликом более эффективным?
  1. Создайте код эксперимента. Если вы не знаете, как вставить его на страницу, выберите вариант «Отправить код веб-мастеру». Если вас не бросает в пот при упоминании HTML-кода, выберите вариант «Вставить код вручную».
Выбирайте «Вставить код вручную», если умеете обращаться с HTML-кодом
  1. Скопируйте отмеченный на предыдущей иллюстрации код и вставьте его в исходный код контрольной страницы. Код должен быть вставлен непосредственно после тега <head>. После выполнения этого действия нажмите кнопку «Сохранить изменения».
Вставьте код после тега <head>
  1. Проверьте наличие кода тестирования на контрольной странице и нажмите кнопку «Начать эксперимент». Обратите внимание, код необходимо добавить только на контрольную страницу.

Вы сможете оценить первые результаты тестирования через несколько суток после начала эксперимента. Чтобы следить за результатами тестирования, выберите соответствующий эксперимент в списке и перейдите на страницу отчетов.

Идеи, эффективность которых стоит обязательно проверить с помощью сплит-тестирования

Выше неоднократно отмечалось, что A/B-тестирование помогает увеличить эффективность веб-страниц. Чтобы этот маркетинговый метод принес результат, маркетолог должен генерировать идеи, способные позитивно влиять на те или иные метрики сайта. Нельзя просто брать какие-либо изменения с потолка, внедрять их и тестировать эффективность. Например, вряд ли метрики сайта изменятся, если вы просто решите изменить фон страницы с голубого на салатовый.

Маркетолог должен видеть способы улучшения страниц и понимать, почему они должны сработать. Cплит-тестирование просто помогает проверить предположения специалиста. Однако каждый маркетолог иногда оказывается в ситуации, когда все идеи проверены, а необходимого результата достичь не удалось. Если вы попали в такую ситуацию, попробуйте внедрить следующие изменения и проверить их эффективность:

  • Используйте конверсионную форму, которая остается перед глазами посетителя при прокрутке страницы. Например, эта форма может быть неподвижно «прикручена» к верхней части экрана, как навигационное меню Facebook.
Меню навигации остается неподвижным при прокрутке
  • Удалите лишние поля из конверсионной формы. Возможно, ваши потенциальные подписчики не хотят раскрывать свои паспортные данные.
  • Добавьте на конверсионную страницу слова «бесплатно» или free. Конечно, аудитория знает, что подписка на рассылку является бесплатной. Но иногда слово free творит настоящие чудеса, ведь дармовой уксус сладок.
  • Опубликуйте на посадочной странице видео. Обычно это позитивно влияет на ряд метрик, включая показатель отказов, коэффициент конверсии и время пребывания на странице.
  • Увеличьте срок, в течение которого пользователи могут бесплатно тестировать ваш продукт. Это простой и эффективный способ увеличения конверсий для компаний, продающих ПО и веб-сервисы.
  • Экспериментируйте с цветом конверсионных кнопок. В некоторых случаях хорошо работают кнопки агрессивного красного цвета. Однако иногда они раздражают пользователей. Используйте A/B-тест, чтобы найти наиболее эффективный цвет кнопки для вашего сайта.
  • Пообещайте бонусы первым 10 или 100 покупателям (подписчикам). Не спешите удалять это обещание даже после завершения акции. Многие пользователи не рассчитывают войти в число счастливчиков, однако все равно подсознательно реагируют на выгодное предложение.

Как и зачем тестировать разные варианты страниц

Сплит-тестирование позволяет оценить эффективность изменений веб-страниц. Этот маркетинговый метод имеет прикладное значение. Он позволяет практически постоянно совершенствовать страницы, улучшая различные метрики.

Чтобы протестировать то или иное изменение, необходимо создать новый вариант страницы и сохранить старый. Оба варианта должны иметь разные URL. После этого следует воспользоваться одним из сервисов для проведения сплит-тестов, например, Content Experiments. Оценку результатов тестирования можно проводить как минимум через две недели после запуска эксперимента.

Как вы считаете, стоит ли проводить A/B-тесты? В каких случаях этот маркетинговый метод остается бесполезной тратой времени?

А/Б-тестирование на уровне различных маркетинговых каналов: 3 реальных примера

А/Б-тестирование, также известное как сплит-тестирование – это инструмент исследования, которым должен владеть любой уважающий себя маркетолог. Используя его, вы сможете понять, насколько эффективны ваши маркетинговые усилия, и совершенствовать их, руководствуясь полученными выводами. Наверняка, многие из вас знают метод сплит-тестирования не понаслышке, и не раз применяли его в своей практике. Однако, у остальных этот термин до сих пор вызывает непонимание.

Итак, что же такое А/Б-тестирование? Это метод исследования, при котором маркетинговые переменные сравниваются друг с другом с целью определить вариант, который находит наибольший отклик у аудитории.

Как видно из названия, мы имеем дело с двумя переменными: А (исходный или контрольный вариант) и Б (новый или итоговый вариант). Они поочередно демонстрируются двум однородным группам потенциальных клиентов в течение определенного времени, пока не будет достигнута высокая степень статистической достоверности. Затем, полученные результаты сопоставляются, чтобы определить наиболее выигрышный вариант. В большинстве случаев, исследователи предполагают, что вариант Б изменит уровень конверсии в лучшую сторону (хотя подобные ожидания не всегда оправдываются).

Сфера применения А/Б-тестирования в интернет-маркетинге крайне обширна. Вы можете тестировать варианты заголовков посадочной страницы, лид-форм, изображений, баннеров, торговых призывов и т.д. В нашей статье мы подробнее остановимся на трех маркетинговых каналах (посадочной странице, электронной рассылке и призыве к действию, расположенном на продающих страницах сайта), а также приведем примеры соответствующих А/Б-тестов, которые проводились маркетинговыми специалистами компании HubSpot.

Посадочная страница

Посадочная страница – это, пожалуй, самый популярный и излюбленный объект А/Б-тестирования интернет-маркетологов. Это связано с тем, что она состоит из множества элементов: заголовка, подзаголовка, текста, кнопки призыва к действию, изображения, лид-формы и некоторых других. Более того, каждый из вышеперечисленных компонентов можно исследовать с разных сторон. Взять хотя бы заголовок: вы можете экспериментировать с его формулировкой, размером и цветом шрифта, расположением и т.д.

Как правило, А/Б-тестирование лэндингов проводится с использованием специальных приложений. Вот наиболее популярные примеры подобных инструментов: Google Analytics, Visual Website Optimizer, Optimizely, Unbounce и др.

Некоторые маркетологи предпочитают не разбивать посадочную страницу на отдельные части, а рассматривают ее как одну переменную. Поэтому при проведении А/Б-теста, они одновременно изменяют несколько параметров своего лэндинга.

Подобный тест был проведен командой HubSpot в рамках конференции по оптимизации посадочной страницы. Участникам эксперимента (группе представителей ЦА) была предложена следующая исходная страница, и они должны были внести в нее изменения, которые, на их взгляд, скажутся положительным образом на уровне конверсии сайта:

Конверсия исходного варианта составляла 47.91%

А вот итоговый вариант, получившийся в ходе целого ряда преобразований:

Конверсия итогового варианта составила 48,24%

Как видите, страница приобрела совершенно новый вид. Во-первых, изменилось изображение, а также его положение на странице. Во-вторых, текст стал значительно короче. Сократилась и длина лид-формы, а также ее местоположение. В-третьих, изменилась формулировка заголовка.

Учитывая масштаб преобразований, можно было ожидать впечатляющих результатов повышения конверсии. Однако в реальности все вышло иначе. Результаты А/Б-теста показали, что уровень конверсии повысился на ничтожно маленькое значение – всего 0,33% (было 47.91%, стало 48,24%). Почему же так получилось?

Урок для маркетологов: оптимизируйте лишь те посадочные страницы, на которых действительно низкий уровень конверсии.

В данном случае, А/Б-тестирование провалилось по следующей причине: аудитория уже была заинтересована маркетинговым предложением (получить бесплатный материал), поэтому не придавала особого значения другим элементами посадочной страницы: длине текста и лид-формы, их расположению и т.д. Отсюда вывод: проводите А/Б-тесты только на посадочных страницах с относительно низким уровнем конверсии, ведь не так просто конкурировать с лэндингами, которые уже конвертирует более 47% от общего трафика.

Призыв к действию

Призыв к действию также предоставляет маркетологам большой простор для экспериментов. Вы можете изменить как его содержание (например, предложить своим читателям подписаться на новую рассылку), так и форму (использовать другой цвет и размер шрифта, изменить его положение на странице).

К примеру, специалисты компании HubSpot решили изменить срок действия своего маркетингового предложения и посмотреть, что из этого выйдет. Изначально, они предлагали бесплатную пробную версию своей программы на 7 дней. Им стало любопытно, увеличится ли число их подписчиков, если они продлят срок действия предложения до 30 дней:

Конверсия исходного варианта составляла 32,6%
Конверсия итогового варианта составила 70,9%

Результаты теста показали, что продление срока действия бесплатного предложения до 30 дней привлекло много новых посетителей. При этом уровень конверсии сайта возрос на целых 110% (с 32,6% до 70,9%). Как видите, «щедрость» команды HubSpot окупилась сполна.

Урок для маркетологов: начинайте процесс оптимизации призыва к действию с тестирования вашего предложения.

Проанализировав данный А/Б-тест, можно сформулировать следующий вывод: тип вашего маркетингового предложения может оказать колоссальное влияние на процесс лидогенерации. Поэтому начинайте оптимизацию ваших призывов к действию с сопоставления различных маркетинговых предложений. Подобные эксперименты помогут вам лучше понять, что именно способствует превращению посетителей вашего сайта в лидов.

Электронная почта

Проводя А/Б-тесты, e-mail маркетологи чаще всего сравнивают различные варианты строки темы. И это не случайно, ведь правильно подобранная тема письма может привлечь внимание получателей и положительно повлиять на уровень кликабельности. Однако с помощью сплит-тестирования можно исследовать и другие аспекты электронных писем, например имя отправителя.

В 2011-м году, компания HubSpot решила проверить, действительно ли такой, на первый взгляд, несущественный нюанс, как имя отправителя, может повысить эффективность e-mail-рассылки. В имени отправителя сначала указывалось название компании "HubSpot", а затем конкретное имя специалиста из отдела маркетинга. Вот, что получилось в итоге:

Люди больше доверяют письмам, полученным от реального человека

График показывает, что уровень кликабельности на ссылку в исходном варианте сообщения достигал 0,73%, а в итоговом варианте – 0,96%. Так что перед нами бесспорный победитель – вариант В (статистическая достоверность равна 99,9%).

Урок для маркетологов: ваше электронное сообщение с большей вероятностью вызовет интерес у клиентов, если вы отправите его от имени реального человека, а не компании.

Пожалуй, здесь и так все понятно. Люди больше доверяют письмам, полученным от конкретного человека, а не от абстрактной компании. Им хочется знать, кто именно вступает с ними в диалог. Так почему бы не удовлетворить их желание?

Тестируйте, делайте выводы и... еще раз тестируйте

А/Б-тестирование – это многогранный и довольно непредсказуемый метод исследования. Бывает, думаешь: «Вот этот заголовок точно «взорвет» уровень конверсии на моем сайте!», а в реальности все оказывается иначе. В лучшем случае, получаешь скромные результаты, а в худшем – никакие. Так что не стоит полагаться на свое субъективное мнение – лучше проверить все с помощью А/Б-тестирования, которое покажет вам истинное положение вещей.

Самое главное – не останавливаться на достигнутом. Допустим, вы перенесли кнопку призыва к действию в зону «первого экрана», за счет чего показатель конверсии вашего сайта увеличился на 50%. Это просто замечательно, поздравляем! Теперь, вы можете поэкспериментировать с ее цветом, например изменить его с серого на ярко-желтый. И вам необязательно ограничиваться сайтом: А/Б-тесты можно проводить и на страничках в социальных сетях, и в блоге и т.д. Как говорится, нет предела совершенству.


© 1998-2023 Дмитрий Рябых