Что такое сплит-тестирование в арбитраже
Пусть тебя не сбивает с толку сразу несколько названий: сплит-тестирование, оно же сплитЫ, или A/B-тестирование — это все обозначения одного и того же процесса сравнения эффективности различных составляющих системы (под системой здесь понимается как рабочая связка, так и функционирование лендингов или целых сайтов). Что можно тестировать вебмастеру:
- источники трафика
- призыв к действию (СТА) и работу кнопок с ним: плохой, непроработанный СТА снижает заходы в креосы и регистрации
- креативы и их формат (статика или видео, эмоциональный подход либо новостной, кого-то отпугнет агрессивное обещание легкого заработка, а кто-то клюнет на атрибуты успеха — все это хороший арбитражник подмечает и сводит в единую гипотезу)
- лендинги и преленды (изменение элементов лендинга, их внешнего расположения, поведение прокладки, ведущей на лендинг)
- офферы
- тексты (обращение к целевой аудитории, продающие заголовки)
- таргетинг (для исключения из показов незаинтересованной ЦА, которая точно не сконвертит в плюс)
Зачем делать А/B-тестирование?
Спросишь, зачем и кому нужны сплиты? Да всем: от вебмастера до сеошника. Без выдвижения гипотез и проверки их на практике, на одной теории историю успеха выстроить не выйдет. Например, ты нашел топовый оффер, а заходы в креатив почти нулевые. Стоит задуматься, что именно пошло не так, и провести сплит-тестирование.
Давай простыми словами на понятных примерах: на стойке перед тобой два бокала пивчанского. Оба сорта тебе незнакомы, и с равным успехом это может оказаться и чума каким вкусным пивом, так и шляпой, на которую потратил деньги, но “спасибо, больше не приносите”. Как узнать точно? Только попробовать оба варианта — А и В — затестить. Сплит-тесты показывают в ходе “дегустации”, или проб, какие варианты хуже, какие более эффективны, какие показывают лучшие результаты по нужному параметру (конверсия, время, проведенное на сайте, дочитывание). Какой креос конвертит лучше? Для тестирования всегда советуют сделать их минимум 3-5, и покрутить их на одну аудиторию, а затем сравнить параметры: какой дал больше переходов, какой - больше рег или депов. Вариант с самыми хорошими конверсиями затем откручивают уже на основной бюджет, чтобы по максимуму получить оттуда профит.
Как проводить сплит-тестирование?
В первую очередь, нужно понимать, что тестируются разные подходы, но на одной вертикали. Нельзя просто так взять и затестить гемблу и крипту на одинаковой ЦА просто потому, что на гембле залетел определенный креатив. Бери одну вертикаль и отрабатывай гипотезы внутри нее — это грамотный подход. Иначе сплит-тесты сработают некорректно, и ты сам будешь сетовать на то, что это ерунда и слив бюджета.
1. Определяем предмет сплитов — что именно будем тестировать. Нельзя в одном подходе работать разные лендинги, разные СТА и до кучи разный формат креативов. Один предмет = один тест. От этого зависят и цели сплита: над чем именно будешь работать — над заходами в креатив, над стоимостью клика.
2. Собираем первичную аналитику. Здесь можно пользоваться любой статкой из партнерской программы или оплаченного трекера.
3. Выбираем элементы: вот их уже может быть несколько. Например, предмет тестирования: СТА, элементы — разный цвет кнопки, разные формулировки призыва к действию, разные заголовки на пушах, разные иконки. От выбранных элементов будут зависеть и варианты сплита.
4. Определяемся с выбором инструментов для сплит-тестирования.
5. Настраиваем параметры (тип девайса, ОС, ГЕО, срок тестирования). От настройки зависит и сумма затрат: именно сплиты позволяют не слить крупные бюджеты впустую. С помощью трекера можно создать сразу несколько потоков и забросить их на разные офферы, а дальше отследить поведение ЦА.
6. Выдерживаем заданные сроки тестов. Часто корректной работе тестов мешает банальное нетерпение арбитражника, который видит грустную картинку “ожидание — реальность”, и стопает тесты через пару дней, не дождавшись окончательных результатов и не собрав полных данных для эффективного анализа.
7. Собираем итоговую аналитику из статистики или трекера, анализируем данные и выбираем вариант, отработавший наиболее эффективно. Здесь важно учитывать такие моменты, как выборка и статистическая значимость тестов. Выборка — это не вся ваша ЦА, а лишь небольшая ее часть. В идеальном мире то, что показала выборка, будет реальным отображением поведения ЦА. Увы, мы живем не в Диснейленде: если на сотне человек коэффициент конверсии составил 12%, то можно допустить, что на выборке в тысячу конверсия поведет себя точно так же. В реале же она может упасть и до 3-4% на этой тысяче, на что повлияют различные сторонние факторы — от праздничных дней до рекламных кампаний конкурентов. Игнорирование таких внешних факторов — одна из распространенных ошибок в А/B-тестировании.
Топ инструментов для сплит-тестов
Чтобы не считать результаты сплит-тестов по кликам или конверсиям вручную, проще воспользоваться специальными инструментами для аналитики. Составили для вас перечень топовых тулов:
- Optimizely
- VWO (Visual Website Optimizer)
- Unbounce
Кроме того, Unbounce предоставляет аналитику в реальном времени и возможности интеграции.
Цены: стартовый пакет стоит от 99 долларов в месяц.
- AB Tasty
Минусы: нет статистики поведения пользователей, а структура отчетов может показаться сложной для новичков
Цены: по запросу
- Бесплатные функции для A/B-тестирования
Есть также встроенная функция A/B-тест для социальных сетей (Facebook) или программ (myTarget), позволяющая легко проводить сплит-тестирование, что позволяет отслеживать результаты и анализировать поведение ЦА. Есть опция сегментации аудитории, удобный интерфейс и функции тестирования креативов.