← Все статьи

А/Б тест объявлений в Директе: как проверить заголовки и офферы без слива бюджета

07.09.20267 мин чтения
Готовил · Проверил и отредактировал

Сделали два варианта заголовка. Через три дня один «победил» — CTR у него выше на 18%. Остановили проигравший, запустили победителя. Через неделю разрыв исчез: первый вариант просто попал на удачный день, когда трафик был теплее. Бюджет слит, вывод ложный.

Тестирование объявлений — это не «запустить два варианта и посмотреть, какой кликают чаще». Это методология: что именно проверять, сколько данных нужно для вывода и по какой метрике объявление действительно побеждает. Разберём по шагам, чтобы результат теста был данными, а не случайным наблюдением.

Что тестировать в первую очередь

Не все элементы объявления одинаково влияют на результат. Начинать нужно с того, что видит большинство пользователей и что напрямую связано с решением кликнуть или нет.

Порядок приоритетов

  1. Заголовок 1. Виден всегда — даже когда объявление показывается в сжатом формате или на мобильном. Это главный элемент для тестирования: именно здесь разница в формулировке даёт наибольший эффект на CTR и качество аудитории.
  2. Заголовок 2. При полном показе находится рядом с первым и дополняет его. Хорошая пара «Заголовок 1 + Заголовок 2» работает лучше, чем идеальный первый заголовок с нейтральным вторым. Тестируйте сочетания, а не каждый изолированно.
  3. Изображение. В кампаниях с показом в Рекламной сети Яндекса изображение влияет на CTR сильнее, чем текст. Если объявления идут в сети, начинайте именно с картинки: смена визуала даёт самый быстрый и заметный результат.
  4. Быстрые ссылки. Недооценённый элемент. Смена формулировок быстрых ссылок иногда даёт ощутимый прирост CTR без изменения основного текста, особенно когда ссылки описывают конкретные преимущества или услуги, а не общие разделы сайта.
  5. Текст объявления. Влияет на CTR меньше заголовка, но зато фильтрует аудиторию: более конкретный текст отсекает нецелевые клики. Тестируйте текст, когда заголовки уже оптимизированы.

Одно изменение — один тест

Если изменить заголовок, картинку и текст одновременно, результат теста окажется бесполезным: непонятно, что именно дало разницу. Даже если вариант победил, но вы не знаете, какой элемент повторять дальше. Медленнее, но с каждым тестом получаете понятный вывод о своей аудитории.

Два способа тестировать объявления в Директе

В Директе есть два принципиально разных подхода к тестированию объявлений. Выбор зависит от того, насколько чёткий вывод вам нужен.

Ротация в комбинаторных объявлениях

В комбинаторном объявлении вы задаёте сразу несколько вариантов каждого элемента: несколько заголовков, несколько текстов, несколько изображений. Система сама собирает комбинации и показывает каждому пользователю тот вариант, который алгоритм прогнозирует как наиболее эффективный, исходя из накопленной статистики по конкретному запросу, аудитории и устройству.

Плюсы: просто настроить, не нужно создавать отдельные кампании, система оптимизирует автоматически и со временем всё чаще показывает лучшие комбинации.

Минусы: вы не получаете однозначный ответ «заголовок А лучше заголовка Б». Элементы показывались в разных сочетаниях, поэтому вычленить вклад конкретного заголовка трудно. Если вы хотите понять, почему что-то работает, а не просто улучшить общий результат, комбинаторного режима недостаточно.

Эксперименты с разделением аудитории

В Директе есть возможность создать эксперимент, при котором аудитория делится между двумя кампаниями в заданной пропорции (50/50). Пользователи попадают в один из сегментов случайным образом и видят только вариант своего сегмента. Обе кампании работают одновременно, в одинаковых рыночных условиях.

Это честное сравнение: если результаты разошлись, объяснение одно — разные объявления. Внешние факторы одинаковые для обоих.

Подходит для: сравнения существенно разных офферов, тестирования разных посадочных страниц, проверки принципиально другой структуры объявления. Это серьёзный инструмент для важных гипотез, а не для ежедневной подборки заголовков.

Когда что использовать

СитуацияПодход
Хочу быстро улучшить CTR, нет ресурсов на сложные сравненияРотация в комбинаторных объявлениях
Сравниваю два принципиально разных оффера или стратегии кампанииЭксперимент с разделением аудитории

Сколько данных нужно: почему три дня — слишком мало

Это самая распространённая ошибка при тестировании объявлений. Тест показывает разницу уже на третий день, кажется, всё ясно. На самом деле: нет.

Почему трафик неоднороден

Пользователи в разные дни недели ведут себя по-разному. В понедельник утром люди планируют рабочие задачи, ищут поставщиков и подрядчиков: конверсия в B2B-тематике выше. В пятницу вечером преобладают личные запросы, аудитория менее готова к деловым решениям. В выходные картина меняется снова.

Если вариант А показывался преимущественно в будни, а вариант Б накапливал показы в выходные, вы сравниваете разные аудитории, а не разные объявления. Разрыв в CTR объяснится не текстом, а днём недели.

Правило: тест должен охватить минимум полный семидневный цикл с понедельника по воскресенье. Даже если нужный объём кликов набрался раньше, подождите завершения недели.

Объём данных для надёжного вывода

Точное число кликов зависит от базового CTR и разницы, которую вы хотите обнаружить. Общий принцип: чем меньше ожидаемый эффект, тем больше нужно данных. Для предварительной оценки объёма используйте онлайн-калькуляторы выборки: введите текущий CTR, желаемый прирост и уровень доверия 95%.

Период обучения автостратегии

Если в кампании работает автоматическая стратегия (например, «Максимум конверсий»), обновление объявлений запускает период переобучения. По официальной рекомендации Директа он занимает 7–14 дней. В это время статистика нестабильна: алгоритм заново накапливает данные и перестраивает прогнозы.

Это значит, что тест объявлений при работающей автостратегии нельзя оценивать первые одну-две недели. Планируйте: запустили новый вариант, ждёте стабилизации, потом читаете данные.

Подробнее о том, как автостратегии обучаются и когда их менять: про автостратегии в Яндекс.Директе.

По какой метрике объявление победило

Смотреть только на CTR — ошибка. Объявление с высоким CTR может приводить нецелевую аудиторию, которая не конвертируется в лиды. Или наоборот: «скучное» объявление с низким CTR отфильтровывает случайные клики и даёт дешёвые целевые заявки. Итоговая метрика важнее промежуточной.

Иерархия метрик: CPL → CR → CTR

МетрикаЧто показываетКогда использовать
CPL — стоимость лидаСколько стоит одна заявка или звонок. Это итоговый показатель: учитывает и кликабельность, и конверсию посадочной.Когда накоплено достаточно конверсий (хотя бы несколько десятков на вариант). Самая надёжная метрика для решения.
CR — коэффициент конверсииДоля кликнувших, которые совершили целевое действие. Показывает, насколько хорошо объявление фильтрует аудиторию под ваш оффер.Когда данных по CPL ещё нет, но есть данные по конверсиям. Лучше, чем CTR, — показывает качество аудитории.
CTR — кликабельностьДоля пользователей, которые кликнули по объявлению. Промежуточный показатель: высокий CTR не равно хороший лид.Только когда конверсий совсем нет и нужно хоть что-то видеть. Всегда проверять CR и CPL, как только данные накопятся.

Ловушка высокого CTR

«Скидка 50%! Только сегодня!» — высокий CTR. Но часть кликнувших разочаруется, попав на сайт с реальными условиями. CR упадёт, стоимость лида вырастет. Победитель по CTR окажется проигравшим по CPL.

Объявление «Монтаж потолков от 850 ₽/м². Выезд замерщика бесплатно» кликают реже: не все устроит цена. Но кликнувшие именно те, кому это актуально: CR выше, CPL ниже. О том, как совместить кликабельность и качество аудитории: статья как писать объявления в Директе.

Параллельный тест против последовательного

Почему параллельный — правильно

При параллельном тесте оба варианта объявления показываются одновременно разным пользователям. Условия одинаковые: тот же день, тот же рынок, та же активность конкурентов. Если результаты разошлись, единственное объяснение: разные объявления.

Почему последовательный — почти всегда ошибка

При последовательном тесте сначала неделю работает вариант А, потом неделю вариант Б. На первый взгляд удобно: не нужно думать про разделение аудитории. На практике это серьёзная проблема.

  • Между двумя периодами что-то менялось. Конкуренты изменили ставки, вышел праздник, прошёл сезонный пик или спад. Второй вариант мог выиграть просто потому, что попал в лучший период.
  • Алгоритм накопил больше данных ко второму периоду. Если кампания работает с автостратегией, к моменту запуска варианта Б алгоритм уже лучше понимает аудиторию. Любой второй вариант окажется в более выгодных условиях.
  • Нет защиты от случайных всплесков. Один удачный день в первой части теста и один плохой во второй, и вывод окажется противоположным реальности.

Единственный случай, когда последовательный тест оправдан: технически невозможно показывать два варианта одновременно, например, очень маленький рынок с минимальным суточным трафиком. Во всех остальных случаях: параллельно.

Что делать после: масштабировать и думать дальше

Внедрить победителя

Объявление с лучшими показателями становится основным. В комбинаторном формате это происходит автоматически: система постепенно снижает долю проигрывающих комбинаций и показывает успешные чаще. Если тест проходил через эксперимент с разделением аудитории, остановите проигравшую кампанию и переключите весь трафик на победившую.

Следующая гипотеза: откуда брать идеи

Результат каждого теста — это не конец, а материал для следующего. Если победил заголовок с конкретным сроком («Монтаж за один день»), следующий вопрос: а что, если добавить гарантию («или вернём деньги»)? Победила цена: протестируйте другой способ её подать.

Хорошие источники гипотез:

  • Поисковые запросы в Мастере отчётов Директа. Какие слова пользователи реально вводят: это язык вашей аудитории. Используйте его в заголовках.
  • Возражения из звонков и переписки. Что чаще всего спрашивают перед покупкой? Это и есть кандидаты на тест: объявление, которое закрывает главное возражение ещё до клика.
  • Объявления конкурентов. Не копировать, а понять паттерн. Если все конкуренты пишут про «гарантию качества», протестируйте конкретный срок или цену, которую они не называют.

Вести журнал тестов

Фиксируйте: что тестировали, когда, какой вариант победил и почему, по вашей версии. Минимальная структура: дата запуска, что изменяли, победивший вариант, ключевая метрика. Без записей через три месяца вы начнёте тестировать уже проверенные гипотезы, тратя бюджет дважды на один и тот же вопрос.

Сколько тестов вести одновременно

Один активный тест на группу объявлений в один момент времени. Несколько одновременных тестов в одной группе загрязняют данные: когда изменения происходят параллельно, непонятно, что именно на что повлияло. Завершили тест — внедрили вывод — запустили следующий. Простая последовательность, которая работает.

Типичные ошибки тестирования объявлений

  • Остановить тест на третий день. Три дня — это шум, не данные. Дайте тесту пройти полный недельный цикл и набрать достаточный объём кликов.
  • Менять несколько элементов сразу. Одно изменение — один тест. Иначе победа необъяснима и бесполезна для следующей гипотезы.
  • Оценивать по CTR, игнорируя CR и CPL. Высокий CTR — не победа. Смотреть на стоимость лида.
  • Изменить объявление в середине теста. Нашли опечатку или решили поправить текст: тест испорчен. Данные до и после исправления несравнимы. Начинайте заново.
  • Не учитывать период обучения автостратегии. После смены объявлений нужно ждать 7–14 дней стабилизации, прежде чем читать данные.
  • Не вести журнал тестов. Без записей через месяц непонятно, что уже пробовали и почему отказались от конкретного варианта. Тестируете одно и то же дважды.

Итог: тест — это практика, а не разовое действие

Компании с низким CPL тестируют постоянно: один тест завершился, запущен следующий. Большинство гипотез не подтверждается: это нормально. Каждый отрицательный результат: информация о том, чего ваша аудитория не хочет. Это тоже знание, за которое вы заплатили трафиком.

Три дня разницы в CTR — это не вывод. Семь дней при достаточном объёме трафика, правильная итоговая метрика и параллельный показ: это уже данные, на которые можно опираться при принятии решений.

Если хочется понять, как рекламный кабинет работает в целом и как специалисты читают данные каждую неделю: что делает агентство с рекламным кабинетом.