A/B-тесты в рекламе — что есть в VK Рекламе, Директе, Sber Ads и Telegram Ads
A/B-тест сравнивает несколько вариантов при прочих равных условиях, чтобы выбрать лучший. В Директе есть A/B-эксперименты с кампаниями (2–20 вариантов) и ротация объявлений в группе. В VK Рекламе описан сплит-тест лид-форм (2–4 формы). В Sber Ads «сплитование» относится к отчётам счётчика, а не к показам. В Telegram Ads A/B-инструмента в справке нет.
Цифры
| Параметр | VK | Директ | Sber | Telegram |
|---|---|---|---|---|
| Что сравнивается | лид-формы | кампании или настройки одной кампании | — (сплиты в отчётах счётчика) | в справке не нашли |
| Число вариантов | 2–4 | 2–20 | в справке не нашли | в справке не нашли |
| Порог данных | 384 открытия лид-формы | обучение 7–14 дней, не менее 10 конверсий в неделю на вариант | в справке не нашли | в справке не нашли |
| Лимиты | в справке не нашли | активных экспериментов не более 50, в одной ЕПК 5, в медийных 4 | имя сплита до 64 символов | в справке не нашли |
Подробности
VK Реклама
Сплит-тест создаётся в кампании с объектом «Лид-формы и опросы»: переключатель «Сплит-тест», затем добавляются ещё формы. Эффективность считается по стоимости заявки. Когда набирается 384 открытия формы, система выбирает вариант с лучшей конверсией и дальше показывает только его. После запуска формы менять нельзя, иначе нарушается работа алгоритмов. Для других объектов рекламы сплит-теста в справке не нашли.
Яндекс Директ
A/B-эксперименты (Библиотека → A/B-эксперименты) доступны в Единой перфоманс-кампании для сайтов и приложений (кроме показов в мессенджерах) и в медийных кампаниях. Сравниваются кампании либо разные настройки одной кампании: тогда она включается в оба варианта с корректировками. Задаются основная метрика, срок анализа, цель и доля выборки на вариант; все варианты сравниваются с контрольным. В отчёте ячейки подсвечиваются по p-value: меньше 0,2 слабо, меньше 0,05 ярко. Завершить можно кнопкой «Запустить на 100%» или остановить эксперимент.
Для оценки справка называет учёт обучения (в среднем 7–14 дней), не менее 10 конверсий в неделю на вариант и данные минимум за два полных бюджетных интервала. Отдельно описаны эксперименты с объявлениями: несколько объявлений в группе показываются в ротации, затем система чаще показывает самое кликабельное по каждой фразе; справка называет это A/B- или сплит-тестированием.
Sber Ads
Инструмента A/B-теста объявлений в справке не нашли. «Сплитование» в «Статистике от SberAds» разбивает отчёты счётчика по сплитам: список передаётся в параметре splits, имена из a–z, A–Z, 0–9 и «_», до 64 символов, иначе данные не считаются.
Telegram Ads
A/B-тест не описан. Параметры таргетинга после создания объявления не меняются, зато «Create similar ad» копирует объявление с тем же текстом для проверки других параметров.
Важно знать
- «Сплит» означает разное: в VK автоматический выбор лучшей лид-формы, в Директе ротацию объявлений в группе (отдельно от A/B-экспериментов), в Sber Ads разбивку отчётов на стороне счётчика.
- Директ: подсветка по p-value для метрик «Конверсии», «Конверсия %» и «Цена цели» работает только для данных с 1 января 2025 года.
- Директ: страница «Эксперименты с кампаниями» сообщает, что новые эксперименты в Яндекс Аудиториях создавать нельзя, и отсылает к A/B-экспериментам в Директ Про.