A/B-тест
Также: сплит-тест, аб тест
Сравнение двух вариантов (объявления, страницы, оффера) на живом трафике: аудитория делится пополам, побеждает вариант с лучшей метрикой. Способ принимать решения по данным, а не по вкусу.
A/B-тест — честный способ узнать, что работает лучше: показать половине аудитории вариант А, половине — вариант Б, и сравнить результат по цифрам. В контекстной рекламе так тестируют заголовки и тексты объявлений, картинки, офферы, посадочные страницы.
Правила честного теста
- Одно изменение за раз. Поменяли заголовок и картинку сразу — не узнаете, что сработало.
- Достаточно данных. На 50 кликах разница в пару конверсий — шум, а не вывод. Нужна статистическая значимость.
- Одинаковые условия. Оба варианта крутятся одновременно на одну аудиторию, а не «неделя одного, неделя другого» (сезонность всё исказит).
Типичная ошибка
Остановить тест рано, увидев «лидера» на малой выборке. Разница должна быть статистически значимой — иначе вы просто подбрасываете монетку с уверенным лицом.
Direct Manager включает A/B-тесты объявлений со встроенной проверкой значимости (z-тест): система сама скажет, когда данных достаточно и какой вариант действительно победил, а не показался победителем.
Связанные термины
Читайте в блоге
Нейросеть для рекламы: как писать объявления Яндекс Директа с ИИ
Нейросеть помогает писать тексты объявлений для Яндекс Директа быстрее, но сама по себе не гарантирует результат. Разбираем, что реально доверить ИИ, как формулировать промпты и почему текст — это только половина эффективной рекламы.