Настройка A/B тестирования рассылок Битрикс24
A/B тестирование рассылок в Битрикс24 — это встроенный инструмент модуля sender, позволяющий сравнивать варианты темы письма, отправителя или контента на подвыборке аудитории, а затем автоматически рассылать победивший вариант остальным подписчикам. Звучит просто, но конфигурация влияет на статистическую достоверность результата — если тест настроен неаккуратно, «победитель» окажется случайным.
Механика A/B теста в модуле sender
При создании рассылки переходим в настройки кампании и активируем режим «A/B-тест». Битрикс24 позволяет тестировать:
- Тему письма (
SUBJECT) - Имя отправителя (
FROM_NAME) - Содержимое письма (разные шаблоны)
Аудитория делится на группы: можно задать долю каждой тестовой группы в процентах от общей базы. Например, 15% получают вариант A, 15% — вариант B, оставшиеся 70% ждут «победителя». Победитель определяется по метрике: Open Rate или Click Rate. Время ожидания до подведения итогов — настраиваемый параметр в часах.
Данные по открытиям и кликам собираются через трекинг-пиксель и редирект-ссылки. Пиксель встраивается в шаблон автоматически — это однопиксельное изображение, запрос к которому фиксируется в b_sender_mailing_chain_table. Клики отслеживаются через редирект с UTM-метками через домен портала.
Статистическая достоверность: что часто игнорируют
Главная ошибка при настройке A/B теста — слишком маленькая тестовая выборка или слишком короткое окно ожидания. Если база 500 человек, а тестовая группа 10% — в каждом варианте 25 адресатов. Разница в одном открытии между вариантами — это 4% разницы Open Rate, статистически ничего не значит.
Минимальная выборка для каждого варианта — около 100 получателей, чтобы можно было говорить о тенденции. Для результатов с p<0.05 нужно больше. Встроенные инструменты Битрикс24 не показывают p-value — просто выбирают «больший» показатель. Для серьёзного тестирования экспортируем данные из b_sender_mailing_chain_table и считаем z-тест вручную или через сторонний инструмент.
Время ожидания. Open Rate в значительной мере формируется в первые 24–48 часов. Устанавливать окно менее 4 часов — значит мерять только тех, кто проверяет почту утром. Оптимально: 24 часа на будние дни, 48 часов если рассылка попадает на выходные.
Настройка UTM-меток и аналитики
По умолчанию ссылки в письмах Битрикс24 получают UTM-метки вида utm_source=bitrix24&utm_medium=email. Для A/B тестирования критично разделять трафик по вариантам. Настраиваем кастомные UTM в шаблоне вручную или через системные переменные:
utm_source=email&utm_medium=newsletter&utm_campaign=promo_march&utm_content=variant_a
Вариант B получает utm_content=variant_b. Это позволяет сравнивать не только открытия и клики внутри Битрикс24, но и поведение на сайте в Google Analytics / Яндекс.Метрике — конверсии, глубину просмотра, достижение целей.
Этапы настройки
- Проверка базы подписчиков: актуальность, отсутствие дублей, корректность сегментации
- Определение гипотезы теста и метрики победы (Open Rate vs Click Rate)
- Расчёт необходимой выборки под целевой размер эффекта
- Подготовка вариантов A и B (тема или шаблон)
- Настройка кампании в модуле
sender: доля групп, время ожидания, критерий победы - Проверка трекинга: тестовая отправка с проверкой пикселя и редиректов
- Запуск, мониторинг, анализ результатов
| Задача | Срок |
|---|---|
| Настройка одного A/B теста | 2–4 часа |
| Настройка серии тестов с аналитикой | 1–3 дня |
Стоимость рассчитывается индивидуально.