CRM и ретеншн

Контрольная группа: как понять, что кампания сработала

Контрольная группа это случайная часть сегмента, которая не получает кампанию. Разница в результате между группой с кампанией и контрольной показывает настоящий эффект (uplift), а не игроков, которые пришли бы и так.

Yevhen SychovПо-английски: Control groupОктябрь 2026

Формула и пример

Эффект (uplift) = результат группы с кампанией минус результат контрольной группыРеактивационный оффер: вернулись 8% получивших и 3% контрольной группы. Эффект 5 процентных пунктов, а не 8%.

В деньгах так же: депозиты и GGR группы с кампанией минус контрольная группа минус стоимость бонусов. Если результат меньше нуля, кампания стоит дороже, чем приносит.

Размер и деление

  • Случайно, а не "кто не открыл письмо" и не "другая страна". Иначе группы отличаются не только кампанией.
  • Достаточно игроков: обычно 5-10% сегмента, но не меньше нескольких сотен человек. На маленьких группах разница бывает случайной.
  • Общий холдаут: небольшая доля базы, которая месяцами не получает никаких кампаний. Показывает вклад CRM целиком.

Где ошибаются

  • Сравнивают с прошлым месяцем. Сезон, трафик и релизы меняют результат сильнее кампании.
  • Считают всех вернувшихся заслугой оффера. Часть игроков вернулась бы без него, и бонус им был не нужен.
  • Убирают контроль, когда кампания "точно работает". Эффект со временем меняется, контроль нужен постоянно.
Все термины глоссария