ЭКСПЕРИМЕНТЫ С МОНЕТИЗАЦИЕЙ · SIMPLE
Доказать uplift, а затем масштабировать рычаг.
Автор: Андрей ВолкРоль в компании: Product Lead, CRM & Lifecycle · Simple · 2022–2026
С помощью holdout отделить инкрементальный рост подписок от атрибуции, а затем масштабировать работающий подход.
Ключевой результат: +8% относительно · инкрементальный uplift
Я предположил, что ретаргетинговые письма могут увеличить число подписок после онбординга. Сначала нужно было понять, какая часть этой конверсии действительно инкрементальна.
Я спроектировал holdout-эксперимент 50/50 примерно на 20 000 пользователей. С ретаргетингом конверсия в подписку достигла 8,40% против 7,77% без цепочки — статистически значимый относительный uplift на 8%. Около 95% подписок после ретаргетинга происходили в первый день, что помогло сформировать следующие итерации.
- конверсия в подписку
- 7,77% → 8,40%
- инкрементальный uplift
- +8% относительно
- пользователей в holdout
- ~20 тыс.
Затем масштабировать то, что сработало.
Через серию экспериментов ретаргетинг стал одним из сильнейших рычагов монетизации сразу после онбординга. Доля подписок, атрибутированных CRM, выросла примерно с 4% до более чем 10% — почти втрое. Holdout дал уверенность, что канал создавал инкрементальную ценность, а не просто присваивал конверсии, которые произошли бы и без него.