Решения по закрытому окну · факты и оценки разделены
Итог эксперимента · 07–20 августа

Розыгрыш дал рост только вместе с пушами и баннером.

+26%

Участники заходили чаще контроля.
За 14 дней получили +1 804 дополнительных дня посещений.

РешениеМасштабировать доставку повода. Сам розыгрыш пока не усложнять.
Что сделали

Запустили розыгрыш на 5 012 человек и сравнили результат с контрольной группой.

Что получили

Участники заходили в приложение на 26% чаще. Это +1 804 дополнительных дня посещений.

Почему

Рост дали пуши и баннер. Без коммуникаций эффект почти исчезал. Сам розыгрыш привычку не сформировал.

Главная проблема

До механики дошли только 316 человек, то есть 6,3% группы. Упёрлись в охват, согласия на уведомления и невозможность быстро показывать разным группам разный контент.

Что дальше

Расширить доставку, переделать сбор согласий, настроить сегментацию и каждую неделю проверять один канал или повод. Розыгрыш пока не усложнять.

x1,26дней с заходом к контролю за цикл
5 012человек в экспериментальной когорте
316дошли до механики, 6,3% когорты
8,3 ₽стоимость дополнительного дня захода

Где появился эффект

До экспериментаx0,97
Раздел без касанийx1,01
Пуши и баннерx1,50
После снижения касанийx1,11

Продуктовый ответ

Следующая ставка: доставка повода

Баннер, согласия, сегментные тексты и дополнительные каналы важнее нового типа билета или более сложного розыгрыша.

Не путать разовый заход с удержанием

Эффект касания живёт около двух дней. После него поведение возвращается к контролю.

Методика и ограничения
Экспериментальная группа: 5 012 человек. Контроль: 4 988. Окно: 07-20.08. Эксперимент дал +1 804 дополнительных дня посещений, z = 15,3. Механическая экстраполяция на всю базу не считается прогнозом, потому что когорта отобрана по частоте заходов.