Понедельник, утро. Открываете отчет по сценариям в Mindbox — и половина стрелок красные. CTR просел, конверсия из клика ниже, чем на прошлой неделе, по welcome-цепочке вообще грустно. Первая реакция — все остановить и пересобирать. Вторая, более редкая, — разобраться, что именно показывает платформа.
Спойлер: красные стрелки в отчете часто означают шум, а не провал. Сегмент стал шире, сместилась сезонность, к email добавились пуши — и метрики канала просели, хотя кампания в деньгах работает как работала. Бывает и наоборот: канал зеленый, а инкрементальной выручки ноль.
«SMS дорожают, приложение стоит миллионы, а браузерные пуши собираются прямо с сайта. Разбираем механику канала в Mindbox, экономику против SMS и сценарии, где пуш выигрывает.»
Mindbox веб-пуши: как запустить канал без приложения и когда он заменяет SMSКак отличить одно от другого — показывает Дарья Касаткина, CRM-маркетолог ClientCore. Она каждую неделю разбирает mindbox аналитику кампаний у клиентов агентства и знает, где платформа говорит правду, а где — удобную для себя интерпретацию.
Что Mindbox вообще считает результатом сценария
Отчет по сценарию показывает воронку: сколько сообщений отправлено, доставлено, открыто, сколько было кликов, конверсий и какая выручка за этим стоит. Если сценарий многошаговый — письмо, потом пуш, потом еще одно письмо — воронку можно развернуть по шагам и увидеть, на каком именно люди выходят из цепочки.
Ключевой момент — логика атрибуции. Конверсия здесь означает: человек кликнул или открыл сообщение и в течение окна атрибуции оформил заказ. Платформа честно записывает этот заказ на кампанию. Даже если клиент и так шел покупать, а письмо просто попалось по пути в корзину. Конверсия из клика красивая, отчет зеленый, а реальный вклад сценария — около нуля.
Второй момент — само окно атрибуции. Чем оно длиннее, тем больше заказов прилипает к кампании, включая те, что случились бы без нее. На окне в 7 дней цифры всегда симпатичнее, чем на окне в сутки. Сравнивать отчеты с разными окнами — все равно что сравнивать вес в килограммах и фунтах: числа есть, смысла нет.
Uplift: цифра, которая показывает реальный вклад сценария
Чтобы понять, что сценарий дает на самом деле, нужна контрольная группа — часть аудитории, которой коммуникация не уходит вовсе. Разница между конверсией тех, кто получил письмо, и тех, кто не получил, — это и есть uplift. В Mindbox контрольную группу задают глобально на проект (обычно 5–10% базы) или внутри конкретной кампании. Дальше смотрите отчет по эксперименту: конверсия тестовой группы, конверсия контрольной, разница в процентах и в деньгах.
Контроль действительно не должен получать ничего. Если «контрольная» группа ловит пуши из соседнего сценария или массовые рассылки, измерение грязное — и разница между группами ничего не значит.
Дарья Касаткина
CRM-маркетолог, ClientCore
Откуда берется шум в канале
«Красное» в отчете имеет свойство появляться по причинам, которые к качеству кампании отношения не имеют:
- Расширился сегмент. Раньше письмо уходило 20 тысячам теплых подписчиков, теперь — 60 тысячам с холодным хвостом. CTR упал вдвое, а выручка выросла, потому что охват больше.
- Сезонность. Сравнение недели к неделе в апреле для товаров с новогодним пиком бессмысленно по определению.
- Каннибализация каналов. Добавили пуши — клики в email просели, потому что часть людей теперь приходит из пушей. Канал покраснел, сценарий в деньгах вырос.
- Смена времени отправки или темы. Метрики прыгают пару недель, потом стабилизируются на новом уровне.
Проверка простая: сравнивать с тем же периодом прошлого года или со скользящим средним, смотреть выручку на подписчика и на отправку, разворачивать воронку и искать, где именно обрыв.
Мы через это проходили сами. У MINIDINO рассылки уходили всей базе без сегментов — охваты большие, метрики канала приличные. Мы пересобрали логику: сегменты, точность вместо охвата. Отправок стало меньше, охват ниже — по канальным отчетам «просадка». По деньгам — +110% к эффективности email за квартал (кейс). Смотри только на стрелки в канале — и остановишь рабочую перестройку на середине.