# Расчет uplift как услуга: зачем заказывать измерение прироста, если у вас уже есть аналитик

> CRM-отдел приносит отчет о приросте, финансы ему не верят. Почему внутренние измерения смещаются в пользу канала и как независимый расчет снимает спор.

**Рубрика:** Статьи  
**Автор:** Василина Бреусенко, CRM-маркетолог, ClientCore  
**Дата:** 2026-10-31

Квартальное совещание, слайд с CRM-выручкой. Маркетинг показывает +18% от рассылок, финансовый директор спрашивает: «А сколько из этого клиенты купили бы и так?» В зале пауза. Аналитик что-то считал, holdout вроде бы был, но методику никто, кроме него, не видел. Бюджет на канал в итоге режут «до выяснения», и полгода работы превращаются в предмет торга.

Такое случается даже в компаниях с сильной командой и настроенным Mindbox. Проблема почти никогда в квалификации аналитика. Внутреннее измерение по своей природе смещено в пользу канала: его делает сторона, которая этот канал защищает, на данных, которые этот канал же и генерирует. Где именно копится смещение и почему внешний расчет uplift выигрывает в споре с финансами, объясняет Василина Бреусенко, CRM-маркетолог ClientCore.

> **Читайте также:** [Оценка эффективности CRM-маркетинга: как независимо проверить, приносит ли канал деньги](https://clientcore.ru/blog/articles/ocenka-effektivnosti-crm-marketinga-kak-nezavisimo-proverit-prinosit-li-kanal-dengi)

## Почему финансы не верят цифрам CRM-отдела

У финансового директора простая логика. Ему нужна инкрементальная выручка: деньги, которые появились только потому, что ушло письмо, пуш или SMS. Отчет по атрибуции в CRM-платформе показывает другое — все заказы, совершенные в окне после контакта. Постоянный клиент открыл письмо и через два дня купил свой привычный кофе — атрибуция запишет покупку на рассылку, хотя он пришел бы в любом случае.

Разница между этими цифрами бывает кратной. В базах с высокой долей лояльных покупателей атрибутированная выручка легко превышает реальный прирост в 3–5 раз. Финансисты это интуитивно чувствуют, поэтому любая цифра из CRM-отдела для них по умолчанию завышена, пока не доказано обратное.

Дальше включается конфликт интересов. Маркетинг заинтересован, чтобы инкрементальность рассылок выглядела высокой: от нее зависят бюджет, штат, KPI. Даже если аналитик предельно честен, у финансов нет способа это проверить. Каждое методологическое решение — какой взять период, кого исключить из выборки, как обработать выбросы — выглядит потенциальной подгонкой.

> Чаще всего спор упирается в одну фразу финдиректора: „Вы сами себя проверяли“. Аналитик может сделать все безупречно, но если он сидит в отделе маркетинга и отчитывается тому же руководителю, что и CRM-менеджер, его расчет воспринимают как позицию стороны. Мы видели проекты, где один и тот же uplift финансы принимали только после того, как его пересчитал кто-то снаружи».
>
> — Василина Бреусенко, CRM-маркетолог, ClientCore

## Где ломается дизайн эксперимента

Holdout группа выглядит простым инструментом: отложили часть базы, ничего ей не отправляли, сравнили покупки. На практике ошибки закладываются еще до первой отправки, и потом их уже не исправить пересчетом.

Первая типовая ошибка — размер контрольной группы. Ее делают в 1–2%, чтобы «не терять выручку». При базе в 300 тысяч активных клиентов и конверсии в покупку около 3% такой контроль дает несколько сотен покупателей. Доверительный интервал у прироста получается шире самого прироста. Результат «+12%» на деле значит «где-то от −5% до +29%», и любой внимательный финансист это заметит.

Вторая — неслучайное формирование групп. Контроль собирают из тех, кто «все равно не открывает письма», или исключают из него VIP-сегмент, «чтобы не рисковать». После этого группы различаются еще до эксперимента, и сравнение теряет смысл. Третья — отсутствие A/A-проверки: никто не убедился, что до старта группы покупали одинаково.

**Норма**

- размер holdout рассчитан под ожидаемый эффект и мощность теста, обычно 5–10% базы
- распределение случайное, по ID клиента, фиксируется до старта
- проведена A/A-проверка на исторических данных за 2–3 месяца
- метрика и окно измерения записаны заранее

**Red flag**

- контроль в 1% «чтобы не терять деньги»
- из holdout вручную убрали ценные сегменты
- метрику выбрали после того, как увидели результаты
- период сравнения меняли, пока цифра не стала красивой

## Контаминация: когда контрольная группа получает коммуникации

Самая коварная проблема, потому что ее не видно в отчете. Формально holdout исключен из конкретной кампании. Но в Mindbox или любой другой платформе одновременно крутятся десятки сценариев: триггеры брошенной корзины, welcome-цепочка, реактивация, сервисные письма, пуши из приложения, SMS от программы лояльности. Если исключение настроено на уровне одной рассылки, контрольный клиент получает все остальное.

В итоге сравнивают группу, которой пришло 12 сообщений за месяц, с группой, которой пришло 9. Разница в выручке между ними маленькая, и команда делает вывод, что канал работает слабо. Бывает и обратное: в контроль попадают клиенты, которых параллельно греет другая команда, например офлайн-магазины с личными звонками от продавцов. Тогда эффект CRM занижается, а маркетинг теряет аргументы.

Контаминация бывает и косвенной. Клиент из holdout видит акцию на сайте, в соцсетях, у подруги в пересланном письме. Полностью это не устранить, но масштаб нужно оценить и честно указать в отчете. Финансы гораздо спокойнее принимают цифру с прописанными ограничениями, чем идеальную цифру без них.

> На аудите мы первым делом выгружаем полную историю коммуникаций по контрольной группе. Почти всегда находим каналы, которые в исключение не попали. Самый частый случай — сервисные и транзакционные сценарии, в которые кто-то когда-то добавил промоблок со скидкой. Формально письмо сервисное, по факту оно продает, и контроль его получает».
>
> — Василина Бреусенко, CRM-маркетолог, ClientCore

## Сезонность и окно измерения

Многие внутренние расчеты строятся по схеме «до и после»: сравнивают выручку месяца с запущенной механикой и месяца без нее. Для финансов такой расчет почти ничего не стоит. Ноябрь всегда сильнее октября, декабрь — сильнее ноября, а январь проваливается при любой CRM-стратегии.

Даже при наличии holdout сезонность влияет на результат. В пиковые периоды прирост от рассылок часто падает: люди и так покупают, конкуренция за внимание во входящих высокая. В низкий сезон, наоборот, коммуникация может давать заметный эффект. Это хорошо видно на механиках, которые специально запускают против спада. Ресторанам «Урюк» розыгрыш сертификатов через email помог вернуть предновогодний трафик, а выручка от акции оказалась в 20,7 раза выше затрат на призовой фонд ([кейс](https://clientcore.ru/blog/articles/keis-uryk-rozygrysh-sertifikatov)). Если оценивать такую механику на годовом окне, эффект размоется. Если только на пике, он завысится.

Есть еще эффект новизны и эффект смещения покупок. Новая цепочка первые недели дает всплеск, потом прирост оседает. А часть «дополнительных» заказов оказывается просто перенесенной вперед: клиент купил бы через три недели, но купил сейчас. Без окна наблюдения в 6–12 недель после кампании и анализа последующих покупок uplift расчет показывает смещение спроса и выдает его за прирост.

**Норма**

- сравнение тест/контроль в одном и том же периоде
- окно последействия, в котором проверяют, не упали ли покупки после кампании
- отдельные оценки для пикового и низкого сезона
- uplift постоянных сценариев отслеживают помесячно на длинном holdout

**Red flag**

- «в этом месяце выручка выше, чем в прошлом, значит, механика работает»
- окно измерения обрывается через 7 дней после отправки
- результат Черной пятницы экстраполируют на весь год

## Почему внутренний аналитик не справляется в одиночку

Здесь легко скатиться в обвинения, а виноватых нет. Штатный аналитик в mid-market компании обычно закрывает дашборды, выгрузки для категорийщиков, отчеты для собственника, иногда еще и прогноз продаж. Экспериментальная методология для него одна задача из пятнадцати. Строить дизайн, считать мощность, проверять контаминацию по всем каналам ему просто некогда.

Вторая причина — доступ и контекст. Чтобы найти утечку в holdout, нужно знать, как устроены сценарии в CRM-платформе: где стоят фильтры, как работают глобальные исключения, какие триггеры игнорируют общие правила. Аналитик видит итоговые таблицы, настройки он не видит. Внешняя команда, которая сама собирает сценарии в Mindbox, находит такие вещи за пару дней.

Третья причина — отсутствие второго мнения. Внутри компании расчет uplift никто не ревьюит. Ошибку в формуле или неудачный выбор метрики некому заметить, пока ее не найдет финансист на совещании. Тогда страдает репутация всей CRM-функции.

> Мы не забираем у аналитика работу. Обычно мы с ним в одной связке: он знает данные компании, мы — механику экспериментов в CRM и типовые места, где они ломаются. За первые две недели совместной работы аналитик получает методику, которую дальше может применять сам. Финансам же важно, что первичный расчет сделала сторона без интереса в результате».
>
> — Василина Бреусенко, CRM-маркетолог, ClientCore

## Что входит в независимый расчет uplift

В нашей практике услуга по расчету uplift складывается из четырех этапов, и каждый закрывает конкретное возражение финансов.

Сначала аудит данных и настроек: как формируются группы, какие сценарии пробивают исключения, совпадают ли заказы в CRM с данными учетной системы. Расхождение в 5–7% между выручкой в платформе и в 1С встречается часто, и его нужно объяснить до любых выводов.

Затем дизайн или редизайн эксперимента: размер групп, рандомизация, метрики, окна, правила остановки. Если исторический holdout пригоден, считаем на нем. Если нет — честно говорим, что прошлые цифры не доказательны, и запускаем новый.

Дальше сам расчет: инкрементальная выручка, прирост маржи, доверительные интервалы, разбивка по сегментам и сценариям. Последний шаг — отчет, понятный человеку, который не работает с CRM. В нем прописаны допущения, ограничения и то, что именно цифра доказывает. Расчет uplift как услуга ценен в первую очередь этим документом: финансы могут его оспорить по пунктам, и каждый пункт выдерживает проверку.

## Как результат меняет разговор с финансами

Когда у компании есть независимо посчитанный прирост, спор о бюджете превращается в разговор об экономике. Финансы видят, сколько маржи приносит каждый сценарий, и могут сравнить это со стоимостью команды и платформы. Маркетинг перестает защищать канал целиком и начинает обсуждать конкретные механики.

Часто честный расчет показывает неприятное: часть массовых рассылок дает около нуля инкрементальной выручки, а иногда уходит в минус из-за отписок и выгорания базы. Это неудобный вывод, но он открывает рост. Когда в MINIDINO перестали отправлять письма всей базе без сегментов и сделали ставку на точность, эффективность email выросла на 110% за квартал без увеличения числа отправок ([кейс](https://clientcore.ru/blog/articles/keis-minidino-rost-effektivnosti-email)). Логика та же, что в измерении инкрементальности: важно, сколько сообщение добавило, объем отправок вторичен.

Еще один эффект — доверие на будущее. После первого внешнего расчета финансы обычно соглашаются на постоянный глобальный holdout и регулярную отчетность по нему. CRM-функция получает понятный KPI, а новые механики запускаются с заранее согласованной методикой оценки. Споры «верю — не верю» уходят, вместо них появляется обсуждение, куда вложить следующий рубль.

> **Читайте также:** [Расчет LTV как услуга: зачем заказывать модель ценности клиента и что делать с результатом](https://clientcore.ru/blog/articles/raschet-ltv-kak-usluga-zachem-zakazyvat-model-cennosti-klienta-i-chto-delat-s-rezultatom)

---

[Открыть статью на сайте](https://clientcore.ru/blog/articles/raschet-uplift-kak-usluga-zachem-zakazyvat-izmerenie-prirosta-esli-u-vas-uzhe-est-analitik)