Измерение маркетинга: атрибуция по путям, перенос рекламы, оптимум бюджета, ценовой тест, NPS и реферальная награда
Документ объясняет, как проверить, что маркетинговые деньги работают: чем атрибуция отличается от причинности, как учесть эффект рекламы на следующие недели, как распределить бюджет между каналами по предельной отдаче. Также показано, как решать ценовой тест по прибыли на посетителя и как отличать значимое изменение NPS от шума. Решение, которое он поддерживает: куда двигать бюджет и каким цифрам доверять.
Зачем этот документ
Маркетинг легко подтвердить любым отчётом: у каждого канала найдётся модель, где он лучший. Документ задаёт дисциплину: сначала смотреть, насколько оценка зависит от модели, потом проверять экспериментом, а деньги распределять по предельной отдаче, а не по средней. Читают маркетолог, аналитик, финансовый директор и руководитель клиентского опыта. Единых нормативов отдачи нет, все параметры берутся из ваших данных и обновляются каждый квартал.
Коротко
- Что это за документ и зачем он нужен?
- Документ объясняет, как проверить, что маркетинговые деньги работают: чем атрибуция отличается от причинности, как учесть эффект рекламы на следующие недели, как распределить бюджет между каналами по предельной отдаче. Также показано, как решать ценовой тест по прибыли на посетителя и как отличать значимое изменение NPS от шума. Решение, которое он поддерживает: куда двигать бюджет и каким цифрам доверять.
- Кто отвечает за документ и как часто его пересчитывать?
- Бренд и ритейл: аналитик собирает данные и расчёты, маркетолог предлагает бюджет, финансовый директор утверждает; пересчёт параметров каждый квартал.
- Какие ошибки встречаются чаще всего?
- Принимать атрибуцию за причинность → канал мог не повлиять на заказ → проверять тестом против контроля. Сравнивать каналы при разных окнах наблюдения → оценки несопоставимы → единое окно. Брать короткий ряд для переноса → λ случайна → ряд не короче 26 недель, очищенный от сезонности и цены.
Для кого
- Бренд
- Бренд видит больше каналов и дольше эффект: перенос рекламы и оптимум бюджета важнее, чем у магазина.
- Ритейл
- Ритейл ближе к кассе: ценовой тест и атрибуция на своём сайте дают быстрый ответ, а влияние рекламы на магазины смотрите через контроль.
Из чего состоит
Атрибуция делит заслугу, но не доказывает причинность
- Таблица путей даёт последовательность каналов до заказа и ценность заказа. Модели делят ценность по разным правилам: последний клик отдаёт всё последнему касанию, первый клик первому, линейная поровну. Позиционная 40/20/40 даёт 40 % первому и последнему и 20 % делит между средними, с затуханием вес касания равен 0,5 в степени «возраст ÷ период полураспада».
- Расхождение моделей по каналу показывает, насколько оценка зависит от правила. Если канал выигрывает во всех моделях, оценка надёжна по правилам; если скачет, решение без эксперимента ненадёжно. Но даже согласованная атрибуция не доказывает, что канал дал заказ.
- После ограничений на рекламные системы данные неполны: часть касаний вне цифрового следа. Сравнивайте каналы при одинаковых окнах наблюдения и не режьте бюджет «первого касания» по одной модели.
Перенос рекламы и период полураспада
- Эффект недели = затраты недели + доля переноса × эффект прошлой недели. Период полураспада = ln 0,5 ÷ ln λ, полный эффект рубля = 1 ÷ (1 − λ). Для телевидения, наружной рекламы и блогеров перенос заметен, для поисковой рекламы почти нулевой.
- Для подбора доли переноса нужен ряд продаж не короче 26 недель, очищенный от сезонности, цены и акций; расчёт перебирает значения от 0 до 0,9 и берёт то, при котором регрессия продаж на накопленный эффект объясняет больше всего. Короткий или неочищенный ряд даёт случайное значение.
Оптимум бюджета по предельной отдаче
- Отдача канала описывается кривой a × (1 − e^(−затраты ÷ b)): a это предел выручки, b масштаб затрат. Предельная отдача = маржа × (a ÷ b) × e^(−затраты ÷ b) показывает, сколько маржи даёт следующий рубль. Бюджет шагами идёт в канал с наибольшей предельной отдачей, пока она выше единицы.
- Деньги, у которых предельная отдача ниже единицы, не тратятся: они остаются в компании. Параметры a и b это гипотеза из подгонки по прошлым данным; обновляйте их каждый квартал и не распространяйте оптимум на затраты вне наблюдавшегося диапазона. Связь каналов (бренд и органика) расчёт не видит.
Ценовой тест по прибыли на посетителя
- Прибыль на посетителя = конверсия × (цена ÷ (1 + НДС) − себестоимость). Дорогой вариант почти всегда получает меньше заказов, но может зарабатывать больше, поэтому решение принимают по прибыли, а не по числу заказов. Значимость считают отдельно по конверсии и по прибыли: z по прибыли = разность ÷ √(SE_A² + SE_B²).
- Тест короче недели не усредняет колебания по дням, при менее чем ста заказах в варианте оценки шаткие. Тестируйте цену на своём сайте: площадки ограничивают A/B цены.
NPS с интервалом и награда за друга
- NPS = промоутеры − критики; разброс σ² = (П + Д − (П − Д)²) ÷ n, интервал NPS ± z × σ. Изменение значимо, если |z| = |NPS₂ − NPS₁| ÷ √(σ₁² + σ₂²) не меньше квантиля уровня доверия. При малых выборках интервал широк, и рост на несколько пунктов лежит в пределах шума.
- Реферальная награда платится всем законным рефералам, а пользу приносят инкрементальные: безубыточная награда = инкрементальные × маржа за время жизни ÷ законные. Платите после первой оплаченной покупки; налоговый режим выплат физическим лицам проверяет специалист.
Откуда берутся данные
| Источник данных | Поля |
|---|---|
| Системы аналитики и CRM | пути клиентов с каналами и ценностью заказа, затраты по каналам и неделям, продажи по неделям |
| Подгонка кривых отдачи | параметры a и b каналов, маржа с выручки, минимальные затраты |
| Сайт и опросы | посетители и заказы по вариантам цены, доли промоутеров и критиков, число ответов |
Как собрать по шагам
- Шаг 1: Соберите пути клиентов и посчитайте ценность по каналам в пяти моделях.
- Шаг 2: Найдите каналы, у которых оценка скачет между моделями, и назначьте для них эксперимент.
- Шаг 3: Для каналов с долгим эффектом посчитайте накопленный эффект и период полураспада.
- Шаг 4: Подгоните кривые отдачи с накопленным эффектом и получите параметры a и b.
- Шаг 5: Распределите бюджет шагами по предельной отдаче и найдите, сколько не окупается.
- Шаг 6: Проверьте цену тестом не короче недели и решайте по прибыли на посетителя.
- Шаг 7: Докладывайте NPS с интервалом и числом ответов, изменение объявляйте только значимое.
- Шаг 8: Обновляйте параметры каждый квартал и сравнивайте план с фактом.
Формулы
| Показатель | Формулы | Пояснение |
|---|---|---|
| Предельная отдача канала | маржа × (a ÷ b) × e^(−затраты ÷ b) | Остановка, когда меньше 1. |
| Накопленный эффект рекламы | A_t = x_t + λ × A_(t−1); полураспад = ln 0,5 ÷ ln λ | Полный эффект рубля = 1 ÷ (1 − λ). |
| Прибыль на посетителя | конверсия × (цена ÷ (1 + НДС) − себестоимость) | Решение по прибыли и её z. |
Формулы в записи
- Накопленный эффект
A_t = x_t + \lambda A_{t-1}
x: затраты недели, λ: доля переноса.
Пример с числами
Условные данные: бюджет 20 млн ₽, три канала; ценовой тест 3 990 ₽ против 4 490 ₽
| Показатель | Значение |
|---|---|
| Потрачено по оптимуму, млн ₽ | 6,00 |
| Прибыль по оптимуму, млн ₽ | 1,06 |
| Прибыль при равном делении, млн ₽ | −2,11 |
| Прибыль на посетителя A, ₽ | 47,06 |
| Прибыль на посетителя B, ₽ | 52,65 |
| z по прибыли | 1,96 |
Нераспределённые 14 млн ₽ остаются в компании: рубль в них не окупается. z по прибыли на границе значимости 1,96. Все числа условные.
Рисунки
- Оптимум
- Равное деление
Данные таблицей
| Показатель | Оптимум | Равное деление |
|---|---|---|
| Поиск | 3,25 | 6,67 |
| Соцсети | 1,75 | 6,67 |
| Площадка | 1 | 6,67 |
Бюджет по каналам: оптимум и равное деление. Оптимум тратит меньше и только там, где рубль окупается.
- Затраты недели
- Накопленный эффект
Данные таблицей
| Показатель | Затраты недели | Накопленный эффект |
|---|---|---|
| 1 | 100 | 100 |
| 2 | 0 | 60 |
| 3 | 0 | 36 |
| 4 | 50 | 71,6 |
| 5 | 0 | 43 |
| 6 | 0 | 25,8 |
| 7 | 0 | 15,5 |
Затраты и накопленный эффект по неделям. Эффект затухает постепенно и накладывается на следующий выпуск рекламы.
Особенности по категориям
- Одежда
- Одежда: много размеров и сезонность, поэтому выкуп, интервалы покупок и индексы дней считайте по сезонам.
- Обувь
- Обувь: выкуп ниже из-за примерки, и обратная логистика заметно меняет стоимость выкупленной единицы.
- Аксессуары
- Аксессуары: чек мал, пары с одеждой дают подъём; порог доставки и комплекты работают сильнее.
- Детское
- Детское: частые докупки по росту, интервалы между покупками короче, порог ушедшего ниже.
- Мужское
- Мужское: устойчивый базовый ассортимент, реже покупки, порог ушедшего длиннее.
- Женское
- Женское: больше новинок и сезонных всплесков; индексы дней и подъём пар считайте отдельно по сезонам.
Типичные ошибки
- Принимать атрибуцию за причинность → канал мог не повлиять на заказ → проверять тестом против контроля.
- Сравнивать каналы при разных окнах наблюдения → оценки несопоставимы → единое окно.
- Брать короткий ряд для переноса → λ случайна → ряд не короче 26 недель, очищенный от сезонности и цены.
- Использовать параметры одного периода → оптимум устаревает → обновлять каждый квартал.
- Решать ценовой тест по числу заказов → дорогой вариант недооценён → решать по прибыли на посетителя.
- Сравнивать NPS без интервала → шум принимают за рост → считать z и интервал.
Особенности России
- Реклама подлежит маркировке, данные о клиентах персональные: используйте агрегаты и согласие. Выплаты физическим лицам в реферальной программе проверяет специалист по налогам.