Ценность прогноза по этапам и цена ошибки в рублях: ассортимент сезона
По группам ассортимента сравнивает три прогноза одного сезона: наивный (повтор прошлого сезона), модель (статистика или ИИ) и итог после ручных правок. Считает ошибку WAPE и смещение каждого этапа, ценность каждого шага (FVA) и переводит ошибку в рубли: перепрогноз стоит скидки и хранения, недопрогноз стоит потерянной маржи. Определения WAPE, смещения и FVA даны в расчёте «Точность прогноза по неделям» (fcdash); здесь главное это цена ошибки и этапы.
Коротко
- Какой вопрос решает расчёт?
- Какой этап прогноза добавляет точность (модель или ручные правки), насколько он смещён и сколько рублей стоит ошибка в виде скидок на излишек и потерянной маржи.
- Какие данные нужны?
- Прогнозы по группам ассортимента, зафиксированные до сезона: наивный, модельный и итоговый.
- Как читать результат?
- Пример на значениях по умолчанию (шесть групп, цена 6 000 ₽, себестоимость 2 400 ₽): WAPE наивного 11,4 %, модели 6 %, итога после правок 8,1 %; FVA модели 5,4 п. п., ручных правок −2,1 п. п.; модель сэкономила 856 800 ₽, правки добавили потерь 386 400 ₽. Пример на значениях по умолчанию: WAPE наивного прогноза: 11,4 %; WAPE модели: 6 %; WAPE итога после правок: 8,1 %; Смещение наивного: −2,3 %. Цифры условные: введите свои, чтобы увидеть свой результат.
Зачем и как рассуждать
Точность прогноза обычно считают одним числом и не знают, откуда она взялась. Но прогноз делается в несколько шагов: прошлый сезон как отправная точка, модель (статистика или ИИ), затем согласования и ручные правки. Каждый шаг должен делать прогноз лучше предыдущего, иначе он только отнимает время. Поэтому сравнивают этапы на одних группах и фактах: ошибка WAPE равна сумме модулей отклонений, делённой на сумму продаж, а ценность шага (FVA) равна ошибке до него минус ошибка после. Второй вопрос: сколько стоит ошибка. Излишек уходит в распродажу со скидкой и занимает склад, нехватка теряет маржу несостоявшихся продаж. В примере наивный прогноз ошибается на 11,4 %, модель на 6 %, итог после правок на 8,1 %: модель добавила 5,4 п. п., правки отняли 2,1 п. п., а в рублях модель сэкономила 856 800 ₽, правки добавили потерь на 386 400 ₽.
Когда применять
Применяйте после сезона, когда есть факт, и перед следующим планом: чтобы решить, чему доверять в новом прогнозе и где допустимы ручные правки. Нужны прогнозы, зафиксированные до сезона. Не подходит для новых моделей без истории и для групп, где почти не было продаж. Считайте по группам одного уровня: SKU и категории смешивать нельзя.
Как читать результат
Смотрите на три пары чисел. Первая: WAPE и смещение каждого этапа; большое смещение при малой ошибке значит, что прогноз ошибается в одну сторону. Вторая: FVA шагов; плюс значит, что шаг помогает, минус значит, что его стоит убрать или переделать. Третья: цена ошибки в рублях. В примере итог после правок смещён на +7,5 %: правки систематически завышали план, и в четырёх группах из шести итог оказался хуже модели. Решение: оставлять правку только там, где за ней есть новая информация (контракт, акция, смена канала), и фиксировать, кто и почему её внёс.
Типичные ошибки
Считают ошибку в штуках, а не в рублях: перепрогноз и недопрогноз стоят по-разному. Сравнивают с прогнозом, пересчитанным задним числом. Берут факт продаж при нехватке товара: спрос на деле был выше. Делают вывод по одной группе. Берут условные цену и скидку как свои: подставьте данные прошлых сезонов.
Какие данные нужны?
- Прогнозы по группам ассортимента, зафиксированные до сезона: наивный, модельный и итоговый.
- Факт продаж по тем же группам за сезон (лучше спрос с учётом нехватки товара).
- Цена, себестоимость, средняя скидка распродажи, стоимость хранения и доля безвозвратно потерянного спроса.
Какие поля вводятся
| Поле | Единица | Значение в примере | Что означает |
|---|---|---|---|
| Средняя цена без НДС | ₽ | 6 000 | Цена единицы по ассортименту без НДС: от неё считается цена скидки на излишек и маржа потерянной продажи. Значение примера условное. |
| Средняя себестоимость на складе | ₽ | 2 400 | Полная стоимость единицы на складе без НДС. Цена должна быть выше себестоимости, иначе недопрогноз не стоит маржи. Значение примера условное. |
| Скидка на излишек | % | 40 | На сколько процентов от цены в среднем уходит излишек в распродаже; свою глубину берите из прошлых сезонов. Значение примера условное. |
| Хранение и деньги на излишек | % себестоимости | 12 | Склад, замороженные деньги и риск неликвида на излишке за сезон, в процентах от себестоимости. Значение примера условное. |
| Спрос, не вернувшийся позже | % | 70 | Какая часть непроданных из-за нехватки товара покупателей уходит навсегда: остальные подождут или возьмут замену. Значение примера условное. |
Как считается
| Шаг | Формула |
|---|---|
| WAPE этапа | сумма |прогноз − факт| ÷ сумма фактов |
| FVA шага | WAPE до шага − WAPE после шага |
| Цена единицы перепрогноза | цена × скидка + себестоимость × хранение = 2 688 ₽ |
| Цена единицы недопрогноза | (цена − себестоимость) × доля потерянного спроса = 2 520 ₽ |
Пример на цифрах
Значения по умолчанию из приложения; в интерактивной версии вы подставляете свои.
- WAPE наивного прогноза
- 11,4 %Сумма |прогноз − факт| ÷ сумма фактов по всем группам.
- WAPE модели
- 6 %
- WAPE итога после правок
- 8,1 %
- Смещение наивного
- −2,3 %Плюс: прогноз выше факта, минус: ниже.
- Смещение модели
- −1,8 %
- Смещение итога после правок
- 7,5 %
- FVA модели к наивному, п. п.
- 5,4WAPE наивного минус WAPE модели: плюс значит, что модель добавила ценность.
- FVA ручных правок к модели, п. п.
- −2,1WAPE модели минус WAPE итога: минус значит, что правки ухудшили прогноз.
- Цена ошибки наивного
- 1,81 млн ₽
- Цена ошибки модели
- 954 240 ₽
- Цена ошибки итога после правок
- 1,34 млн ₽
- Что дала модель против наивного
- 856 800 ₽
- Что стоили правки против модели
- 386 400 ₽Плюс значит, что правки добавили потерь в рублях.
- Групп, где правки ухудшили модель
- 4 из 6
- Лучший этап по WAPE
- Модель
- WAPE
- Смещение по модулю
Данные таблицей
| Показатель | WAPE | Смещение по модулю |
|---|---|---|
| Наивный | 11,4 | 2,3 |
| Модель | 6 | 1,8 |
| Итог после правок | 8,1 | 7,5 |
- Перепрогноз: скидка и хранение
- Недопрогноз: потерянная маржа
Данные таблицей
| Показатель | Перепрогноз: скидка и хранение | Недопрогноз: потерянная маржа |
|---|---|---|
| Наивный | 753 | 1 058 |
| Модель | 349 | 605 |
| Итог после правок | 1 290 | 50 |
Ошибка по группам, % от факта группы
| Группа | Факт, шт. | Наивный | Модель | Итог | Лучший этап |
|---|---|---|---|---|---|
| Платья | 1 320 | 9,1 % | 6,1 % | 13,6 % | Модель |
| Верхняя одежда | 780 | 15,4 % | 5,1 % | 10,3 % | Модель |
| Трикотаж | 1 180 | 6,8 % | 6,8 % | 3,4 % | Итог после правок |
| Брюки | 690 | 15,9 % | 4,3 % | 13 % | Модель |
| Футболки и топы | 1 720 | 12,8 % | 7 % | 1,2 % | Итог после правок |
| Аксессуары | 450 | 11,1 % | 4,4 % | 20 % | Модель |
Ручные правки ухудшили прогноз на 2,1 п. п. и добавили 386 400 ₽ потерь; в 4 из 6 групп итог хуже модели. Оставляйте правку только там, где за ней стоит новая информация.
Этапы сравниваются на одних и тех же группах и фактах. Ценность шага это разница ошибок до и после него: если она меньше нуля, шаг убирают или заменяют.
Нюансы и ограничения
- Считать точность только в целом: правка может спасать одну группу и портить остальные.
- Сравнивать с прогнозом, пересчитанным после сезона: честный сравнительный прогноз фиксируется заранее.
- Оценивать ошибку в штуках, а не в рублях: недопрогноз и перепрогноз стоят по-разному.