Syntha Lab EN

NPS: доверительный интервал и значимость изменения

NPS это разность долей промоутеров и критиков, и у него есть разброс, зависящий от размера выборки. Расчёт даёт NPS с доверительным интервалом и сравнивает два периода: значимо ли изменение или это шум опроса. Показывает также минимальную разницу, которую при ваших выборках вообще можно заметить.

Клиенты и лояльность Для кого: Руководителям клиентского опыта, аналитикам и маркетологам, которые докладывают NPS и его изменение.

Посчитать на своих данных →

Коротко

Какой вопрос решает расчёт?
Какова неопределённость NPS при вашей выборке и значимо ли его изменение между периодами.
Какие данные нужны?
Доли промоутеров и критиков каждого периода.
Как читать результат?
Сначала интервалы: если они пересекаются и z мал, изменение не доказано. Затем минимальная заметная разница: она показывает, нужна ли большая выборка. Пример на значениях по умолчанию: NPS первого периода: 32 п.; Интервал первого периода (±): 7,7 п.; NPS второго периода: 38 п.; Интервал второго периода (±): 8,2 п. Цифры условные: введите свои, чтобы увидеть свой результат.

Зачем и как рассуждать

NPS это разность долей с разбросом, который зависит от числа ответов. В примере 32 ± 7,7 при 400 ответах и 38 ± 8,2 при 350; z = 1,04, значит рост на 6 пунктов в пределах шума опроса. Минимальная заметная разница при таких выборках 11,3 пункта.

Когда применять

Применяйте при отчёте об NPS и при сравнении периодов или сегментов.

Как читать результат

Сначала интервал и z, потом вывод; при малой выборке увеличивайте число ответов.

Типичные ошибки

Сравнивают NPS без интервала и работают с малыми выборками.

Какие данные нужны?

  • Доли промоутеров и критиков каждого периода.
  • Число ответов в каждом периоде.
  • Уровень доверия (обычно 95 %).
  • Пример: 52 % и 20 % при 400 ответах и 57 % и 19 % при 350: NPS 32 ± 7,7 и 38 ± 8,2, z = 1,04, изменение не значимо (условные числа).

Какие поля вводятся

ПолеЕдиницаЗначение в примереЧто означает
Промоутеры%52Доля ответивших 9–10 баллов. Значение примера условное.
Критики%20Доля ответивших 0–6 баллов. Значение примера условное.
Ответовответов400Сколько человек ответили в первом периоде. Значение примера условное.
Промоутеры%57Доля ответивших 9–10 баллов. Значение примера условное.
Критики%19Доля ответивших 0–6 баллов. Значение примера условное.
Ответовответов350Сколько человек ответили во втором периоде. Значение примера условное.
Уровень доверия%95Обычно 95 %: интервал накрывает истинное значение в 95 случаях из 100. Значение примера условное.

Как считается

ШагФормула
NPSпромоутеры − критики, в процентных пунктах
Разбросσ² = (П + Д − (П − Д)²) ÷ n, интервал NPS ± z × σ
Сравнение периодовz = (NPS₂ − NPS₁) ÷ √(σ₁² + σ₂²); значимо, если |z| не меньше квантиля уровня доверия

Пример на цифрах

Значения по умолчанию из приложения; в интерактивной версии вы подставляете свои.

NPS первого периода
32 п.
Интервал первого периода (±)
7,7 п.
NPS второго периода
38 п.
Интервал второго периода (±)
8,2 п.
Изменение NPS
+6 п.
z-статистика
1,04
p-значение
29,6 %
Минимальная заметная разница при этих выборках
11,3 п.
NPS и границы интервала, пункты
Столбчатая диаграмма: Первый период 24,3, Второй период 29,801020304050Первый периодПервый периодНижняя граница: 24,324,3NPS: 3232Верхняя граница: 39,739,7Второй периодВторой периодНижняя граница: 29,829,8NPS: 3838Верхняя граница: 46,246,2
  • Нижняя граница
  • NPS
  • Верхняя граница
Данные таблицей
ПоказательНижняя границаNPSВерхняя граница
Первый период24,33239,7
Второй период29,83846,2

Изменение не значимо: оно в пределах шума опроса. Не объявляйте рост или падение NPS по такой разнице.

NPS не заменяет удержание и повторные покупки; опрашивайте после получения заказа и сравнивайте одинаковые сегменты и способы опроса.

Что делать с результатом: докладывайте NPS с интервалом; для значимой разницы увеличивайте выборку (размер выборки считает расчёт опроса).

Типичная ошибка: сравнивать NPS без интервала и работать с малыми выборками.

Нюансы и ограничения

  • Сравнивать NPS без интервала.
  • Опираться на малые выборки.
  • Считать NPS заменой удержанию.

Термины расчёта

Посчитать на своих данных →