Главная проблема измерения удовлетворённости — не в выборе между CSAT и NPS, а в том, кто вообще отвечает на опрос. При типичном отклике в 5–7% в выборку попадают два края: те, кому очень понравилось, и те, кого разозлили. Молчаливая середина, а это большая часть клиентов, в цифру не входит. Поэтому средняя оценка почти всегда выше правды, и все выводы, сделанные по ней, смещены в приятную сторону.
Отклик поднимается до 20–25% четырьмя правками, ни одна из которых не касается формулировки вопроса. И первое, что при этом происходит, застаёт руководителей врасплох: средняя оценка падает. На модельном потоке 6 000 обращений в месяц она уходит с 4,2 до 4,1, а CSAT — с 79 до 75%. Сервис при этом не изменился ни на йоту.
Ниже — чем три метрики отличаются друг от друга, где именно умирает отклик, как читать смещённую выборку, во что обходится честный разбор низких оценок и почему связку «оценка клиента — премия оператора» надо разорвать.
CSAT, NPS и CES: три разных вопроса
Их регулярно называют одним словом «удовлетворённость» и подставляют друг вместо друга. Между тем каждая метрика спрашивает о своём, и подмена приводит к решениям, принятым не по тем данным.
Customer Satisfaction Score — доля довольных ответов от всех полученных. Считается как процент оценок 4 и 5 по пятибалльной шкале или процент нажатий на «хорошо» при двух кнопках. Метрика одного взаимодействия: спрашивает про этот разговор, а не про компанию в целом.
| Метрика | Вопрос | Когда спрашивать | Что показывает | Чего не показывает |
|---|---|---|---|---|
| CSAT | Вы довольны решением вашего вопроса? | Сразу после закрытия обращения | Качество конкретного взаимодействия: понял ли оператор, решил ли, вежливо ли | Отношение к компании и готовность покупать дальше |
| CES | Насколько легко было решить вопрос? | Сразу после закрытия обращения, вместо CSAT или через раз | Трудозатраты клиента: сколько раз пришлось написать, повторить, ждать | Эмоцию и лояльность: вопрос можно решить легко и всё равно остаться недовольным |
| NPS | Насколько вероятно, что вы порекомендуете нас знакомым? | Раз в квартал по всей активной базе, не после обращения | Отношение к компании и продукту целиком | Работу поддержки: клиент со сломанным товаром поставит низкий балл при идеальном сервисе |
Отсюда практическое правило, которое снимает половину споров. После обращения спрашивайте CSAT или CES, NPS выносите в отдельный квартальный опрос по всей базе. NPS, привязанный к закрытию тикета, измеряет в первую очередь факт поломки: человек, у которого не работает купленный товар, поставит компании низкую оценку независимо от того, как с ним разговаривали. Использовать эту цифру для оценки поддержки нельзя, а её именно так и используют.
Момент, канал и длина: где умирает отклик
Отклик определяется четырьмя решениями, и текст вопроса среди них не значится. Все четыре стоят ноль рублей и меняются за один вечер настройками, если обращения уже собираются в одно окно.
| Рычаг | Как обычно | Как надо | Прирост отклика |
|---|---|---|---|
| Момент | Письмо на следующий день | Сообщение сразу после закрытия обращения, пока разговор в памяти | +6–9 п.п. |
| Канал | Почта независимо от того, где обращался клиент | Тот же канал, где шёл диалог: чат, мессенджер, SMS после звонка | +5–8 п.п. |
| Длина | Анкета из четырёх-шести вопросов | Один вопрос, комментарий по желанию | +4–6 п.п. |
| Формат ответа | Шкала от 1 до 10 или от 1 до 5 | Две-три кнопки прямо в сообщении, без перехода на страницу | +2–4 п.п. |
Сумма по таблице даёт +17–27 процентных пунктов, но рычаги пересекаются: сообщение в мессенджере уже частично закрывает и момент, и канал, и формат. Реальный результат перехода со всех «как обычно» на все «как надо» — около 22% отклика вместо 6%, а не 33%. Если подрядчик показывает сложенные приросты, это первый признак, что остальные цифры в предложении собраны так же.
Сравнение двух колонок. Левая «как обычно»: письмо на следующий день, анкета из четырёх вопросов, шкала 1–10, переход на отдельную страницу, внизу крупно «отклик 6% = 360 ответов». Правая «как надо»: сообщение в том же канале сразу после закрытия, один вопрос, две-три кнопки внутри сообщения, внизу крупно «отклик 22% = 1 320 ответов». Общая подпись снизу: «поток 6 000 обращений в месяц». Чертёжный стиль, подписи по-русски, без узнаваемых интерфейсов.
Смещение выборки: почему средняя оценка всегда выше правды
Теперь самое неприятное. Подняв отклик, вы увидите не рост качества, а падение цифры — и должны быть к этому готовы заранее, потому что объяснять это постфактум руководству бесполезно.
| Доля оценок | Отклик 6%: 360 ответов | Отклик 22%: 1 320 ответов |
|---|---|---|
| Оценка 5 | 71% | 55% |
| Оценка 4 | 8% | 20% |
| Оценка 3 | 4% | 11% |
| Оценки 1–2 | 17% | 14% |
| Средняя оценка | 4,2 | 4,1 |
| CSAT, доля оценок 4–5 | 79% | 75% |
Арифметику легко проверить на калькуляторе: 0,71 × 5 + 0,08 × 4 + 0,04 × 3 + 0,17 × 1,5 = 4,245 в левой колонке и 0,55 × 5 + 0,20 × 4 + 0,11 × 3 + 0,14 × 1,5 = 4,09 в правой. Доля разозлённых даже слегка снизилась — они отвечали и раньше. Изменилось другое: появились четвёрки и тройки, которых в узкой выборке почти не было. Это и есть та самая молчаливая середина, ради которой отклик и поднимали.
Первое: сравнивать периоды с разным откликом нельзя. Если в марте отвечали 6%, а в мае 22%, падение средней оценки не означает ухудшения — рядом с цифрой всегда должен стоять отклик, иначе она не читается. Второе: абсолютное значение CSAT почти бесполезно для сравнения с другими компаниями, потому что у них другой отклик, другая шкала и другой момент опроса. Работает только динамика внутри себя при неизменной методике.
Две столбчатые диаграммы рядом, по горизонтали оценки 1–2, 3, 4, 5. Левая подписана «отклик 6%, 360 ответов», столбцы 17%, 4%, 8%, 71% — форма буквы U с высоким правым краем. Правая подписана «отклик 22%, 1 320 ответов», столбцы 14%, 11%, 20%, 55% — распределение заметно ровнее. Под каждой диаграммой подпись со средней оценкой: «4,2» и «4,1», и с CSAT: «79%» и «75%». Общий заголовок сверху: «поток 6 000 обращений, сервис не менялся». Чертёжный стиль, подписи по-русски.
Что делать с низкой оценкой и во что обходится разбор
Собранная и никем не прочитанная оценка — это расход без результата. Но и разобрать всё нельзя: на 1 320 ответах это два с половиной человека. Работающий компромисс выглядит так: разбираем все оценки 1–2 и случайную часть троек, остальное смотрим только в динамике.
- 1Оценка 1–2 автоматически переоткрывает обращение
Не создаёт задачу «посмотреть», а именно переоткрывает тикет с повышенным приоритетом и с нормативом реакции 24 часа. Иначе низкие оценки копятся в отчёте, который смотрят раз в месяц, и клиент не получает ничего.
- 2Разбирает не тот, кто отвечал
Старший оператор или руководитель группы. Автор диалога участвует, но не решает, была ли ошибка: человек не судья в собственном деле, и это правило снимает половину конфликтов вокруг оценок.
- 3У разбора обязательный итог — причина из закрытого списка
Долго ждал, не решили, решили не то, нагрубили, проблема в продукте, клиент недоволен политикой компании. Последние две категории — не про поддержку, и они должны уходить владельцу продукта, а не оставаться внутри отдела.
- 4Связываться с клиентом — по правилу, а не по настроению
Один звонок или сообщение в течение суток по всем оценкам 1–2, кроме тех, где причина — недовольство политикой компании и решение уже озвучено. Право на компенсацию и её границы описаны отдельно в материале про работу с негативом.
Горизонтальная схема из пяти блоков со стрелками: «оценка 1–2, 185 в месяц» → «тикет переоткрывается, приоритет, реакция 24 часа» → «разбор старшим оператором, 12 минут» → «причина из закрытого списка: долго ждал / не решили / решили не то / нагрубили / проблема в продукте / политика компании» → «правка: база знаний, регламент или владелец продукта». Под третьим блоком выноска «215 разборов с учётом троек = 43 часа = 47 300 ₽/мес». От блока «проблема в продукте» отдельная стрелка вниз с подписью «уходит из поддержки». Чертёжный стиль, подписи по-русски.
Почему премию оператора нельзя привязывать к оценке
Связка выглядит справедливой и вводится почти в каждой второй поддержке. Ломается она всегда одинаково: у оператора есть три способа поднять свою оценку, не улучшив ни одного ответа, и все три обходятся компании дороже, чем сэкономленная премия.
- 1Оператор начинает просить оценку. «Если всё решилось, поставьте, пожалуйста, пятёрку» — фраза, после которой отклик растёт, а информативность падает до нуля: вы измеряете вежливость просьбы, а не качество работы.
- 2Сложные обращения перестают закрываться. Их переводят на вторую линию, оставляют висеть или закрывают без опроса. Контрольный показатель здесь один — доля обращений, по которым опрос вообще ушёл. Если у команды это 92%, а у одного оператора 58%, разговор не про качество, а про то, куда делись 34%.
- 3Оператор перестаёт говорить «нет». Обещает срок, который компания не выдержит, и возврат, который не согласован. Оценка в моменте отличная, цена приходит через неделю в виде повторного обращения и жалобы — и приходит уже не к нему.
Замена простая: премируем за то, чем оператор действительно управляет. Доля решённых с первого раза, соблюдение нормативов из SLA, результат выборочного контроля диалогов и доля разобранных низких оценок в своей зоне. Оценка клиента остаётся метрикой процесса, а не человека — её смотрят по темам, каналам и сменам, а не по фамилиям.
Не показывать её вовсе — другая крайность: тогда обратная связь до людей не доходит и работа не меняется. Оценки показывают оператору лично, вместе с текстом обращения и комментарием клиента, но вне связи с деньгами. Разница между «ты видишь свои оценки» и «твоя премия зависит от оценок» — это разница между обучением и игрой в цифру.
Когда мерить удовлетворённость не надо
Опрос — это не бесплатная кнопка. Он забирает внимание клиента, требует 47 300 ₽ в месяц на разбор и создаёт цифру, которую начнут спрашивать на каждом совещании. Четыре ситуации, где его лучше не заводить.
- Меньше 500 обращений в месяц. При отклике 22% это 110 ответов и около 15 низких оценок. Статистики нет, зато есть возможность прочитать все диалоги целиком — это точнее любого опроса и стоит те же часы.
- Разбирать некому. Если заранее не выделено 40–45 часов в месяц старшего оператора, опрос превратится в накопитель претензий, на которые никто не отвечает. Клиент, поставивший единицу и не получивший ответа, злее клиента, которого вообще не спрашивали.
- Обращений от одного клиента одно-два за всю жизнь. Разовые крупные покупки: мебель, окна, ремонт. Здесь важнее не CSAT, а публичные отзывы и повторные обращения — и работать надо с мониторингом репутации, а не с внутренней шкалой.
- Цифра нужна для отчёта, а не для решений. Если заранее понятно, что по низким оценкам никто ничего не поменяет ни в продукте, ни в регламенте, — опрос станет ритуалом. Такие метрики живут полгода, потом их перестают читать, а расходы на разбор остаются.
И последнее. Удовлетворённость — не единственный и не лучший индикатор здоровья поддержки. Доля повторных обращений по одной теме, соблюдение нормативов ответа и распределение тем в справочнике снимаются автоматически, не требуют участия клиента и не смещаются откликом. Если выбирать одну метрику для начала, начинать стоит с них, а CSAT добавлять вторым шагом — когда есть кому разбирать то, что он покажет.
