Прочитать все диалоги невозможно, и это не проблема бюджета. При потоке 3 200 обращений в месяц и шести минутах на разбор одного диалога сплошная ручная проверка занимает 320 часов — 576 000 ₽ по полной ставке руководителя подразделения 1 800 ₽/час. Ни одна компания на 20–300 человек такого не делает, поэтому вопрос всегда стоит иначе: какие 60 диалогов из 3 200 прочитать.
Критерий отбора в эту подборку объявляем до списка: инструмент должен не просто показывать записи и переписку, а отбирать диалоги для разбора по заданным вами признакам и хранить результат оценки так, чтобы по нему можно было построить динамику. По этому критерию сюда не попали архивы записей без поиска, отчёты телефонии по длительности и любые сервисы, которые выдают одну общую оценку без расшифровки по критериям: спорить с такой оценкой невозможно, а значит, она не меняет поведение.
Мы не продаём ни один из перечисленных инструментов. Мы собираем контуры оценки на том, что у заказчика уже стоит, поэтому смотрим на них с точки зрения одного вопроса: сколько дефектов доходит до разговора с сотрудником и во что обходится каждый.
Три подхода к выборке и почему их путают
Подходы различаются не технологией, а тем, кто решает, какой диалог достоин внимания. В первом решает случай, во втором — правила, в третьем — сам клиент. Смешивать их можно и нужно, но считать надо по отдельности.
- 1Случайная выборка руками
То, что происходит в большинстве компаний по умолчанию: руководитель слушает несколько записей в неделю. Покрытие 1–3 %, никакой статистики, зато нулевая цена инструментов. Главный недостаток не в проценте, а в смещении: слушают обычно тех, на кого пожаловались, поэтому картина складывается из худших случаев.
- 2Умная выборка по признакам риска
Все диалоги просеиваются автоматически по формальным признакам — длинные паузы, перебивания, ключевые слова претензии, превышение времени ответа, повторное обращение того же клиента, — и человеку достаются только подозрительные. Просеивание дешёвое, потому что не требует смысловой оценки; читает по-прежнему человек.
- 3Сплошная автоматическая оценка
Каждый диалог оценивается моделью по карте критериев, руководитель перепроверяет часть. Даёт настоящую динамику по сотрудникам и по темам, стоит дороже и упирается в доверие: цифру, полученную машиной, команда оспаривает до тех пор, пока не увидит, из чего она сложилась.
- 4Опрос клиента после обращения
Формально четвёртый подход и единственный, где оценивает не компания. Дёшев, даёт голос клиента и не видит того, чего клиент не заметил: нарушенный регламент, непроданную услугу, неверно оформленную заявку. Поэтому он не альтернатива выборке, а вторая координата.
Считаем: 3 200 диалогов и цена одного разобранного дефекта
Модельная компания: сервисная организация, 9 сотрудников на линии, 3 200 диалогов в месяц — 1 400 звонков и 1 800 переписок. Один руководитель, который занимается качеством помимо остальной работы. На разбор одного диалога с записью в карточку оценки уходит 6 минут; ставка руководителя подразделения — 1 800 ₽/час полной стоимости.
| Подход | Что просеивается | Доходит до разбора человеком | Доля дефектных среди разобранных | Дефектов разобрано | Цена месяца |
|---|---|---|---|---|---|
| Случайная выборка руками | Ничего, диалоги берутся наугад | 48 | 12 % | 6 | 8 640 ₽ |
| Умная выборка по признакам риска | Все 3 200, отбирается 190 | 70 | 45 % | 32 | 21 720 ₽ |
| Сплошная автоматическая оценка | Все 3 200, помечается 384 | 60 | 70 % | 42 | 29 640 ₽ |
| Опрос клиента после обращения | Ответили 704, низких оценок 45 | 45 | 80 % | 36 | 11 560 ₽ |
Из расчёта видны две вещи, которых не видно из презентаций поставщиков. Первая: сплошная оценка не увеличивает число разобранных дефектов пропорционально покрытию — узкое место остаётся тем же самым человеком с теми же шестью часами. Она даёт другое: динамику и возможность заметить проблему, о которой никто не пожаловался. Вторая: опрос клиента дешевле всех остальных подходов втрое и при этом не конкурирует с ними, потому что находит другой класс проблем.
Четыре вертикальные колонки с подписями «случайная выборка», «сплошная автооценка», «умная выборка», «опрос клиента» и высотой по значениям 1 440 ₽, 706 ₽, 679 ₽, 321 ₽. Над каждой колонкой второй, более узкий столбик с числом разобранных дефектов: 6, 42, 32, 36. Горизонтальная штриховая линия поперёк всего графика на уровне «60–70 диалогов в месяц» с подписью «предел одного руководителя». Чертёжный стиль, приглушённая палитра, подписи по-русски.
Инструменты по каналам
Единого инструмента на все каналы в российском стеке на сентябрь 2026 года нет: звонки и переписка обслуживаются разными классами продуктов. Практически это означает, что карта оценки должна быть одна, а собирается она из двух-трёх источников.
Практическое следствие: карта оценки живёт отдельно от инструментов — в документе, а не в настройках сервиса. Тогда при смене телефонии или системы поддержки переносится настройка, а не заново придумываются критерии. По звонкам девять метрик, которые считаются без чтения диалога, мы разбирали в материале контроль менеджеров по звонкам — три из них считаются прямо по звуковой дорожке и стоят доли копейки за звонок.
| Класс инструмента | Какие каналы закрывает | Что даёт | Кому не подойдёт |
|---|---|---|---|
| Телефония с речевой аналитикой | Звонки входящие и исходящие | Расшифровка, поиск по словам и правилам, метрики по звуковой дорожке | Компаниям, у которых основной канал — переписка: звонков просто не хватит на выборку |
| Модуль качества внутри CRM или системы поддержки | Обращения и переписка в пределах своей системы | Карта оценки, привязка к сотруднику и заявке, история проверок | Тем, у кого часть общения идёт вне системы: то, что не попало в карточку, не будет оценено |
| Отдельный сервис опросов | Все каналы, где есть контакт клиента | Оценка клиента после обращения и текстовый комментарий | Компаниям с редкими контактами: при потоке меньше 300 обращений выборка ответов не наберётся |
| Собственный контур на модели | Любые каналы, куда есть доступ к тексту или расшифровке | Своя карта критериев, свои правила, данные не покидают контур | Тем, у кого нет подрядчика на сопровождение: карта критериев требует правки раз в квартал |
Цены на речевую аналитику мы разбирали отдельно: на 20 000 минутах в месяц полная обработка у специализированного сервиса стоит около 95 000 ₽, а собственный контур — около 70 000 ₽; точка равенства проходит примерно по 14 000 минут. Подробности и способ проверки качества на своих 50 звонках — в материале сервисы речевой аналитики: цены и ограничения. Для переписки арифметика мягче: текст не нужно расшифровывать, и обработка стоит десятые доли рубля за диалог.
Карта оценки: из чего она собирается
Инструмент без карты оценки бесполезен: он покажет диалоги, но не скажет, что в них не так. Рабочая карта помещается на одну страницу и состоит из четырёх групп критериев. Больше пятнадцати пунктов не бывает — с шестнадцатого начинается формальность.
- Обязательные шаги. Поздоровался, назвал компанию, уточнил задачу, зафиксировал контакт, проговорил следующий шаг и срок. Проверяется автоматически надёжнее всего, потому что это факты, а не оценка.
- Запрещённые формулировки. «Ничем не могу помочь», «это не ко мне», обещания без срока, спор с клиентом. Список составляется из реальных диалогов вашей компании, а не берётся из шаблона.
- Время реакции. Время до первого ответа, длительность пауз, сколько прошло между обещанием и его выполнением. Считается по данным систем и вообще не требует чтения диалога.
- Результат обращения. Задача решена, передана с описанием, отложена с назначенным сроком или потеряна. Это единственная группа, которую нельзя проверить внутри диалога: нужен взгляд на то, что случилось после. Как это связывается со сроками обслуживания, разобрано в материале SLA в поддержке.
Схема в две части. Слева блок «карта оценки» с четырьмя подписанными строками: «обязательные шаги», «запрещённые формулировки», «время реакции», «результат обращения»; напротив каждой указан источник данных — «расшифровка», «расшифровка», «данные систем», «карточка заявки». Справа цепочка из четырёх блоков со стрелками: «просеивание 3 200» → «отобрано 190» → «разобрано 70» → «разговор с сотрудником». Под цепочкой подпись «узкое место — последние два шага, а не первый». Чертёжный стиль, подписи по-русски.
Почему автооценке не верят и что снимает конфликт
Первая реакция команды на автоматическую оценку одинакова во всех проектах: «машина не понимает контекста». Обычно это верно наполовину — по формальным критериям согласие с человеком высокое, по оценочным низкое. Спор возникает не из-за технологии, а из-за того, что сотрудник не видит, как получилась цифра, и не может её оспорить.
- 1Показывайте расшифровку, а не балл. Оценка «7 из 10» не меняет поведение; строка «не проговорён срок следующего шага, минута 3:20» меняет. Инструмент, который не показывает основание по каждому критерию, разбирать бесполезно.
- 2Дайте право оспорить и считайте спорные случаи. Формальная процедура: сотрудник помечает несогласие, руководитель пересматривает, решение фиксируется. Доля отменённых оценок — это метрика качества вашей карты, а не жалобности команды.
- 3Первые три месяца — калибровка, а не оценка. Руководитель и модель оценивают одни и те же 30 диалогов в неделю, расхождения разбираются, карта правится. Пока согласие по спорным критериям ниже 85 %, автооценка остаётся фильтром для отбора.
- 4Разбирайте выборку вместе. Получасовой разбор двух-трёх диалогов на общей встрече раз в неделю даёт больше, чем месячный отчёт по баллам: команда видит, что именно считается нормой, и перестаёт спорить с самим фактом контроля.
Можно — по формальным критериям с высоким согласием: обязательные шаги, время реакции, наличие фиксации. Нельзя — по оценочным: «вежливость», «работа с возражениями», «эмпатия»: здесь согласие машины с человеком редко превышает 70 %, и премия начинает зависеть от случайности. Ещё одно правило, которое стоит дороже всех инструментов: если премия зависит от оценки, сотрудники начинают оптимизировать оценку, а не обслуживание — проговаривают обязательные фразы и перестают решать задачу. Привязывать имеет смысл не балл, а отсутствие повторных обращений по той же причине.
Две колонки. Слева «можно привязывать к премии» с четырьмя пунктами: «обязательные шаги», «время до первого ответа», «наличие фиксации контакта», «назначен следующий шаг и срок»; над колонкой подпись «согласие с человеком выше 85 %». Справа «нельзя» с четырьмя пунктами: «вежливость», «работа с возражениями», «эмпатия», «общий балл диалога»; над колонкой подпись «согласие редко выше 70 %». Внизу общая плашка на всю ширину: «надёжнее платить не за балл, а за отсутствие повторных обращений по той же причине». Чертёжный стиль, приглушённая палитра, подписи по-русски.
Минимальный вариант и когда не нужно ничего
Вариант за 0 ₽ на инструменты существует и на потоке до 800 диалогов в месяц работает лучше любой покупки. Он состоит из трёх вещей и требует 4–5 часов руководителя в месяц, то есть 7 200–9 000 ₽.
- 1Правило выборки вместо случайности. Каждую неделю берутся три диалога по фиксированным признакам: самый длинный, повторное обращение того же клиента и любой, закончившийся без назначенного следующего шага. Признаки видны в отчётах телефонии и CRM без всяких инструментов.
- 2Одна карта оценки на страницу. Те же четыре группы критериев, что и выше, но проверяются вручную. Заполненная карта хранится там, где её видит сотрудник.
- 3Получасовой разбор раз в неделю на общей встрече. Два диалога, без имён, с обсуждением того, что стоило сделать иначе. Это и есть та часть, ради которой существует весь контроль: инструмент находит дефект, а меняет поведение разговор.
И три случая, когда покупать инструменты не надо вовсе. Первый: поток меньше 800 диалогов в месяц — выборка не набирается, а признаки риска на таком объёме проще заметить глазом. Второй: некому разбирать — если у руководителя нет 5 часов в месяц, инструмент произведёт отчёты, которые никто не откроет, и это самый частый сценарий провала. Третий: в компании нет описанного стандарта обслуживания — тогда любая оценка становится спором о вкусах, и начинать надо с того, что решается регламентом без денег.
Отдельно стоит случай, когда часть обращений обрабатывает не человек, а бот или ИИ-ассистент. Там карта оценки та же, но добавляется своя строка расходов на регулярную проверку ответов, и она считается по другой методике — подробно это разобрано в материале сколько стоит контроль качества ИИ-системы. Смешивать два контура в одном отчёте не стоит: у людей и у модели ошибки разной природы, и одинаковая шкала прячет обе.
Контроль качества меняет обслуживание не в момент, когда дефект найден, а в момент, когда о нём поговорили с сотрудником. Всё, что до этого, — логистика.
