Сколько звонков нужно проверять? Выборка для контроля качества
Как решить, сколько звонков проверять: случайная и целевая выборка, минимум на оператора, упрощения для небольших команд и как избежать перекоса в выборке.
«Сколько звонков нам проверять?» — первый вопрос любой новой программы контроля качества, и честный ответ таков: всё зависит от того, что вы хотите узнать и сколько у вас времени. Проверяя крошечную долю звонков, можно пропустить реальные проблемы, а проверяя слишком много — накопить завал, на основе которого никто не успевает проводить наставничество. В этом руководстве объясняется, как подходить к выборке на практике, без диплома по статистике.

Это часть более широкой системы контроля качества, описанной в статье Управление качеством звонков; выбранная выборка должна питать встречи, описанные в статье Простая схема наставничества операторов по звонкам.
Начните с цели выборки
Разные цели требуют разных выборок. Решите, чего из перечисленного вы добиваетесь:
Для чего нужна выборка?
- Справедливая обратная связь операторамКаждый оператор получает регулярный, сопоставимый набор проверенных звонков.
- Выявление системных проблемШирокий взгляд на то, о чём спрашивают клиенты и где дают сбой процессы.
- Риски и соблюдение требованийЦелевая проверка звонков, где ошибки обошлись бы дороже всего.
- Обучение и признаниеПоиск отличных звонков, чтобы делиться ими и учиться на них.
Одна выборка редко решает все четыре задачи. Обычно команды сочетают небольшую случайную выборку ради справедливости с целевыми звонками ради контроля рисков.
Случайная и целевая выборка
Два способа отбирать звонки
| Случайная | Целевая | |
|---|---|---|
| Как отбираются звонки | Случайно из всех звонков за период | По сигналу: длительность, тональность, результат или ключевые слова |
| Сильная сторона | Объективная картина типичных звонков | Быстрее находит проблемы и риски |
| Слабая сторона | Может пропустить редкие серьёзные проблемы | Сама по себе даёт искажённую картину |
| Лучше всего подходит для | Оценок операторов и динамики | Соблюдения требований, жалоб, идей для наставничества |
Используйте обе. Распространённая схема — два-три случайных звонка на оператора за период плюс несколько целевых звонков, проверяемых для всей команды. Разделяйте эти два вида в отчётах: не используйте целевые звонки для расчёта общей оценки оператора, иначе вы накажете тех, кто берёт самые трудные звонки.
Практический способ выбрать число
Отталкивайтесь от имеющегося времени. Тщательная проверка звонка обычно занимает больше времени, чем сам звонок: прослушивание, оценка, комментарий. Оценивайте честно.
Выбор размера выборки
- Оцените время проверкиНапример, на проверку и комментарий к десятиминутному звонку может понадобиться пятнадцать-двадцать минут.
- Определите недельный бюджет на проверкуСколько часов в неделю проверяющие могут тратить на это с учётом времени на наставничество?
- Разделите на время проверкиТак вы получите число звонков, которые можно проверить как следует.
- Распределите между операторамиДайте каждому оператору хотя бы минимум, а остальное распределите по рискам и потребностям.
- Проверьте через месяцСкорректируйте, если проверки копятся или вы заканчиваете раньше.
Минимум на оператора
Многие команды задают нижнюю планку, например несколько звонков на оператора в месяц, чтобы обратная связь была регулярной. Новые операторы или операторы с планом развития могут получать больше, опытные со стабильными результатами — меньше. Большая выборка для конкретного оператора не означает, что он хуже других; это может означать просто дополнительную поддержку.
Небольшие команды
При пяти-десяти операторах можно проверять большую долю звонков. Не стремитесь к научной точности. Выберите посильное число, например несколько звонков на оператора в месяц, проверяйте их как следует и проводите по ним наставничество. Главное, чтобы это происходило каждый месяц.
Как избежать перекоса в выборке
Выборка может вводить в заблуждение, если отобрана небрежно. Остерегайтесь этих ловушек:
- Проверять только короткие звонки, потому что это быстрее. В длинных звонках часто скрываются настоящие трудности.
- Чаще проверять одних и тех же операторов, потому что они больше на виду. Это выглядит как фаворитизм или охота на ведьм.
- Проверять только жалобы. Вы получите мрачную картину и упустите хорошие практики.
- Всегда проверять одну и ту же смену. В разное время суток звонят разные люди и разная нагрузка.
- Позволять операторам выбирать все звонки самим. Они выберут лучшие. Смешанный подход работает лучше; см. схему наставничества.
Запишите правила отбора и сделайте их доступными. Когда операторы знают, как выбираются звонки, они охотнее принимают результаты. Также проверьте, что выборка охватывает все каналы и типы звонков, с которыми вы работаете, например входящие, исходящие и разные очереди.
Справедливость по отношению к операторам
Операторы принимают проверки, когда считают процесс справедливым. Объясните, как формируется выборка, показывайте им их результаты в том же формате, что и всем, и давайте видеть комментарии проверяющих. Уделите особое внимание операторам на неполной ставке, ночной смене и тем, кто работает с другими типами звонков: несопоставимая выборка порождает несправедливые оценки.
- Используйте один и тот же оценочный лист для всех операторов на одинаковых типах звонков.
- Не сравнивайте оценки операторов, работающих с разными типами звонков, не отметив эту разницу.
- Позвольте операторам оспорить оценку и дайте простой путь к повторному мнению.
- Данные об оценках должны быть доступны только оператору, его руководителю и проверяющим.
Если вы обнаружили повторяющуюся слабость по всей выборке, сначала рассматривайте её как проблему команды: неясный процесс, недостающая информация или плохие инструменты. Индивидуальное наставничество — после того, как проверена система.
Полезные сигналы для целевой проверки
Сигналы помогают находить звонки, заслуживающие более пристального внимания, не прослушивая всё подряд:
| Сигнал | Чем полезен | Пример применения |
|---|---|---|
| Очень длинные звонки | Могут указывать на путаницу, сложный вопрос или неэффективность | Проверка на пробелы в процессах |
| Клиент настроен негативно в конце | Возможная неудача или неудовлетворённая потребность | Проверка на восстановление сервиса |
| Переводы и повторные обращения | Возможная ошибка маршрутизации или неполный ответ | Проверка маршрутизации и знаний |
| Отмеченные слова или фразы | Требования соблюдения правил или особой заботы | Сверка с правилом |
| Очень короткие звонки | Сброшенные звонки, ошибочные номера, резкие завершения | Проверка начала разговора и обработки |
| Отличный отзыв клиента | Хорошая практика, на которой можно учиться | Добавление в библиотеку удачных звонков |
Как правильно использовать выборку
Выборка бесполезна, если за ней ничего не следует. Быстро делитесь результатами с каждым оператором, пока он помнит звонок. Сводите данные по всем операторам, чтобы находить повторяющиеся слабые пункты, и устраняйте их обучением, скриптами или обновлением базы знаний, а не обвинением отдельных людей. Проводите калибровку, чтобы проверяющие оценивали единообразно; см. статью Калибровочные сессии в контроле качества.
Простой план выборки
- Цель проверки сформулирована
- Случайные звонки на оператора за период
- Целевые звонки за период и используемые сигналы
- Минимум для новых операторов и операторов с планом развития
- Правила отбора записаны и доведены до всех
- Время на проверку заложено в недельный бюджет
- Калибровка запланирована
- Результаты передаются в течение нескольких дней
Выборка в Call
В разделе «Разбор и наставничество» в Call очередь разбора показывает звонки, ожидающие проверки, — сначала самые длинные и самые негативные, до двенадцати за раз, — так что проверяющие начинают со звонков, которым, скорее всего, нужно внимание. Результаты по операторам показывают оценивания, среднюю оценку, проваленные звонки и действующий план выборки. Блок «Возможная недобросовестная продажа» или «Клиенты, требующие особого внимания» показывает звонки, отмеченные правилами по фразам, вместе с совпавшими словами, но только если что-то было отмечено.
Если на звонки отвечает ИИ-агент, вкладка «Автоматическая проверка» в разделе «Разговорный ИИ» может оценивать недавние звонки, которые ещё не проверял человек, и ранжировать их по риску с указанием причин, а также группирует звонки по темам на основе слов, которые использовали клиенты. Там же можно делать выборку ИИ-сводок и отмечать каждую как «Точно», «Частично» или «Неверно». Используйте эти инструменты для отбора звонков, но окончательное суждение оставляйте за человеком.
Частые вопросы
Есть ли стандартный процент звонков для проверки?
Нет. Выберите число, которое ваша команда сможет стабильно проверять и использовать для наставничества. Небольшая, хорошо проверенная выборка полезнее большой, которую никто не читает.
Сколько звонков на оператора в месяц — разумно?
Многие команды начинают с нескольких на оператора и корректируют. Новым операторам часто проверяют больше. Главное, чтобы каждого оператора проверяли регулярно.
Должны ли операторы знать, какие звонки проверяются?
Они должны знать правила отбора и то, что звонки могут проверяться. Знать заранее, какие именно звонки, им не обязательно, хотя прозрачность процесса укрепляет доверие.
Может ли выборку формировать программа?
Программа может ранжировать звонки по сигналам — тональности, длительности или отметкам, — и это экономит время. Используйте это для целевой проверки и сохраняйте часть случайных звонков, чтобы картина оставалась справедливой.
Как избежать предвзятости проверяющих?
Запишите правила отбора, меняйте проверяющих, проводите калибровочные сессии и следите, чтобы выборка охватывала все смены и типы звонков.
Что делать, если мы не успеваем проверять достаточно звонков?
Сократите оценочный лист до самых важных пунктов, проверяйте меньше звонков, но тщательнее, и используйте целевые сигналы. Автоматизацию добавляйте только там, где правило ясное и надёжное.