Качество и команда

Сколько звонков нужно проверять? Выборка для контроля качества

Как решить, сколько звонков проверять: случайная и целевая выборка, минимум на оператора, упрощения для небольших команд и как избежать перекоса в выборке.

Редакция Call · Опубликовано · Читать 5 мин

«Сколько звонков нам проверять?» — первый вопрос любой новой программы контроля качества, и честный ответ таков: всё зависит от того, что вы хотите узнать и сколько у вас времени. Проверяя крошечную долю звонков, можно пропустить реальные проблемы, а проверяя слишком много — накопить завал, на основе которого никто не успевает проводить наставничество. В этом руководстве объясняется, как подходить к выборке на практике, без диплома по статистике.

Аналитик по качеству за столом выбирает записи из списка звонков на мониторе
Иллюстрация

Это часть более широкой системы контроля качества, описанной в статье Управление качеством звонков; выбранная выборка должна питать встречи, описанные в статье Простая схема наставничества операторов по звонкам.

Начните с цели выборки

Разные цели требуют разных выборок. Решите, чего из перечисленного вы добиваетесь:

Для чего нужна выборка?

  • Справедливая обратная связь операторамКаждый оператор получает регулярный, сопоставимый набор проверенных звонков.
  • Выявление системных проблемШирокий взгляд на то, о чём спрашивают клиенты и где дают сбой процессы.
  • Риски и соблюдение требованийЦелевая проверка звонков, где ошибки обошлись бы дороже всего.
  • Обучение и признаниеПоиск отличных звонков, чтобы делиться ими и учиться на них.

Одна выборка редко решает все четыре задачи. Обычно команды сочетают небольшую случайную выборку ради справедливости с целевыми звонками ради контроля рисков.

Случайная и целевая выборка

Два способа отбирать звонки

СлучайнаяЦелевая
Как отбираются звонкиСлучайно из всех звонков за периодПо сигналу: длительность, тональность, результат или ключевые слова
Сильная сторонаОбъективная картина типичных звонковБыстрее находит проблемы и риски
Слабая сторонаМожет пропустить редкие серьёзные проблемыСама по себе даёт искажённую картину
Лучше всего подходит дляОценок операторов и динамикиСоблюдения требований, жалоб, идей для наставничества

Используйте обе. Распространённая схема — два-три случайных звонка на оператора за период плюс несколько целевых звонков, проверяемых для всей команды. Разделяйте эти два вида в отчётах: не используйте целевые звонки для расчёта общей оценки оператора, иначе вы накажете тех, кто берёт самые трудные звонки.

Практический способ выбрать число

Отталкивайтесь от имеющегося времени. Тщательная проверка звонка обычно занимает больше времени, чем сам звонок: прослушивание, оценка, комментарий. Оценивайте честно.

Выбор размера выборки

  1. Оцените время проверкиНапример, на проверку и комментарий к десятиминутному звонку может понадобиться пятнадцать-двадцать минут.
  2. Определите недельный бюджет на проверкуСколько часов в неделю проверяющие могут тратить на это с учётом времени на наставничество?
  3. Разделите на время проверкиТак вы получите число звонков, которые можно проверить как следует.
  4. Распределите между операторамиДайте каждому оператору хотя бы минимум, а остальное распределите по рискам и потребностям.
  5. Проверьте через месяцСкорректируйте, если проверки копятся или вы заканчиваете раньше.

Минимум на оператора

Многие команды задают нижнюю планку, например несколько звонков на оператора в месяц, чтобы обратная связь была регулярной. Новые операторы или операторы с планом развития могут получать больше, опытные со стабильными результатами — меньше. Большая выборка для конкретного оператора не означает, что он хуже других; это может означать просто дополнительную поддержку.

Небольшие команды

При пяти-десяти операторах можно проверять большую долю звонков. Не стремитесь к научной точности. Выберите посильное число, например несколько звонков на оператора в месяц, проверяйте их как следует и проводите по ним наставничество. Главное, чтобы это происходило каждый месяц.

Как избежать перекоса в выборке

Выборка может вводить в заблуждение, если отобрана небрежно. Остерегайтесь этих ловушек:

Запишите правила отбора и сделайте их доступными. Когда операторы знают, как выбираются звонки, они охотнее принимают результаты. Также проверьте, что выборка охватывает все каналы и типы звонков, с которыми вы работаете, например входящие, исходящие и разные очереди.

Справедливость по отношению к операторам

Операторы принимают проверки, когда считают процесс справедливым. Объясните, как формируется выборка, показывайте им их результаты в том же формате, что и всем, и давайте видеть комментарии проверяющих. Уделите особое внимание операторам на неполной ставке, ночной смене и тем, кто работает с другими типами звонков: несопоставимая выборка порождает несправедливые оценки.

Если вы обнаружили повторяющуюся слабость по всей выборке, сначала рассматривайте её как проблему команды: неясный процесс, недостающая информация или плохие инструменты. Индивидуальное наставничество — после того, как проверена система.

Полезные сигналы для целевой проверки

Сигналы помогают находить звонки, заслуживающие более пристального внимания, не прослушивая всё подряд:

СигналЧем полезенПример применения
Очень длинные звонкиМогут указывать на путаницу, сложный вопрос или неэффективностьПроверка на пробелы в процессах
Клиент настроен негативно в концеВозможная неудача или неудовлетворённая потребностьПроверка на восстановление сервиса
Переводы и повторные обращенияВозможная ошибка маршрутизации или неполный ответПроверка маршрутизации и знаний
Отмеченные слова или фразыТребования соблюдения правил или особой заботыСверка с правилом
Очень короткие звонкиСброшенные звонки, ошибочные номера, резкие завершенияПроверка начала разговора и обработки
Отличный отзыв клиентаХорошая практика, на которой можно учитьсяДобавление в библиотеку удачных звонков

Как правильно использовать выборку

Выборка бесполезна, если за ней ничего не следует. Быстро делитесь результатами с каждым оператором, пока он помнит звонок. Сводите данные по всем операторам, чтобы находить повторяющиеся слабые пункты, и устраняйте их обучением, скриптами или обновлением базы знаний, а не обвинением отдельных людей. Проводите калибровку, чтобы проверяющие оценивали единообразно; см. статью Калибровочные сессии в контроле качества.

Простой план выборки

  • Цель проверки сформулирована
  • Случайные звонки на оператора за период
  • Целевые звонки за период и используемые сигналы
  • Минимум для новых операторов и операторов с планом развития
  • Правила отбора записаны и доведены до всех
  • Время на проверку заложено в недельный бюджет
  • Калибровка запланирована
  • Результаты передаются в течение нескольких дней

Выборка в Call

В разделе «Разбор и наставничество» в Call очередь разбора показывает звонки, ожидающие проверки, — сначала самые длинные и самые негативные, до двенадцати за раз, — так что проверяющие начинают со звонков, которым, скорее всего, нужно внимание. Результаты по операторам показывают оценивания, среднюю оценку, проваленные звонки и действующий план выборки. Блок «Возможная недобросовестная продажа» или «Клиенты, требующие особого внимания» показывает звонки, отмеченные правилами по фразам, вместе с совпавшими словами, но только если что-то было отмечено.

Если на звонки отвечает ИИ-агент, вкладка «Автоматическая проверка» в разделе «Разговорный ИИ» может оценивать недавние звонки, которые ещё не проверял человек, и ранжировать их по риску с указанием причин, а также группирует звонки по темам на основе слов, которые использовали клиенты. Там же можно делать выборку ИИ-сводок и отмечать каждую как «Точно», «Частично» или «Неверно». Используйте эти инструменты для отбора звонков, но окончательное суждение оставляйте за человеком.

Частые вопросы

Есть ли стандартный процент звонков для проверки?

Нет. Выберите число, которое ваша команда сможет стабильно проверять и использовать для наставничества. Небольшая, хорошо проверенная выборка полезнее большой, которую никто не читает.

Сколько звонков на оператора в месяц — разумно?

Многие команды начинают с нескольких на оператора и корректируют. Новым операторам часто проверяют больше. Главное, чтобы каждого оператора проверяли регулярно.

Должны ли операторы знать, какие звонки проверяются?

Они должны знать правила отбора и то, что звонки могут проверяться. Знать заранее, какие именно звонки, им не обязательно, хотя прозрачность процесса укрепляет доверие.

Может ли выборку формировать программа?

Программа может ранжировать звонки по сигналам — тональности, длительности или отметкам, — и это экономит время. Используйте это для целевой проверки и сохраняйте часть случайных звонков, чтобы картина оставалась справедливой.

Как избежать предвзятости проверяющих?

Запишите правила отбора, меняйте проверяющих, проводите калибровочные сессии и следите, чтобы выборка охватывала все смены и типы звонков.

Что делать, если мы не успеваем проверять достаточно звонков?

Сократите оценочный лист до самых важных пунктов, проверяйте меньше звонков, но тщательнее, и используйте целевые сигналы. Автоматизацию добавляйте только там, где правило ясное и надёжное.

Находите звонки, которые стоит проверить в первую очередь, с помощью очереди разбора Call

В демо-консоли можно попробовать входящие звонки в режиме симуляции.

Похожие руководства

Качество и команда

Как предотвратить выгорание операторов контакт-центра

Признаки выгорания операторов, его типичные причины в работе на телефоне и практические шаги по его снижению: графики, нагрузка, время на восстановление и поддержка.

Редакция Call ·
Качество и команда

План адаптации новых операторов контакт-центра на 30 дней

Понедельный план ввода новых операторов в работу: подготовка, наблюдение, звонки с поддержкой, обратная связь и итоговая встреча через 30 дней, плюс чек-лист.

Редакция Call ·
Качество и команда

Справедливая оценка работы операторов: практическое руководство

Как справедливо оценивать работу операторов: выбирайте показатели, на которые они влияют, используйте выборку реальных звонков, калибруйте проверяющих и учите.

Редакция Call ·
Качество и команда

Калибровочные сессии в контроле качества: честные оценки

Как проводить калибровочные сессии, чтобы проверяющие оценивали звонки одинаково: выбор звонков, слепая оценка, разбор расхождений, доработка оценочного листа.

Редакция Call ·