Скільки дзвінків перевіряти? Практичний посібник з вибірки QA
Як визначити, скільки дзвінків перевіряти на якість: випадкові й цільові вибірки, мінімум на оператора, підходи для малих команд і як уникнути упередженості.
«Скільки дзвінків нам перевіряти?» — перше запитання будь-якої нової програми контролю якості, і чесна відповідь така: залежить від того, що ви хочете дізнатися і скільки маєте часу. Перевіряючи крихітну частку дзвінків, можна пропустити реальні проблеми, а перевіряючи забагато, ви накопичите завали, на основі яких ні в кого не буде часу проводити наставництво. Цей посібник пояснює, як практично підходити до вибірки, без диплома зі статистики.

Він є частиною ширшого процесу контролю якості, описаного в посібнику «Управління якістю дзвінків»; обрана вибірка має живити сесії з посібника «Проста система наставництва операторів на основі дзвінків».
Почніть з мети вибірки
Різні цілі потребують різних вибірок. Визначте, чого з переліченого ви прагнете:
Для чого потрібна вибірка?
- Справедливий зворотний зв'язок операторамКожен оператор отримує регулярний, порівнянний набір перевірених дзвінків.
- Виявлення системних проблемШирокий погляд на те, про що питають клієнти і де дають збій процеси.
- Ризики й дотримання вимогЦільова перевірка дзвінків, де помилки важили б найбільше.
- Навчання і відзнакиПошук чудових дзвінків, якими варто поділитися й на яких можна вчитися.
Одна вибірка рідко вирішує всі чотири завдання. Зазвичай команди поєднують невелику випадкову вибірку для справедливості з цільовими дзвінками для контролю ризиків.
Випадкова чи цільова вибірка
Два способи обирати дзвінки
| Випадкова | Цільова | |
|---|---|---|
| Як обирають дзвінки | Навмання з усіх дзвінків за період | За сигналом: тривалість, тональність, результат чи ключові слова |
| Сильна сторона | Неупереджений погляд на типові дзвінки | Швидше знаходить проблеми та ризики |
| Слабка сторона | Може пропустити рідкісні серйозні проблеми | Сама по собі дає викривлену картину |
| Найкраще підходить для | Оцінок операторів і тенденцій | Дотримання вимог, скарг, ідей для наставництва |
Використовуйте обидві. Поширена схема — два-три випадкові дзвінки на оператора за період плюс кілька цільових дзвінків, які перевіряють для всієї команди. Тримайте ці два види окремо у звітах: не використовуйте цільові дзвінки для розрахунку загальної оцінки оператора, інакше ви каратимете тих, хто бере найважчі дзвінки.
Практичний спосіб визначити кількість
Рахуйте від часу, який у вас є. Ретельна перевірка дзвінка зазвичай триває довше за сам дзвінок: прослухати, оцінити, написати коментар. Оцінюйте чесно.
Як обрати розмір вибірки
- Оцініть час на перевіркуНаприклад, на перевірку й коментар до десятихвилинного дзвінка може знадобитися п'ятнадцять-двадцять хвилин.
- Визначте тижневий бюджет на перевіркиСкільки годин на тиждень оцінювачі можуть витратити після часу на наставництво?
- Поділіть на час перевіркиТак ви отримаєте кількість дзвінків, які можна перевірити як слід.
- Розподіліть між операторамиДайте кожному операторові щонайменше мінімум, а решту розподіліть за ризиками й потребами.
- Перевірте через місяцьСкоригуйте, якщо перевірки накопичуються або ви закінчуєте раніше.
Мінімум на оператора
Багато команд встановлюють нижню межу, наприклад кілька дзвінків на оператора на місяць, щоб зворотний зв'язок був регулярним. Новіші оператори чи ті, хто працює за планом розвитку, можуть отримувати більше; досвідчені оператори зі стабільними результатами — менше. Більша вибірка для певного оператора не означає, що він гірший: це може бути просто додаткова підтримка.
Малі команди
Якщо у вас від п'яти до десяти операторів, ви, можливо, зможете перевіряти значну частку дзвінків. Не переймайтеся науковою точністю. Оберіть посильну кількість, наприклад кілька дзвінків на оператора на місяць, перевіряйте їх ретельно й проводьте на їхній основі наставництво. Головне, щоб це відбувалося щомісяця.
Як уникнути упередженості вибірки
Необережно сформована вибірка може вводити в оману. Остерігайтеся таких пасток:
- Перевіряти лише короткі дзвінки, бо так швидше. Справжні труднощі часто ховаються в довгих дзвінках.
- Частіше перевіряти тих самих операторів, бо їх більше помічають. Це схоже на фаворитизм або полювання на відьом.
- Перевіряти лише скарги. Ви отримаєте похмуру картину і пропустите добрі практики.
- Завжди перевіряти ту саму зміну. У різний час доби телефонують різні люди й навантаження різне.
- Дозволяти операторам самим обирати всі свої дзвінки. Вони оберуть найкращі. Краще працює поєднання; див. систему наставництва.
Запишіть правила відбору й зробіть їх видимими. Коли оператори знають, як обирають дзвінки, вони охочіше приймають результати. Також перевірте, чи вибірка охоплює всі канали й типи дзвінків, з якими ви працюєте: вхідні, вихідні та різні черги.
Справедливість щодо операторів
Оператори приймають перевірки, коли вірять, що процес справедливий. Поясніть, як формується вибірка, показуйте їм власні результати в тому самому форматі, що й усім, і дайте змогу бачити коментарі оцінювачів. Окремо подбайте про те, як ви ставитеся до операторів на неповний день, нічної зміни й тих, хто працює з іншими типами дзвінків, бо непорівнянна вибірка породжує несправедливі оцінки.
- Використовуйте ту саму оцінну картку для всіх операторів на однаковому типі дзвінків.
- Не порівнюйте оцінки операторів, які обробляють різні типи дзвінків, не зазначивши цієї різниці.
- Дайте операторам змогу оскаржити оцінку через простий шлях до другої думки.
- Дані про оцінки мають бачити лише оператор, його керівник і оцінювачі.
Якщо ви знаходите у вибірці повторювану слабкість, спершу сприймайте її як проблему команди: нечіткий процес, брак інформації чи погані інструменти. Індивідуальне наставництво — після того, як перевірено систему.
Корисні сигнали для цільової перевірки
Сигнали допомагають знаходити дзвінки, що заслуговують на уважніший погляд, не прослуховуючи все підряд:
| Сигнал | Чим він корисний | Приклад використання |
|---|---|---|
| Дуже довгі дзвінки | Можуть свідчити про плутанину, складне питання чи неефективність | Перевірка на прогалини в процесах |
| Негативний настрій клієнта наприкінці | Можливий збій або незадоволена потреба | Перевірка відновлення сервісу |
| Переведення й повторні звернення | Можлива помилка маршрутизації або неповна відповідь | Перевірка маршрутизації та знань |
| Позначені слова чи фрази | Вимоги щодо дотримання правил або особливої уваги | Звірка з правилом |
| Дуже короткі дзвінки | Обірвані дзвінки, помилкові номери, різке завершення | Перевірка початку дзвінка й обробки |
| Чудові відгуки клієнтів | Добра практика, на якій можна вчитися | Додати до бібліотеки вдалих дзвінків |
Як правильно використовувати вибірку
Вибірка нічого не варта, якщо за нею нічого не відбувається. Швидко діліться результатами з кожним оператором, поки він пам'ятає дзвінок. Зводьте дані по всіх операторах, щоб знайти пункти, які повторювано западають, і виправляйте їх навчанням, сценаріями чи оновленням бази знань, а не звинуваченням окремих людей. Проводьте калібрування, щоб оцінювачі оцінювали послідовно; див. «Як проводити калібрувальні сесії QA».
Простий план вибірки
- Мету перевірки сформульовано
- Кількість випадкових дзвінків на оператора за період
- Кількість цільових дзвінків за період і використані сигнали
- Мінімум для нових операторів або тих, хто працює за планом
- Правила відбору записано й поширено
- Час на перевірки заплановано в тижневому бюджеті
- Калібрування заплановано
- Результати передаються протягом кількох днів
Вибірка в Call
У розділі «Розбір і наставництво» в Call черга на перевірку показує дзвінки, що чекають на перевірку, спершу найдовші й найнегативніші, і відображає до дванадцяти за раз, тож оцінювачі починають із дзвінків, які найімовірніше потребують уваги. Результати за операторами показують оцінювання, середній бал, непройдені дзвінки та чинний план вибірки. Розділ «Можливий нечесний продаж» або «Клієнти, що потребують особливої уваги» перелічує дзвінки, позначені правилами за фразами, разом зі словами, які спрацювали, але лише тоді, коли щось було позначено.
Там, де на дзвінки відповідає ШІ-агент, вкладка «Автоматична перевірка» в розділі «Розмовний ШІ» може оцінювати нещодавні дзвінки, які не перевіряла жодна людина, і впорядковувати їх за ризиком із зазначенням причин, а також групує дзвінки за темами за словами, які вживали клієнти. Вона також дає змогу вибірково перевіряти підсумки ШІ й позначати кожен як «Точний», «Частково» або «Неправильно». Використовуйте ці інструменти для вибору дзвінків, але остаточне рішення залишайте за людиною.
Часті запитання
Чи існує стандартний відсоток дзвінків для перевірки?
Ні. Оберіть кількість, яку ваша команда може послідовно перевіряти й використовувати для наставництва. Невелика, добре перевірена вибірка корисніша за велику, яку ніхто не читає.
Скільки дзвінків на оператора на місяць — розумна кількість?
Багато команд починають із кількох на оператора й коригують. Новіші оператори часто отримують більше. Головне, щоб кожного оператора перевіряли регулярно.
Чи мають оператори знати, які дзвінки перевіряються?
Вони мають знати правила відбору й те, що дзвінки можуть перевірятися. Заздалегідь знати, які саме дзвінки, не обов'язково, хоча прозорість процесу зміцнює довіру.
Чи може програма обирати вибірку за нас?
Програма може впорядковувати дзвінки за сигналами, як-от тональність, тривалість чи позначки, і це економить час. Використовуйте це для цільової перевірки й залишайте частину випадкових дзвінків, щоб картина була справедливою.
Як уникнути упередженості оцінювачів?
Запишіть правила відбору, чергуйте оцінювачів, проводьте калібрувальні сесії й стежте, щоб вибірки охоплювали всі зміни та типи дзвінків.
Що робити, якщо ми не встигаємо перевіряти достатньо дзвінків?
Скоротіть оцінну картку до найважливіших пунктів, перевіряйте менше дзвінків, але ретельніше, і користуйтеся цільовими сигналами. Додавайте автоматизацію лише там, де правило чітке й надійне.