Kvalita a tým

Kolik hovorů hodnotit? Praktický průvodce výběrem vzorku pro QA

Jak určit, kolik hovorů hodnotit z hlediska kvality: náhodné a cílené vzorky, minima na operátora, zkratky pro malé týmy a jak se vyhnout zkreslení vzorku.

Redakce Call · Zveřejněno · Čtení na 5 min

„Kolik hovorů máme hodnotit?“ je první otázka, kterou si klade každý nový program řízení kvality, a poctivá odpověď zní: záleží na tom, co chcete zjistit a kolik máte času. Hodnocení nepatrného podílu hovorů může přehlédnout skutečné problémy, ale příliš mnoho hodnocení vytvoří nevyřízenou hromadu, ze které nikdo nestihne koučovat. Tento průvodce vysvětluje, jak o výběru vzorku přemýšlet prakticky, bez statistického vzdělání.

Analytik kvality u stolu vybírá nahrávky ze seznamu hovorů na monitoru
Ilustrační obrázek

Je součástí širší rutiny kvality popsané v článku Řízení kvality hovorů; zvolený vzorek by měl sloužit sezením z článku Jednoduchý rámec pro koučink operátorů na hovorech.

Začněte účelem vzorku

Různé cíle vyžadují různé vzorky. Rozhodněte, o co se snažíte:

K čemu vzorek slouží?

  • Férová zpětná vazba operátorůmKaždý operátor dostává pravidelnou, srovnatelnou sadu hodnocených hovorů.
  • Odhalení systémových problémůŠiroký pohled na to, na co se zákazníci ptají a kde procesy selhávají.
  • Riziko a dodržování předpisůCílené hodnocení hovorů, kde by chyby měly největší dopad.
  • Školení a oceněníHledání vynikajících hovorů, které lze sdílet a učit se z nich.

Jeden vzorek zřídka zvládne všechny čtyři cíle. Týmy obvykle kombinují malý náhodný vzorek kvůli férovosti s cílenými hovory kvůli riziku.

Náhodný, nebo cílený výběr

Dva způsoby výběru hovorů

NáhodnýCílený
Jak se hovory vybírajíNáhodně ze všech hovorů v daném obdobíPodle signálu, jako je délka, sentiment, výsledek nebo klíčová slova
Silná stránkaNezkreslený pohled na typické hovoryRychleji najde problémy a rizika
SlabinaMůže minout vzácné závažné problémySám o sobě dává zkreslený obraz
Nejvhodnější proSkóre a trendy operátorůDodržování předpisů, stížnosti, náměty na koučink

Používejte obojí. Běžný vzorec jsou dva nebo tři náhodné hovory na operátora za období plus několik cílených hovorů hodnocených pro celý tým. V reportech oba druhy oddělujte; cílené hovory nepoužívejte k výpočtu celkového skóre operátora, jinak potrestáte ty, kteří berou nejtěžší hovory.

Praktický způsob, jak určit počet

Počítejte zpětně od času, který máte. Pečlivé hodnocení hovoru obvykle trvá déle než samotný hovor: poslech, bodování a napsání komentáře. Odhadujte poctivě.

Jak zvolit velikost vzorku

  1. Odhadněte čas na hodnoceníNapříklad desetiminutový hovor může vyžadovat patnáct až dvacet minut na hodnocení a komentář.
  2. Určete týdenní rozpočet na hodnoceníKolik hodin mohou hodnotitelé týdně věnovat hodnocení po odečtení času na koučink?
  3. Vydělte časem na hodnoceníVyjde vám počet hovorů, které zvládnete ohodnotit pořádně.
  4. Rozdělte mezi operátoryKaždému operátorovi dejte alespoň minimum a zbytek rozdělte podle rizika a potřeby.
  5. Po měsíci zkontrolujteUpravte počet, pokud se hodnocení hromadí nebo pokud skončíte dřív.

Minima na operátora

Mnoho týmů stanoví spodní hranici, například několik hovorů na operátora měsíčně, aby zpětná vazba byla pravidelná. Novější operátoři nebo ti s plánem rozvoje mohou dostat víc; zkušení operátoři se stabilními výsledky méně. Větší vzorek u jednoho operátora neznamená horšího operátora; může jít jednoduše o podporu navíc.

Malé týmy

S pěti až deseti operátory možná zvládnete hodnotit vysoký podíl hovorů. Nestarejte se o vědeckou přesnost. Zvolte zvládnutelný počet, například několik hovorů na operátora měsíčně, ohodnoťte je pořádně a koučujte z nich. Podstatné je, aby se to dělo každý měsíc.

Jak se vyhnout zkreslení vzorku

Vzorek může klamat, pokud není vybrán pečlivě. Dejte si pozor na tyto pasti:

Pravidla výběru sepište a zveřejněte. Když operátoři vědí, jak se hovory vybírají, spíš výsledky přijmou. Ověřte také, že vzorek pokrývá všechny kanály a typy hovorů, které vyřizujete, například příchozí, odchozí a různé fronty.

Férovost vůči operátorům

Operátoři hodnocení přijmou, když věří, že proces je férový. Vysvětlete, jak se vzorek vybírá, ukazujte jim jejich výsledky ve stejném formátu jako všem ostatním a nechte je vidět komentáře hodnotitelů. Věnujte zvláštní pozornost tomu, jak zacházíte s operátory na částečný úvazek, nočními směnami a lidmi na jiných typech hovorů, protože nesrovnatelný vzorek vytváří nespravedlivé skóre.

Když ve vzorku najdete opakující se slabinu, berte ji nejprve jako problém týmu: nejasný postup, chybějící informace nebo špatné nástroje. Individuální koučink přichází až po kontrole systému.

Užitečné signály pro cílené hodnocení

Signály vám pomohou najít hovory, které si zaslouží bližší pohled, aniž byste museli poslouchat všechno:

SignálProč je užitečnýPříklad použití
Velmi dlouhé hovoryMohou ukazovat zmatek, obtížný problém nebo neefektivituHodnotit kvůli mezerám v procesu
Zákazník na konci negativníMožné selhání nebo nenaplněná potřebaHodnotit kvůli nápravě služby
Přepojení a opakované kontaktyMožné chybné směrování nebo neúplná odpověďHodnotit kvůli směrování a znalostem
Označená slova nebo frázePožadavky předpisů nebo péčeZkontrolovat podle pravidla
Velmi krátké hovoryZavěšení, omyly v čísle, náhlé ukončeníZkontrolovat zahájení a vedení hovoru
Vynikající zpětná vazba od zákazníkaDobrá praxe, ze které se lze učitPřidat do knihovny dobrých hovorů

Jak vzorek dobře využít

Vzorek nemá cenu, pokud z něj nic nevzejde. Sdílejte výsledky s každým operátorem rychle, dokud si hovor pamatuje. Agregujte je napříč operátory, abyste našli opakující se slabé položky, a ty řešte školením, scénáři nebo aktualizací znalostí, ne obviňováním jednotlivců. Pořádejte kalibrace, aby hodnotitelé bodovali konzistentně; viz Kalibrační schůzky QA.

Jednoduchý plán výběru vzorku

  • Účel hodnocení je stanovený
  • Náhodné hovory na operátora za období
  • Cílené hovory za období a použité signály
  • Minima pro nové operátory nebo operátory s plánem rozvoje
  • Pravidla výběru jsou sepsaná a sdílená
  • Čas na hodnocení je týdně rozpočtovaný
  • Kalibrace je naplánovaná
  • Výsledky se sdílejí do několika dnů

Výběr vzorku v Call

V oblasti Rozbor a koučink v Call fronta k rozboru uvádí hovory čekající na hodnocení, od nejdelších a nejnegativnějších, a zobrazuje jich najednou až dvanáct, takže hodnotitelé začínají u hovorů, které pozornost nejspíš potřebují. Výsledky jednotlivých operátorů ukazují hodnocení, průměrné skóre, nevyhovující hovory a používaný plán výběru vzorku. Sekce „Možný klamavý prodej“ nebo „Zákazníci vyžadující zvláštní péči“ uvádí hovory označené pravidly pro fráze spolu se slovy, která se shodovala, ale jen tehdy, když bylo něco označeno.

Tam, kde hovory přijímá AI agent, umí karta Automatická kontrola v Konverzační AI ohodnotit nedávné hovory, které žádný člověk nehodnotil, seřadit je podle rizika s uvedením důvodů a seskupit hovory do témat podle slov, která zákazníci použili. Umožňuje také vybírat vzorky AI shrnutí a každé označit jako Přesné, Částečně nebo Špatně. Používejte tyto nástroje k výběru hovorů, ale konečný úsudek nechte na člověku.

Často kladené otázky

Existuje standardní procento hovorů k hodnocení?

Ne. Zvolte počet, který váš tým dokáže soustavně hodnotit a využívat ke koučinku. Malý dobře ohodnocený vzorek je užitečnější než velký, který zůstane nepřečtený.

Kolik hovorů na operátora měsíčně je rozumné?

Mnoho týmů začíná několika na operátora a postupně upravuje. Novější operátoři často dostávají víc. Klíčové je, aby byl každý operátor hodnocen pravidelně.

Mají operátoři vědět, které hovory se hodnotí?

Měli by znát pravidla výběru a vědět, že jejich hovory mohou být hodnoceny. Nemusí předem vědět, o které konkrétní hovory jde, ale otevřenost ohledně procesu důvěře pomáhá.

Může vzorek vybrat software za nás?

Software umí seřadit hovory podle signálů, jako je sentiment, délka nebo označení, což šetří čas. Využijte to pro cílené hodnocení a ponechte i část náhodných hovorů, aby obraz zůstal férový.

Jak zabránit zaujatosti hodnotitelů?

Sepište pravidla výběru, střídejte hodnotitele, pořádejte kalibrační schůzky a zajistěte, aby vzorky pokrývaly všechny směny a typy hovorů.

Co když nestíháme ohodnotit dost hovorů?

Zúžte hodnoticí kartu na nejdůležitější položky, hodnoťte méně hovorů pečlivěji a využívejte cílené signály. Automatizaci přidávejte jen tam, kde je pravidlo jasné a spolehlivé.

Najděte ve frontě k rozboru v Call hovory, které stojí za hodnocení nejdřív

V demo konzoli si můžete příchozí hovory vyzkoušet v simulaci.

Související průvodci