De gesprekken van een spraakagent evalueren: meetwaarden en reviews
Zo beoordeelt u een telefonische spraakagent: welke meetwaarden u volgt, hoe u gesprekken selecteert en scoort, en hoe bevindingen tot verbeteringen leiden.
Zodra een spraakagent echte gesprekken beantwoordt, verandert de vraag van werkt het naar werkt het goed. Veel teams beantwoorden die met een vage indruk van een handvol gesprekken. Een beetje structuur levert veel betere informatie op en vertelt u wat u vervolgens moet verbeteren.

Deze gids biedt een eenvoudige evaluatieaanpak voor een telefonische spraakagent: welke meetwaarden u volgt, hoe u gesprekken handmatig beoordeelt en hoe u bevindingen omzet in verbeteringen. Hij bouwt voort op Een voice-AI-agent testen en de algemene meetwaarden in KPI's voor het callcenter.
Begin bij wat goed voor u betekent
Een goed gesprek voor een restaurant is niet hetzelfde als een goed gesprek voor een praktijk. Schrijf vóór het kiezen van meetwaarden in een of twee zinnen op hoe een geslaagd gesprek eruitziet voor elk type gesprek dat u verwacht: de vraag van de beller is beantwoord, er is een bericht met de juiste gegevens aangenomen, of de beller heeft de juiste persoon bereikt. Al het andere volgt uit die definities.
Vijf vragen die elke evaluatie stelt
- Werd de beller begrepen?Verstond de agent de vraag en de gegevens correct?
- Was het antwoord juist?Was het nauwkeurig, binnen de goedgekeurde informatie en zonder verzinsels?
- Kwam het gesprek tot een nuttig einde?Werd de taak uitgevoerd, een bericht aangenomen of een overdracht gedaan?
- Was de ervaring acceptabel?Tempo, toon, herhalingen en moeite voor de beller.
- Was het veilig?Respecteerde de agent zijn grenzen en droeg hij over wanneer dat moest?
Meetwaarden die het volgen waard zijn
| Meetwaarde | Wat het u vertelt | Hoe u eraan komt |
|---|---|---|
| Voltooide taken | Het aandeel gesprekken waarin het doel van de beller werd bereikt | Menselijke beoordeling van een steekproef, plus gespreksuitkomsten |
| Nauwkeurigheid van antwoorden | Of uitspraken overeenkwamen met goedgekeurde informatie | Menselijke beoordeling aan de hand van uw bronnen |
| Overdrachtspercentage | Hoe vaak bellers om een mens vragen of er een nodig hebben | Gespreksresultaten en verzoeken in de helpdesk |
| Herhalingspercentage | Hoe vaak de agent de beller vroeg iets opnieuw te zeggen | Beoordeling van transcripties |
| Reactiepauze | Tijd tussen het einde van de beurt van de beller en het antwoord van de agent | Timing per beurt in de gespreksgeschiedenis |
| Afbreekpercentage | Bellers die ophangen voordat er een uitkomst is | Gesprekslog |
| Feedback van bellers | Hoe mensen het gesprek ervoeren | Korte enquêtes of opmerkingen achteraf |
Merk op dat de meeste nuttige meetwaarden enig menselijk oordeel vragen. Tellingen uit een log vertellen u hoeveel, maar alleen iemand die het gesprek leest, kan zeggen of het goed ging. Reken op een mix van beide. Voor meetwaarden die voor elk soort gesprek gelden, zie First Call Resolution en Beantwoordingspercentage en afbreekpercentage.
Gesprekken handmatig beoordelen
Een kleine, regelmatige steekproef werkt beter dan af en toe een grote beoordeling. Kies willekeurige gesprekken, plus een paar die opvallen, zoals heel korte of heel lange gesprekken, gesprekken die eindigden in een overdracht en gesprekken waarin de beller ophing.
Een routine voor gespreksbeoordeling
- SelecteerKies elke week een vast aantal gesprekken, een mix van willekeurige en opvallende.
- Luister en leesSpeel de opname af en lees tegelijk de transcriptie.
- ScoorBeoordeel elk gesprek aan de hand van uw criteria op een eenvoudige schaal.
- Noteer oorzakenSchrijf op waarom iets misging.
- Herstel en test opnieuwWijzig de bron, prompt of instelling en test daarna hetzelfde geval opnieuw.
Houd het scoren eenvoudig
Drie niveaus zijn genoeg: goed, acceptabel en slecht, of juist, gedeeltelijk en fout voor afzonderlijke uitspraken. Fijnmazige schalen leiden tot discussies zonder extra inzicht. Laat af en toe twee mensen een handvol dezelfde gesprekken scoren; zijn ze het vaak oneens, dan hebben uw criteria scherpere formuleringen nodig.
Onthoud dat transcripties fout kunnen zijn
De transcriptie is de gok van de herkenner, niet de waarheid. Ziet een transcriptie er vreemd uit, luister dan naar de audio voordat u de agent de schuld geeft. Zie Waarom telefoonaudio lastig is voor spraakherkenning.
Snelheid en ritme meten
Bellers merken vertraging meer op dan bijna elke andere factor. Houd de pauze vóór elk antwoord bij en kijk naar de slechtste gevallen, niet alleen naar het gemiddelde, want een paar heel lange pauzes bederven de indruk. Zijn de pauzes lang, zoek dan uit waar de tijd naartoe gaat; Latentie bij voice-AI laat zien hoe. Let ook op onderbrekingen: hoe vaak praatte de agent door de beller heen, en hoe vaak liet hij de beller wachten?
Handmatige beoordeling of automatische scoring
Een methode kiezen
| Handmatige beoordeling | Geautomatiseerd scoren | |
|---|---|---|
| Sterk punt | Begrijpt nuance, toon en context | Dekt elk gesprek snel af |
| Zwak punt | Traag; alleen een steekproef | Kan subtiele problemen missen of verkeerd inschatten |
| Het meest geschikt voor | Nauwkeurigheid, veiligheid en ervaring van de beller | Gesprekken markeren die een menselijke blik verdienen |
Geautomatiseerd scoren, inclusief modellen die andere modellen beoordelen, is nuttig voor triage: het kan gesprekken rangschikken op tekenen van problemen, zodat mensen eerst naar de juiste kijken. Het mag menselijke steekproeven niet vervangen, vooral niet voor nauwkeurigheid en veiligheid. Welke geautomatiseerde controle u ook gebruikt, test haar door haar oordelen te vergelijken met die van uzelf op een set gesprekken die u al heeft beoordeeld.
De cijfers verstandig lezen
Kleine steekproeven misleiden. Beoordeelt u tien gesprekken en gingen er twee slecht, dan kunt u niet zeggen dat één op de vijf gesprekken slecht gaat; u kunt alleen zeggen dat u twee problemen vond die het oplossen waard zijn. Gebruik steekproeven om oorzaken te vinden, niet om percentages aan te kondigen, tenzij de steekproef groot en willekeurig genoeg is om dat te dragen.
Scheid de agent van de situatie. Een daling in voltooide taken in een week met een storing is geen oordeel over de prompt. Noteer gebeurtenissen naast uw meetwaarden: een nieuwe openingstijd, een campagne die bellers met een nieuwe vraag opleverde, een wijziging in de bronnen. Een eenvoudig logboek van wijzigingen maakt de trends verklaarbaar.
Bepaal tot slot vooraf wat u met elk resultaat doet. Een toename van herhalingen kan reden zijn om naar de stilte-instellingen te kijken; een toename van overdrachten over één onderwerp kan reden zijn om daarvoor een exact antwoord toe te voegen. Een meetwaarde zonder gekoppelde actie is alleen maar decoratie.
Deel de resultaten met de mensen die de telefoon opnemen, niet alleen met managers. Medewerkers weten vaak waarom een patroon bestaat, en zij zijn degenen die de gesprekken oppakken die de agent overdraagt. Een korte maandelijkse evaluatie met voorbeelden, waaronder een paar gesprekken die goed gingen, houdt het werk verankerd in echte gesprekken.
Evalueren in Call
In Call toont de AI-gespreksgeschiedenis de gesprekken van een periode, met het resultaat en, als dat bekend is, het sentiment, en opent ze het hele gesprek beurt voor beurt. Managers kunnen een gesprek openen om te zien hoe lang elke gesproken beurt duurde. Het onderdeel Automatische beoordeling groepeert recente gesprekken per onderwerp, rangschikt recente gesprekken zonder menselijke beoordeling op de signalen die ze bevatten en biedt een steekproef van AI-samenvattingen aan die u kunt markeren als juist, gedeeltelijk of fout, wat een doorlopend beeld van de nauwkeurigheid van samenvattingen oplevert. Met Gespreks-AI kunt u bovendien alle bewaarde transcripties doorzoeken op een zinsdeel. Samen geven ze u de tellingen en steekproeven die u nodig heeft. Gebruik de bewerkingsgeschiedenis om correcties op de formuleringen van de agent te zien.
Een wekelijkse evaluatiechecklist
- Lees een vaste steekproef van gesprekken, willekeurig en opvallend
- Scoor voltooide taken en nauwkeurigheid
- Tel overdrachten en noteer waarom ze plaatsvonden
- Controleer de langste reactiepauzes
- Doorzoek transcripties op zinsdelen die op verwarring wijzen
- Leg elk probleem en de doorgevoerde oplossing vast
- Test opgeloste gevallen opnieuw voordat u ze afsluit
Veelgestelde vragen
Wat is de allernuttigste meetwaarde voor een spraakagent?
Die is er niet. Voltooide taken vertellen u of bellers kregen wat ze nodig hadden, maar u heeft ook nauwkeurigheid, kwaliteit van overdrachten en timing nodig om te zien waarom.
Hoeveel gesprekken moet ik beoordelen?
Een vaste wekelijkse steekproef die u kunt volhouden, is beter dan af en toe een grote. Begin met een bescheiden aantal en verhoog het na wijzigingen bij de lancering of als er problemen opduiken.
Kan ik alleen op geautomatiseerd scoren vertrouwen?
Niet voor nauwkeurigheid of veiligheid. Gebruik het om gesprekken te rangschikken en te markeren, en laat mensen de gemarkeerde gesprekken en een willekeurige steekproef beoordelen.
Waarom wijken transcripties soms af van de opname?
De transcriptie wordt gemaakt door spraakherkenning en kan fouten bevatten. Luister naar de audio voordat u de agent beoordeelt.
Hoe weet ik of een wijziging iets heeft verbeterd?
Houd een vaste set testgevallen en een regelmatige beoordelingsroutine aan, en vergelijk de resultaten voor en na de wijziging met dezelfde criteria.
Moeten bellers een enquête krijgen?
Een korte vraag na het gesprek kan nuttige informatie opleveren, maar houd het kort en respecteer eventuele regels voor het benaderen van mensen. Combineer het met uw eigen beoordeling van het gesprek.