Een AI-spraakagent testen vóór de lancering: een praktisch plan
Een stappenplan om een AI-spraakagent voor de telefoon te testen: scripts, juistheid, verstaan, gespreksverloop, doorverbinden, logging en een helder oordeel.
Een spraakagent die in een stil kantoor goed antwoordt, in het bijzijn van degene die hem bouwde, kan zich heel anders gedragen op een straathoek met een beller die binnensmonds praat. De meeste problemen bij de lancering zijn geen raadsel: het zijn dingen die niemand heeft geprobeerd. Een gestructureerd testplan vindt ze zolang ze nog goedkoop te verhelpen zijn.

Deze gids geeft u een praktisch plan: wat u voorbereidt, de zes gebieden om te testen, hoe u resultaten beoordeelt en wat u na de lancering doet. Tot slot ziet u de hulpmiddelen in Call. Voor de metrics achter de beoordeling, zie Evaluatiemetrics voor voice AI.
De test voorbereiden
Begin met de lijst van echte gesprekken. Verzamel de vragen die mensen werkelijk stellen, uit e-mails, het geheugen van medewerkers en gespreksnotities. Voeg de lastige toe: de boze beller, de vage beller, de beller die vraagt naar iets wat u niet aanbiedt. Een goede testset mengt veelvoorkomende, zeldzame en moeilijke gevallen.
Van script tot lancering
- Schrijf testscriptsEchte vragen, elk met het juiste antwoord.
- Test de inhoudAntwoordt de agent correct en blijft hij binnen de grenzen?
- Test het verstaanBegrijpt hij namen, getallen en accenten?
- Test het verloopLoopt het gesprek natuurlijk en eindigt het goed?
- Test het doorverbindenWerken verzoeken om een medewerker en urgente gevallen?
- Controleer de registratieKloppen samenvattingen, berichten en logs?
- BesluitVergelijk de resultaten met de slaagregel en maak een keuze.
Bepaal wie test. Betrek mensen die de agent niet hebben gebouwd, want zij vragen op onverwachte manieren. Spreken uw bellers met regionale accenten of in meerdere talen, neem die stemmen dan ook mee.
De inhoud testen
De eerste vraag is of de agent ware dingen zegt. Stel elke vraag op uw lijst en vergelijk met het juiste antwoord. Markeer elk antwoord als juist, deels juist, fout of verzonnen. Een verzonnen antwoord, waarbij de agent iets beweert wat hij nooit heeft gekregen, weegt het zwaarst, omdat bellers het geloven.
- Stel dezelfde vraag in andere woorden.
- Vraag naar dingen die niet in de kennis staan en controleer of de agent toegeeft dat hij het niet weet.
- Vraag om iets wat hij moet weigeren, zoals advies of gegevens van andere klanten.
- Probeer hem op het verkeerde been te zetten met een zelfverzekerde onjuiste bewering, en controleer of hij niet gewoon instemt.
Zie Hallucinaties bij voice AI voor de reden waarom verzonnen antwoorden ontstaan en Retrieval voor spraakagents voor hoe kennis wordt gebruikt.
Testen wat hij verstaat
Spraakagents gaan vaak mis bij het luisteren. Namen, postcodes, telefoonnummers en datums zijn de gebruikelijke struikelblokken. Test met echte telefoons, niet alleen met een computermicrofoon, en neem achtergrondgeluid, de luidspreker en slechte mobiele ontvangst mee.
| Controle | Hoe | Waar u op let |
|---|---|---|
| Namen | Spel en zeg ongebruikelijke namen | Correct vastgelegd of een beleefd verzoek om te herhalen |
| Getallen | Lees een telefoonnummer en een datum voor | Juiste cijfers, en een herhaling ter controle |
| Accenten | Vraag collega's met verschillende accenten | Minder misverstanden en een soepel herstel |
| Geluid | Bel vanaf een drukke plek | Geen valse triggers, en duidelijke verzoeken om te herhalen |
Getallen en namen bij voice AI en Spraakherkenning op telefoonaudio gaan dieper op deze problemen in.
Het gespreksverloop testen
De inhoud kan kloppen terwijl het gesprek toch stroef loopt. Let op de opening, het tempo, of de agent door de beller heen praat, hoe hij met stilte omgaat en hoe hij afsluit. Onderbreek hem, blijf stil, zeg "hallo?" en bedenk u halverwege.
Gedrag in het gesprek om te proberen
- OnderbrekenPraat door de agent heen en controleer of hij stopt en luistert.
- StilteZeg niets en controleer of hij beleefd aanspoort en daarna verstandig afsluit.
- Van gedachten veranderenWissel midden in een antwoord van onderwerp en controleer of hij meegaat.
- AfsluitenBedank en neem afscheid, en controleer of het gesprek netjes eindigt.
Ook snelheid hoort hierbij. Noteer lange pauzes en wat ze veroorzaakte. Latency bij voice AI legt de gebruikelijke oorzaken uit.
Doorverbinden en veiligheid testen
Elke spraakagent heeft een route naar een medewerker nodig voor verzoeken die hij niet kan of mag afhandelen. Test die onder elke omstandigheid: tijdens openingstijden, daarbuiten, als niemand opneemt en als de beller van streek is. Probeer urgente formuleringen. Controleer dat de agent nooit beweert een mens te zijn en nooit iets belooft wat hij niet kan waarmaken, zoals een bevestigde boeking.
Controles voor doorverbinden
- Vragen naar een medewerker tijdens openingstijden komt bij de juiste mensen terecht
- Vragen buiten openingstijden levert een eerlijke melding en een manier om gegevens achter te laten op
- Als niemand opneemt, kan de beller een bericht achterlaten
- Urgente of overstuur rakende bellers worden snel doorgezet
- De agent maakt zich als AI bekend wanneer daarnaar wordt gevraagd
- Gevoelige gegevens worden niet verzameld als dat niet mag
Registratie en logs testen
Een gesprek heeft twee uitkomsten: wat de beller ervoer en wat u vastlegt. Controleer na elke test de samenvatting, het transcript, het achtergelaten bericht en eventuele vervolgtaken. Kloppen namen en nummers? Is de reden van het gesprek juist weergegeven? Verzint de samenvatting iets? Een perfect gesprek met een onjuiste registratie stuurt het team alsnog de verkeerde kant op. Zie AI-gesprekssamenvattingen.
Besluiten: geslaagd of niet
Leg vóór de start de regel vast die bepaalt of de agent live mag. Die kan eenvoudig zijn: geen verzonnen antwoorden in de testset, elk doorverbindgeval werkt en een vastgesteld aandeel van de veelvoorkomende vragen wordt juist beantwoord. Wie het op papier heeft, voorkomt een lancering die door deadlinedruk wordt gedreven.
Lanceringsbesluiten
| Slaagregel vooraf vastgelegd | Achteraf beoordeeld | |
|---|---|---|
| Duidelijkheid | Iedereen kent de lat | De lat beweegt mee met de stemming |
| Druk | Makkelijk om "nog niet" te zeggen | Moeilijk om een deadline te weerstaan |
| Leren | Fouten wijzen naar oplossingen | Fouten worden discussies |
| Vastlegging | Resultaten zijn in de tijd te vergelijken | Niets om mee te vergelijken |
Houd een logboek bij van elke test: datum, versie van de agent, beller, vraag, resultaat en oplossing. Herhaal bij een wijziging van de prompt of de kennis de eerdere tests, omdat een oplossing soms iets anders kapotmaakt.
Het loont ook om de stille fouten te testen, waar geen beller over klaagt maar die u op termijn geld kosten. Controleer dat een gesprek dat vroeg eindigt toch een zinnige registratie oplevert, dat een beller die midden in een zin ophangt geen half afgemaakte taak achterlaat, en dat terugkerende bellers consequent worden behandeld. Deze gevallen staan zelden in een eerste testplan, maar vormen een verrassend groot deel van het echte verkeer.
Na de lancering
Testen stopt niet wanneer de agent live gaat. Begin met een beperkte inzet, zoals buiten kantoortijden of bij overloop, luister in de eerste week dagelijks naar een steekproef van echte gesprekken en breid uit zodra u er vertrouwen in hebt. Bekijk de vragen die hij niet kon beantwoorden en vul de ontbrekende kennis aan. Houd een manier achter de hand om terug te gaan naar een eerdere versie als een wijziging iets verslechtert. De eerste week van uw AI-receptionist is een goede aanvulling.
Testen in Call
Call biedt u verschillende manieren om een AI-agent te testen voordat bellers dat doen. Met de Playground onder AI agents chat u met een agent, ziet u hoeveel kennisnotities bij elk antwoord pasten en welke dat waren, en kunt u een antwoord beoordelen of een beter antwoord aanleren. De Test call van de agent belt uw eigen telefoon via zijn lijn, zodat u hem hoort zoals een beller; elke zo'n test is een echt, betaald gesprek. De installatiewizard biedt ook spreken op het scherm, een gesprek naar uw telefoon en de agent een nummer laten bellen. Een gereedheidscontrole, uitgevoerd zonder iemand te bellen, meldt wat een AI-gesprek vanaf de lijn nog nodig heeft.
Practice calls, onder AI agents, What it learned, laten AI-bellers uw agents in het Japans en Engels bellen. Elk gesprek krijgt een beoordeling, en de lessen wachten op uw goedkeuring, zodat er niets verandert zonder u. Sla vóór een riskante wijziging een restore point op voor de agent, zodat u kunt terugdraaien, en bepaal met Set live of Set to draft wanneer de agent opneemt. Zie Een AI-agent instellen in Call voor de inrichting zelf.
Veelgestelde vragen
Hoeveel testgesprekken zijn genoeg?
Genoeg om elke veelvoorkomende vraag, elk doorverbindgeval en een steekproef van lastig gedrag te dekken. Voor een kleine agent kunnen dat tientallen gesprekken zijn; ga door tot nieuwe tests geen nieuwe problemen meer opleveren.
Wie moet de agent testen?
Mensen die hem niet hebben gebouwd, onder wie mensen met andere accenten en belgewoonten. Zij vragen op manieren waaraan de bouwer nooit denkt.
Moet ik op een echte telefoon testen?
Ja. Telefoonaudio is smaller en ruisiger dan computeraudio, en veel problemen verschijnen pas op een echte lijn.
Wat geldt als een ernstige fout?
Een verzonnen antwoord dat zelfverzekerd wordt gebracht, een mislukte doorverbinding of een registratie die het team de verkeerde kant op stuurt. Deze zouden de lancering moeten tegenhouden.
Moet ik na kleine wijzigingen opnieuw testen?
Ja, op zijn minst een kernset. Kleine wijzigingen aan de prompt of kennis kunnen antwoorden elders veranderen.
Waar moet ik na de livegang op letten?
Luister in het begin dagelijks naar een steekproef van gesprekken, noteer vragen die hij niet kon beantwoorden en volg doorverbindingen en klachten. Verbeter de kennis elke week.