Röst-AI-teknik

Så testar du en röst-AI-agent före lansering: en praktisk plan

En plan steg för steg för att testa en röst-AI-agent för telefon före lansering: manus, korrekthet, hörsel, flöde, överlämning, loggar och ett tydligt beslut.

Redaktionen för Call · Publicerad · 5 min läsning

En röstagent som svarar bra på ett tyst kontor, framför den som byggde den, kan bete sig helt annorlunda i ett gathörn med en uppringare som mumlar. De flesta lanseringsproblem är inte mystiska: det är saker som ingen provade. En strukturerad testplan hittar dem medan de fortfarande är billiga att åtgärda.

En kvalitetstestare med headset som kontrollerar ett samtalsmanus på en bärbar dator
Illustrationsbild

Den här guiden ger dig en praktisk plan: vad du förbereder, de sex områdena att testa, hur du bedömer resultaten och vad du gör efter lanseringen. Till sist visar vi verktygen i Call. För måtten bakom bedömningen, se Mått för utvärdering av röst-AI.

Förbered testet

Börja med listan över riktiga samtal. Samla de frågor som folk faktiskt ställer, från mejl, personalens minne och samtalsanteckningar. Lägg till de besvärliga: den arga uppringaren, den vaga uppringaren, den som ber om något ni inte erbjuder. En bra testuppsättning blandar vanliga, ovanliga och svåra fall.

Från manus till lansering

  1. Skriv testmanusRiktiga frågor, med rätt svar för var och en.
  2. Testa innehålletSvarar agenten rätt och håller den sig inom ramarna.
  3. Testa hörselnFörstår den namn, siffror och dialekter.
  4. Testa flödetRör sig samtalet naturligt och avslutas det bra.
  5. Testa överlämningenFungerar önskemål om att tala med en person och brådskande fall.
  6. Kontrollera posternaÄr sammanfattningar, meddelanden och loggar korrekta.
  7. BeslutaJämför resultaten med godkännanderegeln och välj.

Bestäm vem som testar. Ta med personer som inte byggde agenten, eftersom de frågar på oväntade sätt. Om era uppringare talar med regionala dialekter eller på flera språk, ta med de rösterna också.

Testa innehållet

Den första frågan är om agenten säger sanna saker. Ställ varje fråga på listan och jämför med rätt svar. Markera varje svar som rätt, delvis rätt, fel eller påhittat. Ett påhittat svar, där agenten påstår något den aldrig har fått, är viktigast, eftersom uppringare tror på det.

Se Hallucinationer i röst-AI för varför påhittade svar uppstår och Kunskapshämtning för röstagenter för hur kunskapen används.

Testa vad den hör

Röstagenter fallerar ofta i lyssningssteget. Namn, postnummer, telefonnummer och datum är de vanliga problemen. Testa med riktiga telefoner, inte bara med en datormikrofon, och ta med bakgrundsljud, högtalartelefon och dålig mobiltäckning.

KontrollHurVad du letar efter
NamnStava och säg ovanliga namnRätt uppfattat eller en artig begäran om upprepning
SiffrorLäs upp ett telefonnummer och ett datumRätt siffror, och en återläsning
DialekterBe kollegor med olika dialekterFärre missförstånd och smidig återhämtning
BullerRing från en livlig platsInga falska utlösningar, och tydliga begäranden om upprepning

Siffror och namn i röst-AI och Taligenkänning på telefonljud förklarar de här problemen mer ingående.

Testa samtalets flöde

Innehållet kan vara rätt och samtalet ändå klumpigt. Lyssna på inledningen, tempot, om agenten pratar i mun på uppringaren, hur den hanterar tystnad och hur den avslutar. Avbryt den, var tyst, säg ”hallå?” och ändra dig mitt i.

Flödesbeteenden att prova

  • AvbrytaPrata i mun på agenten och kontrollera att den slutar och lyssnar.
  • TystnadSäg ingenting och kontrollera att den artigt ber om svar och sedan avslutar på ett vettigt sätt.
  • Ändra sigByt ämne mitt i ett svar och kontrollera att den följer med.
  • AvslutaSäg tack och hej och kontrollera att samtalet avslutas snyggt.

Hastigheten hör också hit. Notera långa pauser och vad som orsakade dem.Latens i röst-AI förklarar de vanliga orsakerna.

Testa överlämning och säkerhet

Varje röstagent behöver en väg till en människa för förfrågningar den inte kan eller inte bör hantera. Testa den under alla förhållanden: under öppettid, utanför öppettid, när ingen svarar och när uppringaren är upprörd. Prova brådskande fraser. Kontrollera att agenten aldrig påstår sig vara en människa och aldrig lovar sådant den inte kan leverera, som en bekräftad bokning.

Kontroller av överlämning

  • Att be om en person under öppettid når rätt personer
  • Att be om en person utanför öppettid ger ett ärligt meddelande och ett sätt att lämna sina uppgifter
  • Om ingen svarar kan uppringaren lämna ett meddelande
  • Brådskande eller upprörda uppringare kopplas snabbt vidare
  • Agenten säger att den är en AI när den får frågan
  • Känsliga uppgifter samlas inte in när de inte ska samlas in

Testa poster och loggar

Ett samtal har två utfall: det uppringaren upplevde och det ni registrerar. Kontrollera efter varje test sammanfattningen, transkriptionen, meddelandet som lämnades och eventuella uppföljningsuppgifter. Är namn och nummer rätt? Anges orsaken till samtalet korrekt? Hittar sammanfattningen på något? Ett perfekt samtal med en felaktig post skickar ändå teamet åt fel håll. SeAI-sammanfattningar av samtal.

Godkänt eller underkänt

Innan du börjar, skriv regeln som avgör om agenten får lanseras. Den kan vara enkel: inga påhittade svar i testuppsättningen, varje överlämningsfall fungerar och en angiven andel av de vanliga frågorna besvaras rätt. Att ha den skriftligt förhindrar en lansering som drivs av tidspress.

Lanseringsbeslut

Godkännanderegel skriven förstBedömt i efterhand
TydlighetAlla känner till ribbanRibban flyttas med stämningen
PressLätt att säga inte änSvårt att stå emot en deadline
LärandeFel pekar mot åtgärderFel blir diskussioner
DokumentationResultaten kan jämföras över tidInget att jämföra med

För en logg över varje test: datum, agentens version, testaren, frågan, resultatet och åtgärden. När du ändrar prompten eller kunskapen, upprepa de tidigare testerna, eftersom rättelser ibland förstör andra saker.

Det lönar sig också att testa de tysta felen, som ingen uppringare klagar på men som kostar er över tid. Kontrollera att ett samtal som avslutas tidigt ändå ger en vettig post, att en uppringare som lägger på mitt i en mening inte lämnar efter sig en halvfärdig uppgift, och att återkommande uppringare hanteras konsekvent. De här fallen finns sällan med i en första testplan, men de utgör en förvånansvärt stor del av den verkliga trafiken.

Efter lanseringen

Testningen tar inte slut när agenten går live. Börja i begränsad omfattning, till exempel utanför öppettid eller vid överflöde, lyssna på ett urval av riktiga samtal varje dag den första veckan och utöka när du känner dig trygg. Gå igenom frågorna den inte kunde besvara och lägg sedan till den kunskap som saknas. Ha ett sätt att gå tillbaka till en tidigare version om en ändring gör saker sämre.Din AI-receptionists första vecka är en bra följeslagare.

Testa i Call

Call ger dig flera sätt att testa en AI-agent innan uppringarna gör det.Testytan under AI-agenter låter dig chatta med en agent, visar hur många kunskapsanteckningar som matchade varje svar och listar dem, och låter dig betygsätta ett svar eller lära den ett bättre. Agentens Testsamtal ringer din egen telefon via dess linje, så att du hör den som en uppringare gör; varje sådant test är ett riktigt, debiterat samtal. Installationsguiden erbjuder också att tala på skärmen, ett samtal till din telefon och att låta agenten ringa ett nummer. En beredskapskontroll, som körs utan att någon rings upp, rapporterar vad ett AI-samtal från linjen fortfarande behöver.

Övningssamtal, under AI-agenter, Vad den lärt sig, låter AI-uppringare ringa dina agenter på japanska och engelska. Varje samtal bedöms, och lärdomarna väntar på din granskning, så inget ändras utan dig. Innan en riskabel ändring, spara en återställningspunkt på agenten så att du kan gå tillbaka, och använd Sätt live eller Sätt som utkast för att styra när agenten svarar. SeStälla in en AI-agent i Call för själva inställningen.

Vanliga frågor

Hur många testsamtal räcker?

Tillräckligt många för att täcka varje vanlig fråga, varje överlämningsfall och ett urval av svårt beteende. För en liten agent kan det vara tiotals samtal; fortsätt tills nya tester slutar hitta nya problem.

Vem ska testa agenten?

Personer som inte byggde den, även sådana med andra dialekter och telefonvanor. De frågar på sätt som byggaren aldrig tänker på.

Ska jag testa i en riktig telefon?

Ja. Telefonljud är smalbandigare och brusigare än datorljud, och många problem syns bara på en riktig linje.

Vad räknas som ett allvarligt fel?

Ett påhittat svar som framförs med säkerhet, en överlämning som misslyckas eller en post som skickar teamet åt fel håll. Sådant bör stoppa lanseringen.

Behöver jag testa om efter små ändringar?

Ja, åtminstone en kärnuppsättning. Små ändringar av prompten eller kunskapen kan ändra svar på andra ställen.

Vad ska jag bevaka efter driftstart?

Lyssna på ett urval av samtal dagligen i början, notera frågor den inte kunde besvara och följ överlämningar och klagomål. Förbättra kunskapen varje vecka.

Gör testsamtal och övningssamtal med din AI-agent i Call

I demokonsolen kan du prova inkommande samtal i en simulering.

Relaterade guider