Apeluri de exercițiu: testați agentul AI înainte de lansare
Cum vă permit apelurile simulate să testați un agent telefonic AI pe cazuri dificile, cum citiți notele și lecțiile și cum transformați constatările în corecturi.
Orice echipă care a instruit colegi noi știe că prima săptămână la telefon este cea mai riscantă. Noul coleg cunoaște regulile, dar nu a întâlnit încă apelantul care vorbește peste el, pe cel care schimbă subiectul în mijlocul propoziției sau pe cel care vrea doar pe cineva de învinovățit. Echipele bune repetă aceste momente prin jocuri de rol înainte de situația reală.

Un agent telefonic AI are nevoie de aceeași repetiție și poate avea mult mai multă, mult mai repede. Acest ghid explică cum concepeți exercițiile, cum citiți rezultatele și cum aplicați lecțiile. Pornește de la configurarea unui agent AI și scrierea unor prompturi care funcționează.
De ce să exersați înainte de lansare
Primele apeluri reale modelează părerea clienților despre întregul serviciu. Un agent care aude greșit un nume, vorbește peste apelant sau inventează un răspuns costă mai mult decât un apel pierdut, pentru că acum clientul are o poveste de spus. Exercițiul găsește aceste probleme cât timp singurul public este propria echipă.
- Acoperire. Puteți testa zeci de apeluri într-un lot, inclusiv unele neobișnuite, care s-ar putea să nu apară în primele săptămâni.
- Repetabilitate. După ce modificați un prompt, rulați același tip de lot și comparați.
- Siguranță. Greșelile nu costă nimic în relația cu clienții reali.
- Dovezi. Scorurile și marcajele vă oferă ceva de discutat în afara opiniilor.
Exercițiul nu este o dovadă. Un scor bun cu apelanți simulați nu înseamnă că apelanții reali se vor comporta la fel, iar comportamentul vocal live poate diferi de o simulare. Tratați un rezultat bun ca pe o permisiune de a încerca cu prudență apeluri reale, nu ca pe un certificat.
Ce să testați
Valoarea unui lot depinde de situațiile pe care le acoperă. Combinați deliberat cazurile ușoare cu cele dificile.
Scenarii care scot la iveală punctele slabe
- ÎntreruperiUn apelant care vorbește peste agent. Se oprește și ascultă sau merge înainte?
- Schimbarea limbiiUn apelant care începe într-o limbă și trece la alta. Îl urmează agentul?
- Cererea unei persoaneApelantul spune „vreau să vorbesc cu cineva”. Este predarea clară și promptă?
- Întrebări despre prețUn apelant întreabă cât costă. Răspunde agentul doar cu ce știe și evită să ghicească?
- ReclamațiiUn apelant supărat. Rămâne agentul calm și oferă un pas următor?
- Întrebări obișnuiteÎntrebări preluate din propria bază de cunoștințe a agentului. Sunt răspunsurile corecte și scurte?
Echilibrul contează. Un lot doar cu cazuri dificile va arăta mereu prost și va spune puțin despre performanța de zi cu zi; un lot doar cu întrebări ușoare va flata un agent care cedează sub presiune. O combinație a celor două este de obicei cel mai informativ început.
Rularea unui lot de exercițiu în Call
În Call, exercițiile se află în AI agents, la What it learned, în fila Practice calls. Apelanți AI vă sună agenții AI într-o simulare, în japoneză și engleză, iar fiecare apel primește o notă. Alegeți agenții (cel mult zece odată; un agent care încă nu poate răspunde la apeluri apare estompat), câte apeluri în japoneză și în engleză să primească fiecare (de la zero la douăzeci și cinci din fiecare) și combinația de scenarii.
| Combinația de scenarii | Ce acoperă | Când o folosiți |
|---|---|---|
| Balanced | Fiecare caz dificil o dată, restul întrebări din baza de cunoștințe a agentului | Testați un agent nou pentru prima dată |
| Knowledge base | Doar întrebări extrase din ce știe agentul | I-ați modificat cunoștințele și vreți să verificați acuratețea |
| Edge cases | Doar cazurile dificile | I-ați modificat regulile de comportament sau promptul |
Rularea unui lot
- Deschideți Practice callsAccesați AI agents, apoi What it learned, apoi Practice calls.
- Alegeți agenții și numărul de apeluriBifați agenții și setați numărul de apeluri în fiecare limbă.
- Alegeți o combinațieBalanced, Knowledge base sau Edge cases.
- Porniți lotulNumărul de lângă buton este totalul: agenții înmulțiți cu apelurile din ambele limbi.
- Urmăriți progresulLista se actualizează singură; deschideți un lot pentru a vedea scorurile și rezultatele apelurilor.
Butonul de pornire rămâne estompat la zero apeluri sau peste un total de trei sute, așa că testele mari se rulează în tranșe. Puteți și anula un lot care așteaptă sau rulează; apelurile neîncepute sunt anulate, iar un apel aflat deja în desfășurare se încheie. Puteți activa vocea pentru un lot, ca să adăugați un buton de redare la fiecare replică, iar sunetul este generat doar când îl apăsați.
Citirea rezultatelor
Deschideți un lot încheiat și începeți cu rezumatul, nu cu o transcriere izolată. Totalurile arată apelurile efectuate, scorul mediu, răspunsurile corectate, întrebările care au nevoie de un răspuns și sfaturile de stil. Dedesubt urmează scorul pe criterii, problemele principale, cu media fiecărui agent, și un tabel al apelurilor cu scenariul, limba, scorul și marcajele.
- Uitați-vă la scorul pe criterii pentru a găsi zona cea mai slabă.
- Citiți problemele principale; dacă una apare la mai mulți agenți, probabil ține de un prompt sau de o regulă comună.
- Sortați apelurile după scor și citiți integral cele mai slabe trei transcrieri.
- Citiți nota evaluatorului la fiecare replică, nu doar nota finală.
- Comparați limbile; o diferență poate însemna că o limbă are nevoie de propria formulare.
Aplicarea lecțiilor
Exercițiul produce lecții, iar acestea așteaptă verificarea dumneavoastră, în loc să modifice automat agentul. Puteți aplica sau respinge fiecare lecție. Răspunsurile corectate și întrebările care au nevoie de un răspuns așteaptă și ele în Suggestions. Este intenționat: o persoană decide ce trebuie să învețe agentul.
Verificarea lecțiilor
- Corespunde lecția politicii și tonului dumneavoastră
- Este răspunsul corectat cu adevărat corect, nu doar plauzibil
- Se aplică tuturor apelanților sau doar acestui scenariu
- Se contrazic două lecții între ele
- Are agentul nevoie de o intrare nouă în baza de cunoștințe, nu de o modificare a promptului
După aplicarea modificărilor, rulați din nou un lot mic și comparați. Schimbați un singur lucru odată, unde puteți, altfel nu veți ști ce modificare a ajutat. Consultați sursele de cunoștințe pentru a vedea unde trebuie puse răspunsurile factuale.
Un ritm de exercițiu rezonabil
Exercițiul aduce cele mai multe beneficii când devine un obicei, nu un eveniment izolat. Legați loturile de momentele în care se schimbă ceva.
| Moment | Ce rulați | Ce urmăriți |
|---|---|---|
| Agent nou, înainte de lansare | Un lot echilibrat în fiecare limbă în care lucrați | Criteriile slabe, comportamentul la predare |
| După o modificare de prompt sau de regulă | Un lot cu cazuri dificile | Dacă modificarea a rezolvat problema fără să strice altceva |
| După adăugarea de cunoștințe | Un lot pe baza de cunoștințe | Răspunsuri corecte și scurte, fără fapte inventate |
| Înaintea unei perioade aglomerate | Un lot echilibrat pe liniile care vor fi cele mai ocupate | Stabilitatea la o combinație tipică de întrebări |
| După o problemă într-un apel real | Un lot care imită eșecul | Dacă remedierea rezistă |
Țineți un jurnal scurt: data, ce ați modificat, lotul rulat și rezultatul principal. După câteva luni, acest istoric arată ce modificări au ajutat și vă ferește de repetarea unui experiment care a eșuat deja.
O clinică ipotetică ar putea rula un lot echilibrat pentru agentul de recepție înainte de deschiderea noii linii, un lot cu cazuri dificile după adăugarea unei reguli despre simptome urgente și un lot pe baza de cunoștințe ori de câte ori se schimbă programul sau serviciile. Trei loturi mici, rulate la momentele potrivite, spun mai mult decât un singur test uriaș rulat o dată.
Dincolo de simulare
O simulare este o repetiție. Înainte de lansare, faceți și un apel de test real către propriul telefon și ascultați așa cum ar asculta un client. Lansați cu prudență: începeți cu o linie cu risc scăzut sau cu un program limitat, păstrați o cale simplă către o persoană (consultați predarea unui apel către o persoană) și ascultați zilnic primele apeluri reale. Pentru agenții umani se aplică aceeași idee; consultați un cadru de coaching pentru repetiții și feedback cu oameni.
Întrebări frecvente
Sunt apelurile de exercițiu apeluri telefonice reale?
Sunt apeluri simulate în care apelanți AI vă sună agenții AI. Folosiți un apel de test separat către propriul telefon pentru a auzi agentul pe o linie reală.
Pot exersa în mai multe limbi?
Instrumentul de exercițiu rulează apeluri simulate în japoneză și engleză. Setați câte doriți din fiecare pentru fiecare agent.
Câte apeluri ar trebui să rulez?
Începeți cu puține, câteva pentru fiecare scenariu și agent, și citiți atent rezultatele. Creșteți numărul doar când aveți un motiv, de exemplu pentru a testa o modificare în mai multe limbi.
Lecțiile îmi modifică automat agentul?
Nu. Lecțiile așteaptă verificarea dumneavoastră. Le aplicați pe cele cu care sunteți de acord și le respingeți pe celelalte.
Ce îmi spune nota?
Arată cum a decurs apelul simulat față de criterii, cu notele evaluatorului la fiecare replică. Este o dovadă, iar apelanții reali se pot comporta totuși diferit.
Ce înseamnă un agent estompat?
Un agent care încă nu poate răspunde la apeluri este marcat ca atare și nu poate fi selectat. Finalizați mai întâi configurarea lui.