Usare Call

Chiamate di pratica: testare l'agente IA prima del lancio

Come le chiamate di pratica simulate permettono di testare un agente telefonico IA sui casi difficili, leggere voti e lezioni e trasformarli in correzioni.

La redazione di Call · Pubblicato · Lettura di 6 min

Qualsiasi team che abbia formato nuovo personale sa che la prima settimana al telefono è la più rischiosa. Il nuovo arrivato conosce le procedure ma non ha ancora incontrato chi gli parla sopra, chi cambia argomento a metà frase o chi vuole solo qualcuno con cui prendersela. I team migliori provano questi momenti con dei giochi di ruolo prima di affrontarli sul serio.

Un team leader esamina punteggi e trascrizioni delle chiamate su un monitor prima di un lancio
Immagine illustrativa

Un agente telefonico IA ha bisogno delle stesse prove, e può farne molte di più, molto più in fretta. Questa guida spiega come impostare la pratica, come leggere i risultati e come riportare le lezioni nell'agente. Parte da come configurare un agente IA e da come scrivere prompt efficaci.

Perché fare pratica prima del lancio

Le prime chiamate reali determinano l'idea che i clienti si fanno dell'intero servizio. Un agente che capisce male un nome, parla sopra chi chiama o si inventa una risposta costa più di una chiamata persa, perché ora il cliente ha una storia da raccontare. La pratica scopre questi problemi quando l'unico pubblico è il tuo team.

La pratica non è una prova definitiva. Un buon punteggio con interlocutori simulati non significa che le persone reali si comporteranno allo stesso modo, e il comportamento vocale dal vivo può differire da una simulazione. Considera un buon risultato come un via libera a provare con prudenza sulle chiamate reali, non come un certificato.

Cosa testare

Il valore di una serie dipende dalle situazioni che copre. Mescola di proposito casi facili e difficili.

Scenari che mettono in luce i punti deboli

  • InterruzioniChi chiama parla sopra l'agente. Si ferma e ascolta, o va avanti come un treno?
  • Cambio di linguaChi chiama inizia in una lingua e passa a un'altra. L'agente lo segue?
  • Richiesta di una personaChi chiama dice "mi passi qualcuno". Il passaggio è chiaro e rapido?
  • Domande sul prezzoChi chiama chiede quanto costa. L'agente risponde solo ciò che sa ed evita di tirare a indovinare?
  • ReclamiUna persona arrabbiata. L'agente resta calmo e propone un passo successivo?
  • Domande quotidianeDomande tratte dalla base di conoscenza dell'agente. Le risposte sono corrette e brevi?

L'equilibrio conta. Una serie di soli casi difficili sembrerà sempre negativa e dirà poco sulle prestazioni di tutti i giorni; una serie di sole domande facili lusingherà un agente che sotto pressione cede. Un mix dei due è di solito il punto di partenza più istruttivo.

Eseguire una serie di pratica in Call

In Call la pratica si trova in Agenti IA, sotto Cosa ha imparato, nella scheda Chiamate di pratica. Interlocutori IA telefonano ai tuoi agenti IA in una simulazione, in giapponese e in inglese, e ogni chiamata riceve un voto. Scegli gli agenti (fino a dieci alla volta; un agente che non può ancora rispondere alle chiamate appare in grigio), quante chiamate in giapponese e in inglese deve ricevere ciascuno (da zero a venticinque per lingua) e il mix di scenari.

Mix di scenariCosa copreQuando usarlo
BilanciatoOgni caso difficile una volta, il resto domande dalla base di conoscenza dell'agenteStai testando un nuovo agente per la prima volta
Base di conoscenzaSolo domande tratte da ciò che l'agente saHai modificato le sue conoscenze e vuoi verificarne la precisione
Casi limiteSolo i casi difficiliHai modificato le sue regole di comportamento o il prompt

Eseguire una serie

  1. Apri Chiamate di praticaVai in Agenti IA, poi Cosa ha imparato, poi Chiamate di pratica.
  2. Scegli agenti e numeriSeleziona gli agenti e imposta il numero di chiamate in ciascuna lingua.
  3. Scegli un mixBilanciato, Base di conoscenza o Casi limite.
  4. Avvia la serieIl numero accanto al pulsante è il totale: agenti moltiplicati per le chiamate in entrambe le lingue.
  5. Segui l'avanzamentoL'elenco si aggiorna da solo; apri una serie per vedere punteggi ed esiti delle chiamate.

Il pulsante di avvio resta grigio con zero chiamate o oltre un totale di trecento, quindi i test più grandi vanno eseguiti a blocchi. Puoi anche annullare una serie in attesa o in corso: le chiamate non ancora iniziate vengono annullate e una chiamata già in corso arriva alla fine. Puoi attivare la voce per una serie per aggiungere un pulsante di ascolto a ogni turno, e l'audio viene generato solo quando lo premi.

Leggere i risultati

Apri una serie conclusa e parti dal riepilogo, non da una singola trascrizione. I totali mostrano le chiamate fatte, il punteggio medio, le risposte corrette, le domande che richiedono una risposta e i suggerimenti di stile. Sotto trovi il punteggio per criterio, i problemi principali con la media di ogni agente e una tabella delle chiamate con scenario, lingua, punteggio e segnalazioni.

  1. Guarda il punteggio per criterio per trovare l'area più debole.
  2. Leggi i problemi principali; se uno compare in più agenti, probabilmente dipende da un prompt o da una regola in comune.
  3. Ordina le chiamate per punteggio e leggi per intero le tre trascrizioni peggiori.
  4. Leggi la nota del valutatore su ogni risposta, non solo il voto finale.
  5. Confronta le lingue; una differenza può significare che una lingua ha bisogno di testi propri.

Applicare le lezioni

La pratica produce lezioni, che aspettano la tua revisione invece di modificare l'agente in automatico. Puoi applicarle o scartarle una per una. Anche le risposte corrette e le domande che richiedono una risposta aspettano in Suggerimenti. È una scelta voluta: è una persona a decidere cosa deve imparare l'agente.

Rivedere le lezioni

  • La lezione rispetta le tue regole e il tuo tono?
  • La risposta corretta è davvero corretta, non solo plausibile?
  • Vale per tutti i clienti o solo per questo scenario?
  • Ci sono due lezioni in contraddizione tra loro?
  • All'agente serve una nuova voce nella base di conoscenza, non una modifica al prompt?

Dopo aver applicato le modifiche, esegui di nuovo una piccola serie e confronta. Quando puoi, cambia una cosa alla volta, altrimenti non saprai quale modifica ha aiutato. Leggi le fonti di conoscenza per capire dove vanno le risposte sui fatti.

Una cadenza sensata per la pratica

La pratica rende di più quando è un'abitudine, non un evento isolato. Collega le serie ai momenti in cui qualcosa cambia.

MomentoCosa eseguireCosa cercare
Nuovo agente, prima del lancioUna serie bilanciata in ogni lingua che serviCriteri deboli, comportamento nel passaggio a una persona
Dopo una modifica a prompt o regoleUna serie di casi limiteSe la modifica ha risolto il problema senza crearne un altro
Dopo aver aggiunto conoscenzeUna serie sulla base di conoscenzaRisposte corrette e brevi, senza fatti inventati
Prima di un periodo intensoUna serie bilanciata sulle linee che saranno più trafficateStabilità con un mix tipico di domande
Dopo un problema su una chiamata realeUna serie che riproduce l'erroreSe la correzione regge

Tieni un breve registro: la data, cosa hai cambiato, la serie che hai eseguito e il risultato principale. Dopo qualche mese questa cronologia mostra quali modifiche hanno aiutato e ti evita di ripetere un esperimento già fallito.

Un ambulatorio ipotetico potrebbe eseguire una serie bilanciata per il suo agente di accoglienza prima di aprire la nuova linea, una serie di casi limite dopo aver aggiunto una regola sui sintomi urgenti e una serie sulla base di conoscenza ogni volta che cambiano orari o servizi. Tre piccole serie, eseguite al momento giusto, dicono più di un unico test enorme fatto una volta.

Oltre la simulazione

Una simulazione è una prova. Prima del lancio fai anche una vera chiamata di test al tuo telefono e ascolta come farebbe un cliente. Parti con prudenza: inizia da una linea a basso rischio o da orari limitati, mantieni un percorso semplice verso una persona (leggi come passare una chiamata a una persona) e ascolta ogni giorno le prime chiamate reali. Per gli operatori umani vale la stessa idea; leggi un modello di coaching per prove e feedback con le persone.

Domande frequenti

Le chiamate di pratica sono vere telefonate?

Sono chiamate simulate in cui interlocutori IA telefonano ai tuoi agenti IA. Per sentire l'agente su una linea reale, fai una chiamata di test separata al tuo telefono.

Posso fare pratica in più lingue?

Lo strumento di pratica esegue chiamate simulate in giapponese e in inglese. Imposta quante ne vuoi di ciascuna per agente.

Quante chiamate dovrei eseguire?

Inizia in piccolo, con poche chiamate per scenario e per agente, e leggi con attenzione i risultati. Aumenta solo quando hai un motivo, per esempio testare una modifica in più lingue.

Le lezioni modificano il mio agente in automatico?

No. Le lezioni aspettano la tua revisione. Applichi quelle con cui sei d'accordo e scarti le altre.

Cosa mi dice il voto?

Mostra com'è andata la chiamata simulata rispetto ai criteri, con le note del valutatore su ogni risposta. È un dato utile, ma le persone reali possono comunque comportarsi in modo diverso.

E se un agente appare in grigio?

Un agente che non può ancora rispondere alle chiamate è segnato come non disponibile e non si può selezionare. Completa prima la sua configurazione.

Avvia in Call una serie di chiamate di pratica per il tuo agente IA

Nella console demo puoi provare le chiamate in arrivo in simulazione.

Guide correlate