Teknolohiya ng voice AI

Paano Subukan ang Voice AI Agent Bago Ilunsad: Praktikal na Plano

Hakbang-hakbang na plano sa pagsubok ng phone voice AI agent bago ilunsad: scripts, katumpakan, pandinig, daloy, hand-over, logs at malinaw na pass o fail.

Editorial team ng Call · Nailathala · 6 min na pagbabasa

Ang voice agent na mahusay sumagot sa tahimik na opisina, sa harap ng taong gumawa nito, ay maaaring ibang-iba ang asal sa kanto ng kalye kasama ang caller na pabulong magsalita. Hindi misteryoso ang karamihan sa problema sa paglulunsad: mga bagay ito na walang sumubok. Natutuklasan ito ng isang nakaayos na test plan habang mura pa ang pag-aayos.

Isang quality tester na naka-headset na sinusuri ang call script sa isang laptop
Larawang pang-ilustrasyon

Binibigyan kayo ng gabay na ito ng praktikal na plano: ano ang ihahanda, ang anim na bahaging susubukan, paano huhusgahan ang resulta at ano ang gagawin pagkatapos ilunsad. Sa dulo, ipinapakita ang mga tool sa Call. Para sa metrics sa likod ng paghusga, basahin ang Voice AI Evaluation Metrics.

Paghahanda sa pagsubok

Magsimula sa listahan ng totoong tawag. Tipunin ang mga tanong na talagang itinatanong ng mga tao, mula sa email, alaala ng staff at mga tala sa tawag. Idagdag ang mahihirap: ang galit na caller, ang malabong caller, ang caller na humihingi ng bagay na hindi ninyo iniaalok. Pinaghahalo ng magandang test set ang karaniwan, bihira at mahihirap na kaso.

Mula script hanggang paglulunsad

  1. Sumulat ng test scriptsTotoong tanong, kasama ang tamang sagot sa bawat isa.
  2. Subukan ang contentTama ba ang sagot ng agent at nananatili ba sa hangganan.
  3. Subukan ang pandinigNaiintindihan ba nito ang mga pangalan, numero at accent.
  4. Subukan ang daloyNatural ba ang takbo ng usapan at maayos ba ang pagtatapos.
  5. Subukan ang hand-overGumagana ba ang paghiling ng tao at ang mga urgent na kaso.
  6. Suriin ang recordsTama ba ang summaries, mensahe at logs.
  7. MagpasyaIhambing ang resulta sa pass rule at pumili.

Pagpasyahan kung sino ang susubok. Isama ang mga taong hindi gumawa ng agent, dahil magtatanong sila sa hindi inaasahang paraan. Kung may panrehiyong accent o iba't ibang wika ang inyong mga caller, isama rin ang mga boses na iyon.

Pagsubok sa content

Ang unang tanong ay kung totoo ang sinasabi ng agent. Itanong ang bawat tanong sa inyong listahan at ihambing sa tamang sagot. Markahan ang bawat sagot bilang tama, bahagyang tama, mali o inimbento. Pinakamahalaga ang inimbentong sagot, kung saan nagsasabi ang agent ng bagay na hindi kailanman ibinigay sa kanya, dahil pinaniniwalaan ito ng mga caller.

Basahin ang Voice AI Hallucinations para sa kung bakit nangyayari ang inimbentong sagot at Retrieval para sa mga Voice Agent para sa kung paano ginagamit ang knowledge.

Pagsubok sa naririnig nito

Madalas pumalya ang voice agents sa hakbang ng pakikinig. Mga pangalan, postcode, phone number at petsa ang karaniwang problema. Sumubok gamit ang totoong telepono, hindi lang mikropono ng computer, at isama ang ingay sa paligid, speakerphone at mahinang signal ng mobile.

SuriinPaanoAno ang hahanapin
Mga pangalanI-spell at sabihin ang di-pangkaraniwang pangalanTamang pagkuha o magalang na pakiusap na ulitin
Mga numeroBasahin ang phone number at petsaTamang digits, at pag-uulit pabalik
Mga accentPakiusapan ang mga kasamahang iba-iba ang accentMas kaunting hindi pagkakaintindihan at maayos na pagbawi
IngayTumawag mula sa mataong lugarWalang maling trigger, at malinaw na pakiusap na ulitin

Mas malalim na ipinapaliwanag ng Mga Numero at Pangalan sa Voice AI at Speech Recognition sa Audio ng Telepono ang mga problemang ito.

Pagsubok sa daloy ng usapan

Maaaring tama ang content pero alanganin pa rin ang usapan. Pakinggan ang pambungad, ang takbo, kung sinasabayan ng agent ang caller, paano nito hinahawakan ang katahimikan at paano ito nagtatapos. Sabatin ito, manahimik, sabihin ang "hello?" at magbago ng isip sa gitna.

Mga gawing susubukan sa daloy

  • PagsabatMagsalita habang nagsasalita ang agent at tiyaking humihinto ito at nakikinig.
  • KatahimikanHuwag magsalita at tiyaking magalang itong nagtatanong, saka makatwirang nagtatapos.
  • Pagbabago ng isipMagpalit ng paksa sa gitna ng sagot at tiyaking sumusunod ito.
  • PagtataposMagpasalamat at magpaalam at tiyaking maayos na nagsasara ang tawag.

Kasama rin dito ang bilis. Itala ang mahahabang hinto at kung ano ang sanhi. Ipinapaliwanag ng Voice AI Latency ang karaniwang mga dahilan.

Pagsubok sa hand-over at kaligtasan

Kailangan ng bawat voice agent ng daan patungo sa tao para sa mga kahilingang hindi nito kaya o hindi dapat hawakan. Subukan ito sa bawat kondisyon: sa oras ng negosyo, labas sa oras, kapag walang sumasagot, at kapag balisa ang caller. Subukan ang mga urgent na parirala. Tiyaking hindi kailanman nagkukunwaring tao ang agent at hindi kailanman nangangako ng bagay na hindi nito maihahatid, gaya ng kumpirmadong booking.

Mga pagsusuri sa hand-over

  • Ang paghiling ng tao sa oras ng negosyo ay umaabot sa tamang mga tao
  • Ang paghiling labas sa oras ay nakakatanggap ng tapat na mensahe at paraan para mag-iwan ng detalye
  • Kung walang sumasagot, makakapag-iwan ng mensahe ang caller
  • Mabilis na ipinapasa ang urgent o balisang caller
  • Nagpapakilala ang agent bilang AI kapag tinanong
  • Hindi kinukuha ang sensitibong detalye kapag hindi dapat

Pagsubok sa records at logs

Dalawa ang kinalabasan ng isang tawag: ang naranasan ng caller at ang itinala ninyo. Pagkatapos ng bawat test, suriin ang summary, transcript, iniwang mensahe at anumang follow-up task. Tama ba ang mga pangalan at numero? Tumpak bang nakasaad ang dahilan ng tawag? May inimbento ba ang summary? Ang perpektong tawag na may maling record ay magtuturo pa rin sa team sa maling direksiyon. Basahin ang AI Call Summaries.

Pagpapasya ng pass o fail

Bago magsimula, isulat ang patakarang magpapasya kung puwedeng ilunsad ang agent. Maaari itong simple: walang inimbentong sagot sa test set, gumagana ang bawat kaso ng hand-over, at isang nakasaad na bahagdan ng karaniwang tanong ang nasagot nang tama. Kapag nakasulat ito, napipigilan ang paglulunsad na itinutulak ng pressure ng deadline.

Mga desisyon sa paglulunsad

Naunang isinulat ang pass ruleHinusgahan pagkatapos
LinawAlam ng lahat ang pamantayanGumagalaw ang pamantayan ayon sa mood
PressureMadaling sabihing hindi paMahirap labanan ang deadline
PagkatutoItinuturo ng pagkabigo ang aayusinNagiging pagtatalo ang pagkabigo
RecordMaihahambing ang resulta sa paglipas ng panahonWalang maihahambing

Magtago ng log ng bawat test: petsa, bersiyon ng agent, caller, tanong, resulta at ayos. Kapag binago ninyo ang prompt o knowledge, ulitin ang mga naunang test, dahil minsan may nasisira ang mga ayos sa ibang bahagi.

Sulit ding subukan ang mga tahimik na pagkabigo, na walang caller na magrereklamo pero may gastos sa paglipas ng panahon. Tiyaking nakakagawa pa rin ng makatwirang record ang tawag na maagang natapos, na hindi nag-iiwan ng kalahating task ang caller na nagbaba sa gitna ng pangungusap, at na pare-pareho ang paghawak sa mga paulit-ulit na caller. Bihirang lumabas ang mga kasong ito sa unang test plan, pero nakakagulat na malaki ang bahagi nila sa totoong trapiko.

Pagkatapos ilunsad

Hindi tumitigil ang pagsubok kapag live na ang agent. Magsimula sa limitadong saklaw, gaya ng after hours o overflow, makinig sa sample ng totoong tawag araw-araw sa unang linggo, at palawakin kapag komportable na kayo. Suriin ang mga tanong na hindi nito nasagot, saka idagdag ang kulang na knowledge. Magtago ng paraan para bumalik sa naunang bersiyon kung lumala ang lagay dahil sa isang pagbabago. Magandang kasama ang Ang Unang Linggo ng Inyong AI Receptionist.

Pagsubok sa Call

Binibigyan kayo ng Call ng ilang paraan para subukan ang AI agent bago ang mga caller. Pinapayagan kayo ng Playground sa ilalim ng AI agents na makipag-chat sa agent, ipinapakita kung ilang knowledge note ang tumugma sa bawat sagot at inililista ang mga ito, at pinapayagan kayong i-rate ang sagot o magturo ng mas mahusay. Tumatawag ang Test call ng agent sa sarili ninyong telepono gamit ang linya nito, kaya naririnig ninyo ito gaya ng isang caller; totoong tawag na may bayad ang bawat ganitong test. Nag-aalok din ang setup wizard ng pakikipag-usap sa screen, tawag sa inyong telepono at pagpapatawag sa agent sa isang numero. Ang readiness check, na tumatakbo nang walang tinatawagang sinuman, ay nag-uulat kung ano pa ang kailangan ng AI call mula sa linya.

Pinapayagan ng Practice calls, sa ilalim ng AI agents, What it learned, ang mga AI caller na tawagan ang inyong agents sa Japanese at English. Binibigyan ng grado ang bawat tawag, at naghihintay ng inyong review ang mga aral, kaya walang nagbabago nang wala kayo. Bago ang mapanganib na edit, mag-save ng restore point sa agent para makabalik kayo, at gamitin ang Set live o Set to draft para kontrolin kung kailan sumasagot ang agent. Basahin ang Pag-set up ng AI Agent sa Call para sa mismong setup.

Mga madalas itanong

Ilang test call ang sapat?

Sapat para saklawin ang bawat karaniwang tanong, bawat kaso ng hand-over at sample ng mahirap na asal. Para sa maliit na agent, maaaring dose-dosenang tawag iyon; magpatuloy hanggang hindi na nakakakita ng bagong problema ang mga bagong test.

Sino ang dapat sumubok sa agent?

Mga taong hindi gumawa nito, kasama ang mga may ibang accent at gawi sa telepono. Nagtatanong sila sa paraang hindi naiisip ng gumawa.

Dapat ba akong sumubok sa totoong telepono?

Oo. Mas makitid at mas maingay ang audio ng telepono kaysa sa audio ng computer, at maraming problema ang lumalabas lang sa totoong linya.

Ano ang itinuturing na seryosong pagkabigo?

Inimbentong sagot na sinabi nang may kumpiyansa, hand-over na pumalya, o record na nagtuturo sa team sa maling direksiyon. Dapat nitong pigilan ang paglulunsad.

Kailangan ko bang sumubok muli pagkatapos ng maliliit na pagbabago?

Oo, kahit ang pangunahing set man lang. Maaaring baguhin ng maliliit na pagbabago sa prompt o knowledge ang mga sagot sa ibang bahagi.

Ano ang dapat kong bantayan pagkatapos mag-live?

Makinig sa sample ng mga tawag araw-araw sa simula, itala ang mga tanong na hindi nito nasagot, at subaybayan ang hand-overs at reklamo. Pagbutihin ang knowledge linggu-linggo.

Magpatakbo ng test calls at practice calls sa inyong AI agent sa Call

Sa demo console, masusubukan mo ang mga papasok na tawag sa isang simulation.

Mga kaugnay na gabay