Harjoituspuhelut: testaa tekoälyagentti ennen käyttöönottoa
Miten simuloidut harjoituspuhelut testaavat tekoälypuhelinagenttia ensin vaikeissa tilanteissa, miten arvosanoja ja oppeja luetaan ja miten havainnot korjataan.
Jokainen uutta henkilöstöä kouluttanut tiimi tietää, että ensimmäinen viikko puhelimessa on riskialttein. Uusi työntekijä tuntee käytännöt mutta ei ole vielä kohdannut soittajaa, joka puhuu päälle, sitä, joka vaihtaa aihetta kesken lauseen, tai sitä, joka haluaa vain jonkun syyllisen. Hyvät tiimit harjoittelevat näitä hetkiä roolileikein ennen todellista tilannetta.

Tekoälypuhelinagentti tarvitsee saman harjoittelun, ja sitä voi olla paljon enemmän ja paljon nopeammin. Tässä oppaassa kerrotaan, miten harjoittelu suunnitellaan, miten tuloksia luetaan ja miten opit viedään takaisin agenttiin. Se jatkaa oppaita tekoälyagentin käyttöönotto ja toimivien kehotteiden kirjoittaminen.
Miksi harjoitella ennen käyttöönottoa
Ensimmäiset oikeat puhelut muokkaavat sitä, mitä asiakkaat ajattelevat koko palvelusta. Agentti, joka kuulee nimen väärin, puhuu soittajan päälle tai keksii vastauksen, maksaa enemmän kuin vastaamaton puhelu, koska asiakkaalla on nyt tarina kerrottavanaan. Harjoittelu löytää nämä ongelmat, kun yleisönä on vain oma tiimisi.
- Kattavuus. Voit testata kymmeniä puheluja yhdessä erässä, myös epätavallisia, joita ei ehkä tulisi vastaan ensimmäisinä viikkoina.
- Toistettavuus. Kun olet muuttanut kehotetta, aja samanlainen erä ja vertaa.
- Turvallisuus. Virheet eivät maksa mitään, koska oikeita asiakkaita ei ole mukana.
- Näyttö. Pisteet ja merkinnät antavat keskusteltavaa muutakin kuin mielipiteitä.
Harjoittelu ei ole todiste. Hyvä tulos simuloiduilla soittajilla ei tarkoita, että oikeat soittajat käyttäytyisivät samoin, ja aito puhekäyttäytyminen voi poiketa simulaatiosta. Pidä hyvää tulosta lupana kokeilla varovasti oikeilla puheluilla, ei todistuksena.
Mitä testata
Erän arvo riippuu siitä, mitä tilanteita se kattaa. Sekoita helppoja ja vaikeita tapauksia tarkoituksella.
Skenaariot, jotka paljastavat heikkoudet
- KeskeytyksetSoittaja puhuu agentin päälle. Pysähtyykö se kuuntelemaan vai jyrääkö eteenpäin?
- Kielen vaihtaminenSoittaja aloittaa yhdellä kielellä ja siirtyy toiseen. Seuraako agentti?
- Ihmisen pyytäminenSoittaja sanoo: ”Haluan puhua jonkun kanssa.” Onko siirto selkeä ja nopea?
- HintakysymyksetSoittaja kysyy, mitä jokin maksaa. Vastaako agentti vain sen, minkä tietää, ja välttääkö se arvailua?
- ValituksetJärkyttynyt soittaja. Pysyykö agentti rauhallisena ja tarjoaako se seuraavan askeleen?
- Arkiset kysymyksetKysymykset agentin omasta tietopankista. Ovatko vastaukset oikeita ja lyhyitä?
Tasapaino on tärkeä. Pelkistä vaikeista tapauksista koostuva erä näyttää aina huonolta eikä kerro paljon arkisuoriutumisesta; pelkät helpot kysymykset imartelevat agenttia, joka pettää paineen alla. Molempien sekoitus on yleensä informatiivisin aloitus.
Harjoituserän ajaminen Callissa
Callissa harjoittelu löytyy kohdasta Tekoälyagentit, osiosta Mitä se oppi, välilehdeltä Harjoituspuhelut. Tekoälysoittajat soittavat tekoälyagenteillesi simulaatiossa japaniksi ja englanniksi, ja jokainen puhelu arvioidaan. Valitset agentit (enintään kymmenen kerralla; agentti, joka ei vielä voi vastata puheluihin, näkyy harmaana), kuinka monta japanin- ja englanninkielistä puhelua kukin saa (nollasta kahteenkymmeneenviiteen kumpaakin) sekä skenaarioiden yhdistelmän.
| Skenaarioyhdistelmä | Mitä se kattaa | Käytä, kun |
|---|---|---|
| Tasapainoinen | Jokainen vaikea tapaus kerran, loput kysymyksiä agentin tietopankista | Testaat uutta agenttia ensimmäistä kertaa |
| Tietopankki | Vain kysymyksiä siitä, mitä agentti tietää | Muutit sen tietämystä ja haluat tarkistaa tarkkuuden |
| Reunatapaukset | Vain vaikeat tapaukset | Muutit sen toimintasääntöjä tai kehotetta |
Erän ajaminen
- Avaa HarjoituspuhelutSiirry kohtaan Tekoälyagentit, sitten Mitä se oppi ja sitten Harjoituspuhelut.
- Valitse agentit ja määrätRastita agentit ja aseta puhelujen määrä kummallakin kielellä.
- Valitse yhdistelmäTasapainoinen, Tietopankki tai Reunatapaukset.
- Aloita eräPainikkeen vieressä oleva luku on kokonaismäärä: agentit kerrottuna puheluilla molemmilla kielillä.
- Seuraa etenemistäLista päivittyy itsestään; avaa erä nähdäksesi pisteet ja puhelujen tulokset.
Aloituspainike pysyy harmaana, kun puheluja on nolla tai kokonaismäärä ylittää kolmesataa, joten suuret testit ajetaan osissa. Voit myös peruuttaa odottavan tai käynnissä olevan erän; aloittamattomat puhelut perutaan ja jo käynnissä oleva puhelu viedään loppuun. Voit ottaa erälle käyttöön äänen, jolloin jokaiseen vuoroon tulee toistopainike, ja ääni luodaan vasta, kun painat sitä.
Tulosten lukeminen
Avaa valmis erä ja aloita yhteenvedosta, älä yksittäisestä litteroinnista. Kokonaisluvut näyttävät tehdyt puhelut, keskimääräiset pisteet, korjatut vastaukset, vastausta tarvitsevat kysymykset ja tyylivinkit. Niiden alla ovat pisteet kriteereittäin, tärkeimmät ongelmat kunkin agentin keskiarvon kera sekä taulukko puheluista skenaarioineen, kielineen, pisteineen ja merkintöineen.
- Etsi heikoin alue kriteerikohtaisista pisteistä.
- Lue tärkeimmät ongelmat; jos sama toistuu eri agenteilla, kyse on todennäköisesti yhteisestä kehotteesta tai säännöstä.
- Järjestä puhelut pisteiden mukaan ja lue kolmen huonoimman litterointi kokonaan.
- Lue arvioijan huomautus jokaisesta vastauksesta, älä vain lopullista arvosanaa.
- Vertaa kieliä; ero voi tarkoittaa, että yksi kieli tarvitsee oman sanamuotonsa.
Oppien soveltaminen
Harjoittelu tuottaa oppeja, ja ne odottavat tarkistustasi sen sijaan, että muuttaisivat agenttia automaattisesti. Voit ottaa kunkin käyttöön tai hylätä sen. Korjatut vastaukset ja vastausta tarvitsevat kysymykset odottavat myös kohdassa Ehdotukset. Tämä on tarkoituksellista: ihminen päättää, mitä agentin pitää oppia.
Oppien tarkistaminen
- Vastaako oppi käytäntöjänne ja sävyänne
- Onko korjattu vastaus todella oikea eikä vain uskottava
- Koskeeko se jokaista soittajaa vai vain tätä skenaariota
- Ovatko kaksi oppia ristiriidassa keskenään
- Tarvitseeko agentti uuden tietopankkimerkinnän kehotteen muutoksen sijaan
Kun olet tehnyt muutokset, aja pieni erä uudelleen ja vertaa. Muuta yksi asia kerrallaan, kun voit, muuten et tiedä, mikä muutos auttoi. Tosiasiaan perustuvien vastausten paikasta kerrotaan oppaassa tietolähteet.
Järkevä harjoitusrytmi
Harjoittelusta on eniten hyötyä, kun se on tapa eikä kertaluonteinen tapahtuma. Sido erät hetkiin, jolloin jokin muuttuu.
| Hetki | Mitä ajaa | Mihin kiinnittää huomiota |
|---|---|---|
| Uusi agentti ennen käyttöönottoa | Tasapainoinen erä jokaisella palvelemallasi kielellä | Heikot kriteerit, siirtokäyttäytyminen |
| Kehotteen tai säännön muutoksen jälkeen | Reunatapauserä | Korjasiko muutos ongelman rikkomatta jotain muuta |
| Tietämyksen lisäämisen jälkeen | Tietopankkierä | Oikeat, lyhyet vastaukset eikä keksittyjä tosiasioita |
| Ennen kiireistä jaksoa | Tasapainoinen erä kiireisimmille linjoille | Vakaus tyypillisellä kysymysten sekoituksella |
| Oikean puhelun ongelman jälkeen | Erä, joka jäljittelee virhettä | Pitääkö korjaus |
Pidä lyhyttä lokia: päivämäärä, mitä muutit, minkä erän ajoit ja päätulos. Muutaman kuukauden jälkeen historia näyttää, mitkä muutokset auttoivat, ja suojaa toistamasta kokeilua, joka jo epäonnistui.
Kuviteltu klinikka voisi ajaa tasapainoisen erän vastaanottoagentilleen ennen uuden linjan avaamista, reunatapauserän lisättyään säännön kiireellisistä oireista ja tietopankkierän aina, kun aukioloajat tai palvelut muuttuvat. Kolme pientä, oikeaan aikaan ajettua erää kertoo enemmän kuin yksi valtava kertaluonteinen testi.
Simulaation tuolla puolen
Simulaatio on harjoitus. Soita ennen käyttöönottoa myös oikea testipuhelu omaan puhelimeesi ja kuuntele asiakkaan korvin. Ota agentti käyttöön varovasti: aloita vähäriskisellä linjalla tai rajatuilla aukioloajoilla, pidä reitti ihmiselle helppona (katso puhelun siirtäminen ihmiselle) ja kuuntele ensimmäiset oikeat puhelut päivittäin. Sama ajatus pätee ihmisagentteihin; katso valmennuksen viitekehys harjoittelusta ja palautteesta ihmisten kanssa.
Usein kysytyt kysymykset
Ovatko harjoituspuhelut oikeita puheluja?
Ne ovat simuloituja puheluja, joissa tekoälysoittajat soittavat tekoälyagenteillesi. Soita erillinen testipuhelu omaan puhelimeesi kuullaksesi agentin oikealla linjalla.
Voinko harjoitella useammalla kielellä?
Harjoitustyökalu ajaa simuloituja puheluja japaniksi ja englanniksi. Aseta, kuinka monta kumpaakin haluat agenttia kohden.
Kuinka monta puhelua kannattaa ajaa?
Aloita pienestä, muutamalla kustakin skenaariosta agenttia kohden, ja lue tulokset tarkasti. Kasvata määrää vain, kun sille on syy, kuten muutoksen testaaminen eri kielillä.
Muuttavatko opit agenttiani automaattisesti?
Eivät. Opit odottavat tarkistustasi. Otat käyttöön ne, joista olet samaa mieltä, ja hylkäät muut.
Mitä arvosana kertoo minulle?
Se näyttää, miten simuloitu puhelu sujui kriteereihin nähden, ja arvioijan huomautukset jokaisesta vastauksesta. Se on näyttöä, ja oikeat soittajat voivat silti käyttäytyä toisin.
Entä jos agentti näkyy harmaana?
Agentti, joka ei vielä voi vastata puheluihin, on merkitty kykenemättömäksi vastaamaan, eikä sitä voi valita. Viimeistele ensin sen määritykset.