Callin käyttö

Harjoituspuhelut: testaa tekoälyagentti ennen käyttöönottoa

Miten simuloidut harjoituspuhelut testaavat tekoälypuhelinagenttia ensin vaikeissa tilanteissa, miten arvosanoja ja oppeja luetaan ja miten havainnot korjataan.

Call-toimitus · Julkaistu · Lukuaika 4 min

Jokainen uutta henkilöstöä kouluttanut tiimi tietää, että ensimmäinen viikko puhelimessa on riskialttein. Uusi työntekijä tuntee käytännöt mutta ei ole vielä kohdannut soittajaa, joka puhuu päälle, sitä, joka vaihtaa aihetta kesken lauseen, tai sitä, joka haluaa vain jonkun syyllisen. Hyvät tiimit harjoittelevat näitä hetkiä roolileikein ennen todellista tilannetta.

Tiiminvetäjä käy läpi puhelujen pisteitä ja litterointeja näytöltä ennen käyttöönottoa
Havainnekuva

Tekoälypuhelinagentti tarvitsee saman harjoittelun, ja sitä voi olla paljon enemmän ja paljon nopeammin. Tässä oppaassa kerrotaan, miten harjoittelu suunnitellaan, miten tuloksia luetaan ja miten opit viedään takaisin agenttiin. Se jatkaa oppaita tekoälyagentin käyttöönotto ja toimivien kehotteiden kirjoittaminen.

Miksi harjoitella ennen käyttöönottoa

Ensimmäiset oikeat puhelut muokkaavat sitä, mitä asiakkaat ajattelevat koko palvelusta. Agentti, joka kuulee nimen väärin, puhuu soittajan päälle tai keksii vastauksen, maksaa enemmän kuin vastaamaton puhelu, koska asiakkaalla on nyt tarina kerrottavanaan. Harjoittelu löytää nämä ongelmat, kun yleisönä on vain oma tiimisi.

Harjoittelu ei ole todiste. Hyvä tulos simuloiduilla soittajilla ei tarkoita, että oikeat soittajat käyttäytyisivät samoin, ja aito puhekäyttäytyminen voi poiketa simulaatiosta. Pidä hyvää tulosta lupana kokeilla varovasti oikeilla puheluilla, ei todistuksena.

Mitä testata

Erän arvo riippuu siitä, mitä tilanteita se kattaa. Sekoita helppoja ja vaikeita tapauksia tarkoituksella.

Skenaariot, jotka paljastavat heikkoudet

  • KeskeytyksetSoittaja puhuu agentin päälle. Pysähtyykö se kuuntelemaan vai jyrääkö eteenpäin?
  • Kielen vaihtaminenSoittaja aloittaa yhdellä kielellä ja siirtyy toiseen. Seuraako agentti?
  • Ihmisen pyytäminenSoittaja sanoo: ”Haluan puhua jonkun kanssa.” Onko siirto selkeä ja nopea?
  • HintakysymyksetSoittaja kysyy, mitä jokin maksaa. Vastaako agentti vain sen, minkä tietää, ja välttääkö se arvailua?
  • ValituksetJärkyttynyt soittaja. Pysyykö agentti rauhallisena ja tarjoaako se seuraavan askeleen?
  • Arkiset kysymyksetKysymykset agentin omasta tietopankista. Ovatko vastaukset oikeita ja lyhyitä?

Tasapaino on tärkeä. Pelkistä vaikeista tapauksista koostuva erä näyttää aina huonolta eikä kerro paljon arkisuoriutumisesta; pelkät helpot kysymykset imartelevat agenttia, joka pettää paineen alla. Molempien sekoitus on yleensä informatiivisin aloitus.

Harjoituserän ajaminen Callissa

Callissa harjoittelu löytyy kohdasta Tekoälyagentit, osiosta Mitä se oppi, välilehdeltä Harjoituspuhelut. Tekoälysoittajat soittavat tekoälyagenteillesi simulaatiossa japaniksi ja englanniksi, ja jokainen puhelu arvioidaan. Valitset agentit (enintään kymmenen kerralla; agentti, joka ei vielä voi vastata puheluihin, näkyy harmaana), kuinka monta japanin- ja englanninkielistä puhelua kukin saa (nollasta kahteenkymmeneenviiteen kumpaakin) sekä skenaarioiden yhdistelmän.

SkenaarioyhdistelmäMitä se kattaaKäytä, kun
TasapainoinenJokainen vaikea tapaus kerran, loput kysymyksiä agentin tietopankistaTestaat uutta agenttia ensimmäistä kertaa
TietopankkiVain kysymyksiä siitä, mitä agentti tietääMuutit sen tietämystä ja haluat tarkistaa tarkkuuden
ReunatapauksetVain vaikeat tapauksetMuutit sen toimintasääntöjä tai kehotetta

Erän ajaminen

  1. Avaa HarjoituspuhelutSiirry kohtaan Tekoälyagentit, sitten Mitä se oppi ja sitten Harjoituspuhelut.
  2. Valitse agentit ja määrätRastita agentit ja aseta puhelujen määrä kummallakin kielellä.
  3. Valitse yhdistelmäTasapainoinen, Tietopankki tai Reunatapaukset.
  4. Aloita eräPainikkeen vieressä oleva luku on kokonaismäärä: agentit kerrottuna puheluilla molemmilla kielillä.
  5. Seuraa etenemistäLista päivittyy itsestään; avaa erä nähdäksesi pisteet ja puhelujen tulokset.

Aloituspainike pysyy harmaana, kun puheluja on nolla tai kokonaismäärä ylittää kolmesataa, joten suuret testit ajetaan osissa. Voit myös peruuttaa odottavan tai käynnissä olevan erän; aloittamattomat puhelut perutaan ja jo käynnissä oleva puhelu viedään loppuun. Voit ottaa erälle käyttöön äänen, jolloin jokaiseen vuoroon tulee toistopainike, ja ääni luodaan vasta, kun painat sitä.

Tulosten lukeminen

Avaa valmis erä ja aloita yhteenvedosta, älä yksittäisestä litteroinnista. Kokonaisluvut näyttävät tehdyt puhelut, keskimääräiset pisteet, korjatut vastaukset, vastausta tarvitsevat kysymykset ja tyylivinkit. Niiden alla ovat pisteet kriteereittäin, tärkeimmät ongelmat kunkin agentin keskiarvon kera sekä taulukko puheluista skenaarioineen, kielineen, pisteineen ja merkintöineen.

  1. Etsi heikoin alue kriteerikohtaisista pisteistä.
  2. Lue tärkeimmät ongelmat; jos sama toistuu eri agenteilla, kyse on todennäköisesti yhteisestä kehotteesta tai säännöstä.
  3. Järjestä puhelut pisteiden mukaan ja lue kolmen huonoimman litterointi kokonaan.
  4. Lue arvioijan huomautus jokaisesta vastauksesta, älä vain lopullista arvosanaa.
  5. Vertaa kieliä; ero voi tarkoittaa, että yksi kieli tarvitsee oman sanamuotonsa.

Oppien soveltaminen

Harjoittelu tuottaa oppeja, ja ne odottavat tarkistustasi sen sijaan, että muuttaisivat agenttia automaattisesti. Voit ottaa kunkin käyttöön tai hylätä sen. Korjatut vastaukset ja vastausta tarvitsevat kysymykset odottavat myös kohdassa Ehdotukset. Tämä on tarkoituksellista: ihminen päättää, mitä agentin pitää oppia.

Oppien tarkistaminen

  • Vastaako oppi käytäntöjänne ja sävyänne
  • Onko korjattu vastaus todella oikea eikä vain uskottava
  • Koskeeko se jokaista soittajaa vai vain tätä skenaariota
  • Ovatko kaksi oppia ristiriidassa keskenään
  • Tarvitseeko agentti uuden tietopankkimerkinnän kehotteen muutoksen sijaan

Kun olet tehnyt muutokset, aja pieni erä uudelleen ja vertaa. Muuta yksi asia kerrallaan, kun voit, muuten et tiedä, mikä muutos auttoi. Tosiasiaan perustuvien vastausten paikasta kerrotaan oppaassa tietolähteet.

Järkevä harjoitusrytmi

Harjoittelusta on eniten hyötyä, kun se on tapa eikä kertaluonteinen tapahtuma. Sido erät hetkiin, jolloin jokin muuttuu.

HetkiMitä ajaaMihin kiinnittää huomiota
Uusi agentti ennen käyttöönottoaTasapainoinen erä jokaisella palvelemallasi kielelläHeikot kriteerit, siirtokäyttäytyminen
Kehotteen tai säännön muutoksen jälkeenReunatapauseräKorjasiko muutos ongelman rikkomatta jotain muuta
Tietämyksen lisäämisen jälkeenTietopankkieräOikeat, lyhyet vastaukset eikä keksittyjä tosiasioita
Ennen kiireistä jaksoaTasapainoinen erä kiireisimmille linjoilleVakaus tyypillisellä kysymysten sekoituksella
Oikean puhelun ongelman jälkeenErä, joka jäljittelee virhettäPitääkö korjaus

Pidä lyhyttä lokia: päivämäärä, mitä muutit, minkä erän ajoit ja päätulos. Muutaman kuukauden jälkeen historia näyttää, mitkä muutokset auttoivat, ja suojaa toistamasta kokeilua, joka jo epäonnistui.

Kuviteltu klinikka voisi ajaa tasapainoisen erän vastaanottoagentilleen ennen uuden linjan avaamista, reunatapauserän lisättyään säännön kiireellisistä oireista ja tietopankkierän aina, kun aukioloajat tai palvelut muuttuvat. Kolme pientä, oikeaan aikaan ajettua erää kertoo enemmän kuin yksi valtava kertaluonteinen testi.

Simulaation tuolla puolen

Simulaatio on harjoitus. Soita ennen käyttöönottoa myös oikea testipuhelu omaan puhelimeesi ja kuuntele asiakkaan korvin. Ota agentti käyttöön varovasti: aloita vähäriskisellä linjalla tai rajatuilla aukioloajoilla, pidä reitti ihmiselle helppona (katso puhelun siirtäminen ihmiselle) ja kuuntele ensimmäiset oikeat puhelut päivittäin. Sama ajatus pätee ihmisagentteihin; katso valmennuksen viitekehys harjoittelusta ja palautteesta ihmisten kanssa.

Usein kysytyt kysymykset

Ovatko harjoituspuhelut oikeita puheluja?

Ne ovat simuloituja puheluja, joissa tekoälysoittajat soittavat tekoälyagenteillesi. Soita erillinen testipuhelu omaan puhelimeesi kuullaksesi agentin oikealla linjalla.

Voinko harjoitella useammalla kielellä?

Harjoitustyökalu ajaa simuloituja puheluja japaniksi ja englanniksi. Aseta, kuinka monta kumpaakin haluat agenttia kohden.

Kuinka monta puhelua kannattaa ajaa?

Aloita pienestä, muutamalla kustakin skenaariosta agenttia kohden, ja lue tulokset tarkasti. Kasvata määrää vain, kun sille on syy, kuten muutoksen testaaminen eri kielillä.

Muuttavatko opit agenttiani automaattisesti?

Eivät. Opit odottavat tarkistustasi. Otat käyttöön ne, joista olet samaa mieltä, ja hylkäät muut.

Mitä arvosana kertoo minulle?

Se näyttää, miten simuloitu puhelu sujui kriteereihin nähden, ja arvioijan huomautukset jokaisesta vastauksesta. Se on näyttöä, ja oikeat soittajat voivat silti käyttäytyä toisin.

Entä jos agentti näkyy harmaana?

Agentti, joka ei vielä voi vastata puheluihin, on merkitty kykenemättömäksi vastaamaan, eikä sitä voi valita. Viimeistele ensin sen määritykset.

Aloita harjoituserä tekoälyagentillesi Callissa

Demokonsolissa voit kokeilla saapuvia puheluita simulaatiossa.

Aiheeseen liittyvät oppaat