Puhe-tekoälyn teknologia

Aksentit ja murteet puhetekoälyssä: testaus todellisilla soittajilla

Miksi puheagentit ymmärtävät joitakin aksentteja paremmin kuin toisia, mitä voi säätää ja miten rakennetaan reilu testi oikeilla äänillä, ettei ketään suljeta ulos.

Call-toimitus · Julkaistu · Lukuaika 4 min

Jokaisella on aksentti. Puheagentti on kuitenkin koulutettu tietyllä äänijoukolla, ja se ymmärtää yleensä parhaiten ne äänet, joita se kuuli eniten. Yritykselle, joka palvelee monimuotoista yleisöä, tämä ei ole pieni tekninen yksityiskohta. Se ratkaisee, saako soittaja apua vai turhautuuko hän.

Eritaustaisia kollegoita keskustelemassa pöydän ympärillä
Havainnekuva

Tämä opas kertoo, miksi aksentit ja murteet vaikuttavat puhetekoälyyn, mitä voi säätää ja miten testataan reilusti. Se liittyy artikkeleihin Monikielinen puhetekoäly ja Miksi puhelimen ääni on vaikea puheentunnistukselle, jotka täydentävät kieli- ja ääniosuudet.

Miksi aksenteilla on merkitystä tunnistimelle

Puheentunnistin oppii kuvioita tallenteista, joihin on liitetty teksti. Jos sen koulutustallenteissa jokin alueellinen aksentti, ikäryhmä tai muu kuin äidinkielinen puhuja on aliedustettu, näiden äänten kuviot ovat heikompia. Tunnistin ei ole puolueellinen inhimillisessä mielessä; sillä on yksinkertaisesti vähemmän näyttöä. Vaikutus voi kuitenkin olla epätasa-arvoinen palvelu.

Mikä eroaa puhujien välillä

  • ÄäntäminenVokaalit ja konsonantit vaihtelevat alueen ja äidinkielen mukaan.
  • Rytmi ja painoMikä tavu saa painon ja kuinka nopeasti sanat sulautuvat yhteen.
  • SanastoArkisten asioiden paikalliset nimitykset, paikannimet ja slangi.
  • Kieliopilliset kuviotMurremuodot ja lauserakenteet, jotka poikkeavat kirjakielestä.
  • KoodinvaihtoSiirtyminen kahden kielen välillä saman lauseen aikana.

Litterointia lukevalla kielimallilla on samankaltainen ongelma. Ilmaus, joka on luonteva yhdessä murteessa, voi olla harvinainen kirjoitetussa tekstissä, josta malli oppi, ja sen merkitys voi jäädä ymmärtämättä.

Murteet saman kielen sisällä

On yleinen väärinkäsitys, että kieli olisi yksi asia. Eri maissa puhuttu englanti vaihtelee suuresti äänteiltään ja sanoiltaan, ja sama pätee moniin kieliin, kuten alueellisia murteita sisältävään japaniin sekä espanjaan, arabiaan ja kiinaan. Myös suomen murteet ja puhekieli eroavat kirjakielestä. Vakiomuotoon viritetty järjestelmä voi selvitä alueellisesta puheesta vain osittain.

Paikallinen sanasto on erityinen ongelma. Katujen nimet, kaupunginosat, tuotteiden lempinimet ja sukunimet puuttuvat usein yleissanakirjasta. Jos soittajanne sanovat niitä säännöllisesti, tunnistin muuttaa ne todennäköisemmin samalta kuulostaviksi yleissanoiksi.

Mitä voi säätää

Valitkaa kieli ja alue huolella

Monet tunnistimet tarjoavat kielestä alueellisia variantteja. Soittajianne lähimmän variantin valitseminen voi auttaa. Automaattinen kielentunnistus on kätevä sekalaiselle soittajajoukolle, mutta se tekee päätöksen puhelun alussa, joten testatkaa, miten se toimii lyhyillä lausumilla ja aksenttipuheella. Callissa litteroija antaa valita kielen tai tunnistaa sen automaattisesti, ja agentti pitää ensimmäisen tunnistamansa kielen koko puhelun ajan, ellei soittaja pyydä toista.

Lisätkää tärkeät sanat

Kun alusta tukee mukautettua sanastoa tai vihjeitä, lisätkää yritysten nimet, tuotenimet, henkilöstön nimet ja paikalliset paikannimet. Silloinkin kun se ei tue, voitte vähentää haittaa vahvistamalla nämä sanat ääneen ja antamalla agentille lähteissä lyhyen listan odotetuista nimistä, jotta se voi yhdistää läheltä menevän vastineen.

Kirjoittakaa selkeästi

Lyhyisiin, selkeisiin kysymyksiin on helpompi vastata, ja niiden vastaukset on helpompi tunnistaa kuin pitkien, idiomaattisten. Välttäkää slangia agentin omassa puheessa ja huumoria, joka perustuu paikallisiin ilmauksiin.

Antakaa soittajille tilaa

Muut kuin äidinkieliset puhujat ja epävarmat ihmiset voivat pitää taukoja tai puhua hitaasti. Pidempi hiljaisuusraja auttaa, kuten artikkelissa Puheaktiivisuuden tunnistus kuvataan.

Testatkaa oikeilla äänillä

Reiluutta ei voi arvioida muutaman samantaustaisen kollegan perusteella. Kootkaa testiryhmä, joka muistuttaa soittajianne.

Reilu testisuunnitelma

  1. Listatkaa soittajanneAlueet, kielet, ikäryhmät ja tyypilliset puhelintyypit.
  2. Rekrytoikaa testaajatVapaaehtoiset, jotka puhuvat kuten nuo soittajat, heidän suostumuksellaan.
  3. Kirjoittakaa käsikirjoitusTodellisia tehtäviä, joissa on nimiä, numeroita ja paikallisia paikkoja.
  4. Soittakaa puhelutKäyttäkää tavallisia matkapuhelimia ja realistista melua.
  5. Vertailkaa tuloksiaEtsikää ryhmiä, joissa virheitä on huomattavasti enemmän.
MittariMitä se näyttää
Oikein tunnistetut sanatKuinka hyvin tunnistin käsitteli kunkin ryhmän
Suoritetut tehtävätSaivatko soittajat tarvitsemansa
Toistot ja korjauksetKuinka usein agentti kysyi uudelleen
SiirtoasteKuinka usein soittajat luovuttivat ja pyysivät ihmistä
Soittajan kokemusMitä testaajat sanoivat kokemuksesta

Verratkaa ryhmiä samoilla mittareilla. Ero tehtävien suorittamisessa ryhmien välillä on merkki tutkia asiaa, vaikka kokonaiskeskiarvo näyttäisi hyvältä. Suojatkaa testaajien yksityisyys ja säilyttäkää tallenteita vain niin kauan kuin tarvitsette.

Kaksi kuviteltua esimerkkiä

Pieni eläinlääkäriasema rannikkokaupungissa saa puheluita paikallisilta, jotka käyttävät katujen ja rantojen lempinimiä. Tunnistin muuttaa yhden lempinimen jatkuvasti asiaan liittymättömäksi yleissanaksi. Asema lisää paikalliset nimet agentin lähteisiin ja antaa agentin toistaa sijainnin takaisin, ja virheet vähenevät. Mallissa ei muuttunut mikään; korjaus oli sanalista.

Alueellinen pankkikonttori saa puheluita asiakkailta, jotka ovat oppineet kielen aikuisina ja puhuvat hitaasti pitkin tauoin. Agentti vastaa jatkuvasti ennen kuin he ovat lopettaneet. Hiljaisuusrajan nostaminen ja agentin kysymysten lyhentäminen antavat heille tilaa, ja toistojen määrä laskee. Jälleen korjaus oli asetus ja käsikirjoitus, ei uusi tekniikka.

Molemmissa tarinoissa on sama kaava: kuunnelkaa epäonnistumiset, tunnistakaa kyseiset sanat tai ajoitus ja tehkää pieni muutos. Suuret väitteet tarkkuudesta ovat vähemmän hyödyllisiä kuin muistikirja siitä, mikä omalla linjallanne meni pieleen ja mikä sen korjasi.

Pitäkää muistikirja elävänä käyttöönoton jälkeen. Soittajat muuttuvat, uusia asuinalueita ja tuotteita syntyy, ja tänään tehty korjaus voi vanhentua. Kuukausittainen katsaus useimmin korjattuihin sanoihin on kevyt rutiini, joka pitää agentin ajan tasalla.

Älkää koskaan antako järjestelmän olla muuri

Säädittepä kuinka hyvin tahansa, joitakin soittajia ei ymmärretä. Suunnitelkaa sitä varten. Kahden epäonnistuneen yrityksen jälkeen kirjata jokin tieto agentin pitää vaihtaa lähestymistapaa tai siirtää puhelu, ei kiertää kehää. Tarjotkaa viestin ottamista, takaisinsoiton järjestämistä tai yhdistämistä ihmiselle miehitettyinä aikoina.

Reiluuden tarkistuslista

  • Testattu puhujilla jokaisesta soittajien pääryhmästä
  • Kieli- ja alueasetukset vastaavat soittajianne
  • Paikalliset nimet ja termit lisätty tai vahvistettu ääneen
  • Hiljaisuusasetukset sallivat hitaamman puheen
  • Keskeiset tiedot luetaan takaisin ennen käyttöä
  • Ihminen on tavoitettavissa kahden epäonnistuneen yrityksen jälkeen
  • Siirto- ja toistoasteet tarkistettu ryhmittäin

Työskentely tämän parissa Callissa

Callissa valitkaa agentin kieliasetus, määrittäkää hiljaisuusraja ja melunherkkyys ja kirjoittakaa avaus- ja virheviestit selkeällä kielellä. Käyttäkää sitten testipuhelua kuullaksenne agentin omassa puhelimessanne ja pyytäkää eri aksentein puhuvia kollegoita tekemään samoin. Avatkaa jälkikäteen kukin puhelu puheluhistoriassa lukeaksenne keskustelun vuoro vuorolta ja hakekaa litteroinneista toistuvasti väärin kuultuja sanoja. Korjatkaa lähteenne, lisätkää tarkat vastaukset, kun sanamuodolla on väliä, ja pitäkää reitti ihmiselle auki helpdeskin kautta.

Usein kysytyt kysymykset

Ymmärtääkö puhetekoäly kaikkia aksentteja yhtä hyvin?

Ei. Tarkkuus vaihtelee usein aksenttien ja murteiden välillä sen mukaan, millä äänillä järjestelmä on oppinut. Testatkaa omilla soittajillanne yleisten väitteiden sijaan.

Voinko kertoa agentille, mitä aksenttia odottaa?

Usein tunnistimelle voi valita kielivariantin, ja joissakin järjestelmissä voi lisätä sanastoa. Tarkistakaa, mitä alustanne tukee, ja testatkaa tulos.

Miksi agentti ymmärtää paikalliset paikannimet väärin?

Yleissanakirjoissa on harvoin jokainen paikallinen nimi, joten tunnistin valitsee samankaltaisen yleissanan. Vahvistakaa nimet ääneen ja antakaa odotetut nimet aina kun mahdollista.

Pitäisikö agentin vaihtaa kieltä automaattisesti?

Se voi auttaa sekalaista soittajajoukkoa, mutta testatkaa sitä lyhyellä ja aksenttipuheella. Callissa ensimmäinen tunnistettu kieli pidetään koko puhelun ajan, ellei soittaja pyydä toista.

Mistä tiedän, onko agenttini epäreilu joillekin soittajille?

Verratkaa tehtävien suorittamista, toistoja ja siirtoasteita eri tavoin puhuvien testaajaryhmien välillä. Suuret erot ovat merkki säätää asetuksia, lähteitä tai käsikirjoitusta.

Entä jos soittajaa ei ymmärretä lainkaan?

Tarjotkaa nopeasti toinen reitti: viesti, takaisinsoittopyyntö tai ihminen. Kenenkään soittajan ei pidä jäädä loukkuun järjestelmään, joka ei ymmärrä häntä.

Testatkaa tekoälyagenttianne eri äänillä Callissa

Demokonsolissa voit kokeilla saapuvia puheluita simulaatiossa.

Aiheeseen liittyvät oppaat