Sesli yapay zekâ teknolojisi

Telefon Görüşmelerinde Konuşma Tanımayı İyileştirmek: Pratik Çözümler

Konuşma tanıma telefon hatlarında neden zorlanır, ne işe yarar: daha net ses, dil ve kelime ayarları, özenli sorular, geri okuma ve düzenli test.

Call editör ekibi · Yayınlanma · 5 dk okuma

Bir sesli asistan, duyduğu kadar iyidir. Konuşma tanıma "salı saat onda"yı "sanal saat onda"ya çevirirse dil modeli ne kadar iyi olursa olsun, sonrasındaki her şey ters gider. Aynısı görüşme dökümleri ve özetleri için de geçerlidir: tanıma aşamasındaki bir hata sonraki her adıma yayılır.

Ekrandaki bir dökümü kontrol ederken kulaklıkla görüşme sesini dinleyen bir teknisyen
Örnek görsel

Bu rehber, telefondaki konuşmanın neden zor olduğunu, en sık hangi hataların görüldüğünü ve hangi çözümlerin zamanınıza değdiğini açıklıyor. Altyapının genel işleyişi için bkz. Sesli Yapay Zekâ Nasıl Çalışır: STT, LLM ve TTS; ses tarafı için ise Telefon Sesi Konuşma Tanıma İçin Neden Zordur?.

Telefondaki konuşma neden zordur?

Bir telefon görüşmesi insan sesini dar bir kanaldan geçirir. Yüksek ve alçak frekanslar kesilir, sinyal sıkıştırılır ve yolda paketler kaybolabilir. Buna arayanın ortamını da ekleyin: trafik, televizyon, rüzgâr, mutfakta açık bir hoparlör. Tanıma sistemleri çok miktarda konuşmayla eğitilir, ancak bu tür koşullar yine de hata oranlarını yükseltir.

Tanımayı neler bozar?

  • Dar bant genişliğiTelefon sesi sıradan kayıtlardan daha az ayrıntı taşır; bu yüzden benzer sesler birbirine karışır.
  • Arka plan gürültüsüArabalar, kalabalıklar ve makineler sesle yarışır.
  • Kötü mikrofonlarHoparlör modları, ucuz kulaklıklar ve uzaktaki mikrofonlar yankı ekler.
  • Konuşma tarzıHızlı konuşma, mırıldanma ve alışılmadık aksanlar işi zorlaştırır.
  • Nadir kelimelerSistemin nadiren gördüğü isimler, markalar, sokak adları ve jargon.
  • Üst üste binen konuşmaSöz kesmeler, yan sohbetler ve aynı anda konuşan iki kişi.

Tipik hatalar

Sesteş kelimelerde (örneğin hem sayı hem de "surat" anlamına gelen "yüz"), gruplar hâlinde okunan rakamlarda, harf harf söylenen isimlerde, tarih ve saatlerde ve cümle başındaki kısa kelimelerde sorun bekleyin. Hangi hataları yaşadığınızı bilmek onları düzeltmeyi kolaylaştırır. Bkz. Sesle İsimleri, Sayıları ve Adresleri Doğru Almak.

Temellerle başlayın

Karmaşık bir şeyi değiştirmeden önce basit şeyleri kontrol edin.

Sırasıyla temel bir kontrol listesi

  1. Sesi kontrol edinGerçek görüşmelerin kayıtlarını dinleyin. Bir bölümü siz anlayamıyorsanız sistem de anlayamaz.
  2. Dili ayarlayınArayanların kullandığı dili seçin ya da arayanlar farklılık gösteriyorsa otomatik algılamayı açın.
  3. Duraklamaları ayarlayınSistemin arayanın konuşmayı bitirdiğine karar vermeden önce ne kadar sessizlik bekleyeceğini ayarlayın.
  4. Gürültü işlemeyi ayarlayınSistemi arka plan sesine karşı daha hassas ya da daha az hassas yapın.
  5. Gerçek seslerle test edinFarklı konuşmacıları, cihazları ve ortamları deneyin.

Dil ve algılama

Arayanların çoğu tek bir dil konuşuyorsa bunu açıkça ayarlayın. Otomatik algılama arayanlar farklılık gösterdiğinde faydalıdır, ancak oturması birkaç kelime alabilir ve "evet" gibi kısa ifadeler yanlış değerlendirilebilir. Çok dilli bir hat için şu yazıyı okuyun: Yapay Zekâ ile Çok Dilli Telefon Desteği. Aksanlar ve ağızlar da önemlidir; bkz. Sesli Yapay Zekâda Aksanlar ve Ağızlar.

Duraklamalar ve söz sırası

Sistem insanların sözünü cümle ortasında kesiyorsa daha uzun beklemesi için sessizlik eşiğini yükseltin. Yanıt vermekte yavaş görünüyorsa eşiği düşürün. Yaşlı arayanlar ve sayı okuyan kişiler daha çok duraklar; onlarla test edin. Hızlı bir alışverişe uyan bir eşik, sesli düşünenleri bezdirebilir. Bkz. Ses Etkinliği Algılama (VAD) ve Sesli Asistanlarda Söz Sırası.

Gürültü hassasiyeti

Gürültülü bir sokak, sistemi konuşma olmayan yerde konuşma duyduğuna inandırabilir ya da alçak sesli konuşmayı gizleyebilir. Yalnızca ofiste değil, gürültülü bir ortamda da test edin ve hassasiyeti adım adım ayarlayın.

Kolay tanınan sorular tasarlayın

Çoğu zaman en ucuz iyileştirme tanıma motorunda değil, asistanın ne sorduğundadır.

Önemli olanı teyit edin

İsimler, telefon numaraları, tarihler, adresler ve sonuç doğuran her şey için duyduğunuzu tekrarlayın ve arayandan teyit etmesini isteyin. "Ayın dördü, salı, sabah saat on olarak not aldım. Doğru mu?" demek, varsaymaktan çok daha güvenilirdir. İzin verilen durumlarda, zor bilgileri iletmek için başka bir yol sunun; örneğin kişinin sonradan dolduracağı şekilde ona gönderilen bir mesaj.

Kendi kelimelerinizle sisteme yardım edin

Tanıma hataları çoğu zaman işletmenize özgü kelimelerde yoğunlaşır: ürün adları, çalışan adları, yer adları, tıbbi veya teknik terimler. Yardımcı olabilecek yollar şunlardır:

Dinleme ile konuşma arasındaki farka dikkat edin. Telaffuz sözlüğü bir kelimenin nasıl duyulduğunu değil, nasıl okunduğunu değiştirir.

Başarısızlığı zarafetle yönetin

İyi ayarlanmış bir sistem bile bazen yanlış duyar. Yedek akışı tasarlayın: bir başarısız denemeden sonra soruyu farklı ifade edin; ikinciden sonra bir kişi, geri arama veya mesaj gibi başka bir yol sunun. Arayanı asla aynı yönlendirme üzerinden üç kez döndürmeyin. Teknoloji başarısız olduğunda zarif bir çıkış ilişkiyi korur.

Ölçün ve test edin

Ölçüm olmadan bir değişikliğin işe yarayıp yaramadığını anlayamazsınız. Onay alınmış ve izni kayıt altına alınmış gerçek görüşmelerden küçük bir test seti oluşturun: örneğin tipik seslerinizi, cihazlarınızı ve gürültü koşullarınızı kapsayan elli kadar kısa kesit. Her biri için söyleneni tanınanla karşılaştırın ve her küçük kelimeyi değil, yanlış bir rakam gibi önem taşıyan hataları sayın.

Aylık tanıma değerlendirmesi

  • Başarısız olanlar dahil gerçek görüşmelerden bir örnek dinleyin.
  • En çok yanlış duyulan beş kelimeyi veya ifadeyi listeleyin.
  • İfadelerin, ayarların veya kelime dağarcığının bunları çözüp çözemeyeceğini kontrol edin.
  • Her değişiklikten sonra aynı kesitleri yeniden test edin.
  • Yalnızca temiz örnekleri değil, gürültülü ve aksanlı örnekleri de dahil edin.
  • Bir deneyi tekrarlamamak için değişiklikleri ve sonuçları kaydedin.

Bkz. Sesli Yapay Zekâ Asistanını Yayına Almadan Önce Test Etmek ve Sesli Asistan Görüşmeleri Nasıl Değerlendirilir?.

Call'da nasıl yapılır?

Call, her yapay zekâ asistanı için dinleme ayarlarını ses ayarları altında yapmanızı sağlar. Transkripsiyon bölümünde dili seçer ya da otomatik algılatır, bir sessizlik eşiğini ve bir gürültü hassasiyeti kontrolünü ayarlarsınız. Sayfadaki bir uyarı bandı, canlı görüşmelerin bugün hangi ayarları kullandığını belirtir. Asistan arayanların sözünü cümle ortasında kesiyorsa sessizlik eşiğini yükseltin.

Call'daki tanıma, görüşmeye ve telefon hattına bağlıdır; bu yüzden gerçek hatlarda test edin. Bkz. Call'da Görüşme Geçmişini ve Özetleri Kullanmak ve Call'da Görüşme Dökümlerinde Arama Yapmak.

Sık sorulan sorular

Telefonda konuşma tanıma neden akıllı telefonumdakinden daha az doğru?

Telefon hatları modern bir mikrofona göre daha dar ve daha sıkıştırılmış ses taşır; arayanlar da çoğu zaman gürültülü yerlerde ya da hoparlör modundadır. Yazılımın çalışabileceği malzeme azalır, bu yüzden daha fazla hata olur.

Tek bir dil mi ayarlamalıyım, yoksa otomatik algılama mı kullanmalıyım?

Arayanların neredeyse tamamı tek bir dil kullanıyorsa onu ayarlayın. Arayanlar farklılık gösterdiğinde otomatik algılamayı kullanın ve yanlış algılanabilen evet ve hayır gibi kısa yanıtları test edin.

İsimlerin ve sayıların tanınmasını nasıl iyileştirebilirim?

Her seferinde tek bir öğe isteyin, arayanlara rakamları nasıl söyleyeceklerini belirtin, geri okuyarak teyit edin ve sisteminiz izin veriyorsa önemli terimleri kelime dağarcığına ekleyin.

Telaffuz sözlüğü asistanın duyduklarını iyileştirir mi?

Hayır. Asistanın kelimeleri sesli telaffuz etme biçimini iyileştirir. Arayanların asistanı anlamasına yardımcı olabilir, ancak tanıma ayrı bir ayardır.

Bir değişikliğin işe yarayıp yaramadığını nasıl anlarım?

Gerçek görüşme kesitlerinden oluşan sabit bir set tutun, önemli hataları öncesinde ve sonrasında sayın ve her değişiklikten sonra aynı seti yeniden çalıştırın. Şanslı tek bir görüşme hiçbir şey kanıtlamaz.

Call'da transkripsiyon ayarlarını ince ayarlayın ve görüşme dökümlerini inceleyin

Demo konsolunda gelen çağrıları bir simülasyonla deneyebilirsiniz.

İlgili rehberler