Yapay Zekâ Resepsiyonistinizin İşe Yarayıp Yaramadığını Ölçmek
Kaçırılan çağrılar, mesaj kalitesi, geri aramalar ve arayan geri bildirimi: yapay zekâ resepsiyonistin işe yarayıp yaramadığını gösteren sayılar ve incelemeler.
Telefonu yanıtladığı için bir yapay zekâ resepsiyonistin işe yaradığını düşünmek kolaydır. İşletmeye gerçekten yardım edip etmediğini bilmek ise daha zordur. Bir ölçüm planı olmadan izlenimlere güvenirsiniz: işletme sahibi iyi bir çağrı ve kötü bir çağrı fark eder ve görüşü buna göre bir o yana bir bu yana savrulur.

Bu rehber, küçük bir işletmenin bir veri ekibi olmadan takip edebileceği küçük bir ölçüt seti ve bunları iyileştirmelere dönüştürmek için bir rutin öneriyor. Bir çağrı merkezindeki daha geniş göstergeler için çağrı merkezi KPI listesine bakın.
Önce başarıyı tanımlayın
Başarı, yapay zekâyı neden devreye aldığınıza bağlıdır. Verilere bakmadan önce hedefinizi tek bir cümleyle yazın; aksi hâlde hangi sayılar iyi görünüyorsa onları seçersiniz.
Yaygın hedefler ve ölçütleri
- Daha az kaçırılan çağrıYanıtlanan çağrılar, terk edilen çağrılar, yanıtsız çağrılar.
- Daha iyi mesai dışı karşılamaÇalışma saatleri dışında alınan mesajlar ve bunların kaçının işe dönüştüğü.
- Personelin daha az bölünmesiPersonel olmadan karşılanan çağrılar ve tekrarlanan sorulardan kazanılan zaman.
- Daha iyi arayan deneyimiŞikâyetler, tekrar aramalar ve arayanların yorumları.
Başlangıçta bir veya iki hedef seçin ve bunları tüm ekibin görebileceği bir yere yazın. Yirmi ölçütlü bir puan tablosu nadiren okunur.
Bir başlangıç değeri alın
Karşılaştırmak için bir "önce" durumuna ihtiyacınız var. Mevcut düzeninizden iki ila dört haftalık veri toplayın.
Başlangıç değeri oluşturmak
- Çağrıları sayınToplam çağrılar ve yanıtsız kalan çağrılar.
- Zamanlamayı not edinBoşlukların ne zaman oluştuğu ve arayanların ne kadar beklediği.
- Nedenlerden örneklem alınArayanların ne sorduğunu görmek için bir örneklemi okuyun veya dinleyin.
- Harcanan zamanı kaydedinTekrarlanan sorulara harcanan personel zamanını tahmin edin.
- SaklayınRakamları daha sonra karşılaştırmak üzere tek bir yerde tutun.
Raporlarınız yoksa bir çetele tablosu da iş görür. Başlangıç değerinin kesin olması gerekmez; dürüst olması gerekir. Tanımlar için yanıtlama oranı ve terk oranı yazısına bakın.
Temel ölçütler
Kısa bir liste ihtiyaçların çoğunu karşılar. Her birini her seferinde aynı şekilde ölçün.
| Ölçüt | Size ne söyler | Nasıl kontrol edilir |
|---|---|---|
| Yanıtlanan çağrılar | Arayanların birine veya bir şeye ulaşıp ulaşmadığı | Duruma göre çağrı geçmişi |
| Terk edilen çağrılar | Arayanların vazgeçip vazgeçmediği | Çağrı geçmişi, sonuçsuz kısa çağrılar |
| İşe yarar mesajlar | Mesajların ek arama yapmadan işleme alınıp alınamadığı | Her hafta on mesajlık örneklem |
| Tamamlanan geri aramalar | Mesajların iletişime dönüşüp dönüşmediği | Geri aramaları mesajlarla karşılaştırarak sayın |
| İnsan olmadan karşılananlar | Yapay zekânın basit soruları çözüp çözmediği | Mesajsız sona eren transkriptleri inceleyin |
| Bir insana devredilenler | Yapay zekânın sınırlarını bilip bilmediği | Aktarılan çağrıları ve nedenlerini sayın |
| Şikâyetler | Arayanların memnuniyetsiz olup olmadığı | Personel notları ve yazılı geri bildirimler |
Kesin görünen ama pek bir şey ifade etmeyen hesaplardan kaçının; derli toplu bir yüzde kötü bir deneyimi gizleyebilir. Örneğin, çağrıların çoğu kapatılan çağrılarsa "yapay zekâ çağrıların çoğunu karşıladı" ifadesi anlamsızdır. Yalnızca yapay zekânın yanıt verdiğini değil, görüşmede ne olduğunu her zaman sorun. Geri aramalara ilişkin ölçütler için geri arama tamamlama oranı yazısını okuyun.
Çağrıları okuyun
Sayılar ne olduğunu gösterir. Transkriptler nedenini gösterir. İlk ay haftada yirmi çağrı okumak size herhangi bir grafikten daha fazlasını anlatır.
- Arayanlar nerede kendilerini tekrarlıyor?
- Yapay zekâ hangi sorulardan kaçınıyor veya hangilerini kötü yanıtlıyor?
- Arayanlar nerede bir insan istiyor?
- Ton her arayan türü için doğru mu?
- Beklemediğiniz sorular var mı?
Sorunları ortak bir listeye işaretleyin ve nedenlerine göre gruplayın: eksik bilgi, belirsiz ifade, yanlış yönlendirme veya sistemin bir sınırlaması. En sık görülen nedeni düzeltin. Çağrılardan bilgi eksiklerini bulmak ve sesli yapay zekâ değerlendirme ölçütleri yazılarına bakın.
Arayanlara nazikçe sorun
Doğrudan geri bildirim değerlidir ama abartması kolaydır. Her arayandan puan istemeyin. Bazı durumlarda kısa bir takip yeterlidir ya da müşterilerin personelle konuşurken söylediklerine güvenebilirsiniz.
Arayanlardan geri bildirim almanın yolları
| Görüşmeden sonra sormak | Söylediklerini dinlemek | |
|---|---|---|
| Emek | Bir anket veya takip gerektirir | Transkriptleri ve personel notlarını okumak |
| Yanlılık | Yalnızca yanıt verenler | Arayan herkesi kapsar |
| En uygun olduğu iş | Belirli sorular | Örüntüleri fark etmek |
Anket yapacaksanız bir veya iki soruyla sınırlı tutun. Bıkkınlık yaratmayan yaklaşımlar için çağrı sonrası CSAT yazısına bakın ve müşterilerle iletişime ilişkin kuralların ülkeden ülkeye farklılık gösterdiğini unutmayın.
Bir inceleme ritmi
Bir alışkanlık, büyük bir yıllık incelemeden iyidir. Sıklığı bulunduğunuz aşamaya göre ayarlayın.
İnceleme ritmi
- İlk hafta her gün: tüm mesajları ve birkaç çağrıyı okuyun
- İlk ay her hafta: temel ölçütleri inceleyin ve en önemli sorunu düzeltin
- Sonrasında her ay: başlangıç değeriyle karşılaştırın ve ekiple paylaşın
- Her çeyrekte: hedefin değişip değişmediğini sorun
- Her değişiklikten sonra: etkisini sonraki hafta boyunca kontrol edin
Her seferinde tek bir şeyi değiştirin. Karşılamayı, kaynakları ve yönlendirmeyi birlikte değiştirirseniz hangisinin işe yaradığını bilemezsiniz.
Uyarı işaretleri
Bazı örüntüler, genel rakamlar ne derse desin bir sorun olduğuna işaret eder.
- Arayanların karşılamanın hemen ardından bir insan istemesi.
- Numarası eksik veya yanlış olan çok sayıda mesaj.
- Personelin arayanlara aynı soruları yeniden sorması.
- Aynı konuda tekrar aramaların artması.
- Belirgin bir neden olmadan aniden sona eren çağrılar.
Bunları gördüğünüzde ilgili çağrıları hemen okuyun. Kaynakları, talimatları ve ses kalitesini kontrol edin. Bir asistan bir konuyu düzenli olarak yanıtlayamıyorsa ya içeriği ekleyin ya da o konuyu bir insana yönlendirin.
Tek sayfalık örnek bir puan tablosu
Varsayımsal küçük bir işletme için basit bir puan tablosu aşağıda. Her hafta kendi çağrı geçmişinizdeki rakamlarla doldurun.
| Soru | Bu hafta | Geçen hafta | Not |
|---|---|---|---|
| Kaç çağrı geldi? | Buraya yazın | Buraya yazın | Mesai dışı dahil |
| Kaçı yanıtsız kaldı? | Buraya yazın | Buraya yazın | Başlangıç değeriyle karşılaştırın |
| Kaç işe yarar mesaj var? | Buraya yazın | Buraya yazın | On tanesinden örneklem alın |
| Kaç geri arama tamamlandı? | Buraya yazın | Buraya yazın | Hedef süreniz içinde |
| Kaç arayan bir insan istedi? | Buraya yazın | Buraya yazın | Örüntülere bakın |
| Bu haftanın en önemli düzeltmesi neydi? | Buraya yazın | Buraya yazın | Yalnızca tek bir değişiklik |
Bunun gibi bir puan tablosu on dakika sürer. Değeri tek bir sayıda değil, alışkanlıkta ve eğilimdedir. Eski sayfaları saklayın. Birkaç hafta sonra kendi işletmeniz için normalin neye benzediğini görürsünüz; bu, başka bir yerden alınmış herhangi bir kıyaslamadan daha faydalıdır ve değişiklikleri hızla fark edersiniz. Tabloyu geri aramaları yapan kişiyle paylaşın; böylece herkes aynı resmi görür ve fark ettiklerini söyleyebilir. Bir araç, yalnızca rakamlar değil etrafındaki insanlar da öyle söylediğinde işe yarıyordur.
Kaçınılması gereken tuzaklar
- Yanıtlanan çağrıları başarı saymak. Kafa karışıklığıyla biten yanıtlanmış bir çağrı bir başarısızlıktır.
- Tek bir sayının peşine düşmek. Görüşme süresini kısaltmaya zorlarsanız faydalı görüşmeleri de kısaltabilirsiniz.
- Koşulları farklı haftaları karşılaştırmak. Resmî bir tatil veya bir kampanya örüntüyü değiştirir.
- Küçük örneklemleri göz ardı etmek. Birkaç çağrıyla tek bir kötü çağrı bir eğilim gibi görünür. Sonuç çıkarmadan önce yeterli veri toplayın.
- Personeli unutmak. Takip işlerine dair görüşleri başlı başına bir ölçüttür.
Call'da ölçüm
Call'da çağrı geçmişi her çağrıyı durumu, hattı, sonucu, süresi ve özetiyle listeler; yapay zekâ çağrı geçmişi de her görüşmeyi listenin yanında gösterir. Filtreler, yanıt yok veya sesli mesaj gibi duruma göre daraltmanızı sağlar ve çağrılar bir elektronik tabloya aktarılabilir. Analiz sayfaları çağrı etkinliğini ve yapay zekâya gelen çağrıları gösterir; bir sayfa da asistanın çağrılardan ne öğrendiğini, değişiklikleri geri alma seçeneğiyle birlikte gösterir. Bu araçlar size sayıları verir; nedenleri ise transkriptler verir.
Sık sorulan sorular
En önemli tek ölçüt hangisi?
Hedefinize bağlıdır. Çoğu küçük işletme için bir yanıt veya işleme alınabilecek bir mesaj gibi faydalı bir sonuç alan arayanların sayısı, yanıtlanan çağrıların sayısından daha bilgilendiricidir.
Değerlendirmek için ne kadar beklemeliyim?
Örüntüleri görmeye yetecek kadar çağrı birikmesi için en az birkaç hafta tanıyın. Belirgin sorunları yakalamak için ilk hafta günlük sonuçlara bakın.
Bir panele ihtiyacım var mı?
Başlangıçta hayır. Haftalık bir çetele ve transkriptlerden bir örneklem yeterlidir. Çetelenin yanıtlayamayacağı bir sorunuz olduğunda panel ekleyin.
Yapay zekânın yanlış yanıt verip vermediğini nasıl anlarım?
Transkriptleri okuyun, bilinen sorularla test edin ve personelden hataları işaretlemesini isteyin. Yanlış yanıtlar çoğu zaman arayanların tekrar araması veya yapay zekâyla çelişmesi şeklinde ortaya çıkar.
İnsan bir resepsiyonistle mi karşılaştırmalıyım?
Aynı ölçütleri kullanarak daha önce sahip olduğunuz düzenle karşılaştırın. İnsanlar ve yapay zekâ farklı şeyleri iyi yapar; bu yüzden karşılaştırmayı puan vermek için değil, iyileştirmek için kullanın.
Rakamlar iyi görünüyor ama personel memnun değilse ne olur?
Personele inanın. Takip işlerini ve sayıların gizlediği sorunları onlar görür. Neyin ters gittiğini sorun ve düzeltin.