Kalite ve ekip

Kaç Çağrıyı Değerlendirmelisiniz? Pratik Kalite Örnekleme Rehberi

Kalite için kaç çağrı değerlendirilmeli? Rastgele ve hedefli örneklem, temsilci başına asgari sayı, küçük ekipler için kısa yollar ve yanlılıktan kaçınma.

Call editör ekibi · Yayınlanma · 5 dk okuma

“Kaç çağrıyı değerlendirmeliyiz?” her yeni kalite programının sorduğu ilk sorudur ve dürüst yanıt şudur: Neyi öğrenmek istediğinize ve ne kadar zamanınız olduğuna bağlıdır. Çağrıların çok küçük bir kısmını değerlendirmek gerçek sorunları kaçırabilir; çok fazlasını değerlendirmek ise kimsenin koçluk yapmaya vakit bulamadığı bir birikime yol açar. Bu rehber, istatistik diploması gerektirmeden örneklemeyi pratik açıdan nasıl düşüneceğinizi anlatıyor.

Bir kalite analisti masasında, monitördeki çağrı listesinden kayıt seçiyor
Örnek görsel

Bu konu, Çağrı Kalite Yönetimi (QA) Temelleri yazısında anlatılan daha geniş bir kalite rutininin parçasıdır; seçtiğiniz örneklem, Temsilcilere Çağrı Koçluğu İçin Basit Bir Çerçeve yazısındaki oturumları beslemelidir.

Örneklemin amacıyla başlayın

Farklı hedefler farklı örneklemler gerektirir. Hangisini yapmaya çalıştığınıza karar verin:

Örneklem ne için?

  • Adil temsilci geri bildirimiHer temsilci düzenli ve karşılaştırılabilir bir değerlendirilmiş çağrı seti alır.
  • Sistemik sorunları görmekMüşterilerin ne sorduğuna ve süreçlerin nerede aksadığına geniş bir bakış.
  • Risk ve uyumHataların en çok önem taşıyacağı çağrıların hedefli değerlendirmesi.
  • Eğitim ve takdirPaylaşmak ve öğrenmek için mükemmel çağrılar bulmak.

Tek bir örneklem nadiren dördünü birden karşılar. Ekipler genellikle adalet için küçük bir rastgele örneklemi, risk için hedefli çağrılarla birleştirir.

Rastgele ve hedefli örnekleme

Çağrı seçmenin iki yolu

RastgeleHedefli
Çağrılar nasıl seçilir?Dönemdeki tüm çağrılar arasından tesadüfenSüre, duygu durumu, sonuç ya da anahtar kelimeler gibi bir sinyale göre
Güçlü yanıTipik çağrılara yansız bir bakışSorunları ve riskleri daha hızlı bulur
Zayıf yanıNadir ama ciddi sorunları kaçırabilirTek başına kullanılırsa çarpık bir resim verir
En uygun kullanımTemsilci puanları ve eğilimlerUyum, şikâyetler, koçluk fikirleri

İkisini birlikte kullanın. Yaygın bir model, her dönem temsilci başına iki üç rastgele çağrı ve tüm ekip için değerlendirilen birkaç hedefli çağrıdır. Raporlarınızda bu iki türü ayrı tutun; bir temsilcinin genel puanını hedefli çağrılarla hesaplamayın, yoksa en zor çağrıları alan temsilcileri cezalandırmış olursunuz.

Sayıyı seçmenin pratik bir yolu

Elinizdeki zamandan geriye doğru çalışın. Bir çağrının dikkatli değerlendirmesi genellikle çağrının kendisinden uzun sürer: dinlemek, puanlamak ve yorum yazmak. Dürüstçe tahmin edin.

Örneklem büyüklüğünü seçmek

  1. Değerlendirme süresini tahmin edinÖrneğin on dakikalık bir çağrının değerlendirilip yorumlanması on beş ila yirmi dakika sürebilir.
  2. Haftalık değerlendirme bütçenizi belirleyinKoçluk süresinden sonra değerlendiriciler her hafta kaç saat ayırabilir?
  3. Değerlendirme süresine bölünBu, düzgün biçimde değerlendirebileceğiniz çağrı sayısını verir.
  4. Temsilcilere dağıtınHer temsilciye en az asgari sayıyı verin, kalanını risk ve ihtiyaca göre bölüştürün.
  5. Bir ay sonra kontrol edinDeğerlendirmeler birikirse ya da erken biterse ayarlayın.

Temsilci başına asgari sayılar

Birçok ekip, geri bildirimin düzenli olması için temsilci başına ayda birkaç çağrı gibi bir taban belirler. Yeni temsilciler ya da bir gelişim planındakiler daha fazla alabilir; sonuçları istikrarlı deneyimli temsilciler daha az. Bir temsilci için daha büyük bir örneklem daha kötü bir temsilci demek değildir; yalnızca ek destek anlamına gelebilir.

Küçük ekipler

Beş ila on temsilcinizle çağrıların büyük bir kısmını değerlendirebilirsiniz. Bilimsel kesinlik konusunda endişelenmeyin. Temsilci başına ayda birkaç çağrı gibi yönetilebilir bir sayı seçin, bunları iyi değerlendirin ve bunlardan koçluk yapın. Önemli olan bunun her ay yapılmasıdır.

Örneklemde yanlılıktan kaçınmak

Dikkatle seçilmeyen bir örneklem yanıltabilir. Şu tuzaklara dikkat edin:

Seçim kurallarını yazılı ve görünür hale getirin. Temsilciler çağrıların nasıl seçildiğini bildiklerinde sonuçları kabul etmeye daha yatkın olurlar. Örneklemin gelen, giden ve farklı kuyruklar gibi ele aldığınız tüm kanalları ve çağrı türlerini kapsadığını da kontrol edin.

Temsilcilere karşı adalet

Temsilciler, sürecin adil olduğuna inandıklarında değerlendirmeyi kabul eder. Örneklemin nasıl seçildiğini açıklayın, kendi sonuçlarını herkesinkiyle aynı formatta gösterin ve değerlendiricilerin yazdığı yorumları görmelerine izin verin. Yarı zamanlı temsilcilere, gece çalışanlarına ve farklı çağrı türlerinde çalışanlara nasıl davrandığınıza ayrıca dikkat edin; çünkü karşılaştırılabilir olmayan bir örneklem adaletsiz puanlar doğurur.

Örneklem genelinde tekrarlayan bir zayıflık bulduğunuzda bunu önce bir ekip sorunu olarak ele alın: belirsiz süreç, eksik bilgi ya da yetersiz araçlar. Bireysel koçluk, sistem kontrol edildikten sonra gelir.

Hedefli değerlendirme için faydalı sinyaller

Sinyaller, her şeyi dinlemeden daha yakından bakmayı hak eden çağrıları bulmanıza yardımcı olur:

SinyalNeden faydalı?Örnek kullanım
Çok uzun çağrılarKafa karışıklığını, zor bir sorunu ya da verimsizliği gösterebilirSüreç boşlukları açısından değerlendirin
Sonda olumsuz müşteriOlası bir başarısızlık ya da karşılanmamış ihtiyaçHizmet telafisi açısından değerlendirin
Aktarmalar ve tekrarlanan başvurularOlası yanlış yönlendirme ya da eksik yanıtYönlendirme ve bilgi açısından değerlendirin
İşaretlenen kelimeler ya da ifadelerUyum ya da özen gereklilikleriKurala göre kontrol edin
Çok kısa çağrılarKapatılan çağrılar, yanlış numaralar, ani bitişlerAçılışı ve ele alışı kontrol edin
Mükemmel müşteri geri bildirimiÖğrenilecek iyi uygulamaİyi çağrılar kütüphanesine ekleyin

Örneklemi iyi kullanmak

Ardından hiçbir şey gelmeyen bir örneklem değersizdir. Çağrıyı hatırlamaları için sonuçları her temsilciyle hızlıca paylaşın. Tekrarlayan zayıf maddeleri bulmak için sonuçları temsilciler genelinde birleştirin ve bunları bireyleri suçlamak yerine eğitim, senaryolar ya da bilgi güncellemeleriyle düzeltin. Değerlendiricilerin tutarlı puanlaması için kalibrasyon yapın; ayrıntılar için Kalite Kalibrasyon Oturumları Nasıl Yürütülür? yazısına bakın.

Basit bir örnekleme planı

  • Değerlendirmenin amacı belirtildi
  • Her dönem temsilci başına rastgele çağrılar
  • Her dönem hedefli çağrılar ve kullanılan sinyaller
  • Yeni temsilciler ya da plandakiler için asgari sayılar
  • Seçim kuralları yazıldı ve paylaşıldı
  • Haftalık değerlendirme süresi bütçelendi
  • Kalibrasyon planlandı
  • Sonuçlar birkaç gün içinde paylaşıldı

Call'da örnekleme

Call'ın “İnceleme ve koçluk” bölümünde değerlendirme kuyruğu, değerlendirme bekleyen çağrıları en uzun ve en olumsuz olanlar önce gelecek şekilde listeler ve bir seferde en fazla on iki çağrı gösterir; böylece değerlendiriciler ilgi gerektirme olasılığı en yüksek çağrılarla başlar. Temsilci bazındaki sonuçlar; değerlendirmeleri, ortalama puanı, başarısız çağrıları ve kullanılan örnekleme planını gösterir. “Olası yanlış satış” ya da “Ekstra ilgi gerektiren müşteriler” bölümü, ifade kurallarıyla işaretlenen çağrıları eşleşen kelimelerle birlikte listeler; ancak yalnızca bir şey işaretlendiğinde görünür.

Bir yapay zekâ ajanının çağrıları yanıtladığı yerlerde, “Konuşma yapay zekâsı” içindeki “Otomatik değerlendirme” sekmesi, hiçbir insanın değerlendirmediği son çağrıları puanlayabilir ve gerekçelerini göstererek risklerine göre sıralayabilir; ayrıca çağrıları müşterilerin kullandığı kelimelere göre konulara ayırır. Yapay zekâ özetlerinden örnek alıp her birini “Doğru”, “Kısmen” ya da “Yanlış” olarak işaretlemenizi de sağlar. Çağrı seçmek için bu araçları kullanın, ancak nihai karar için süreçte mutlaka bir insan bulundurun.

Sık sorulan sorular

Değerlendirilecek çağrılar için standart bir yüzde var mı?

Hayır. Ekibinizin tutarlı biçimde değerlendirip koçluk yapabileceği bir sayı seçin. İyi değerlendirilmiş küçük bir örneklem, okunmadan bekleyen büyük bir örneklemden daha faydalıdır.

Temsilci başına ayda kaç çağrı makuldür?

Birçok ekip temsilci başına birkaç çağrıyla başlar ve ayarlar. Yeni temsilciler çoğu zaman daha fazla alır. Önemli olan her temsilcinin düzenli olarak değerlendirilmesidir.

Temsilciler hangi çağrıların değerlendirildiğini bilmeli mi?

Seçim kurallarını ve çağrıların değerlendirilebileceğini bilmelidirler. Hangi çağrıların seçileceğini önceden bilmeleri gerekmez; yine de süreç konusundaki şeffaflık güveni artırır.

Örneklemi yazılım bizim için seçebilir mi?

Yazılım, çağrıları duygu durumu, süre ya da işaretler gibi sinyallere göre sıralayarak zaman kazandırabilir. Bunu hedefli değerlendirme için kullanın ve resmin adil kalması için bazı rastgele çağrıları da koruyun.

Değerlendiricilerin yanlı olmasını nasıl önleriz?

Seçim kurallarını yazın, değerlendiricileri dönüşümlü çalıştırın, kalibrasyon oturumları yapın ve örneklemlerin tüm vardiyaları ve çağrı türlerini kapsadığından emin olun.

Yeterince çağrıyı değerlendiremezsek ne olur?

Puan kartını en önemli maddelere indirin, daha az çağrıyı daha dikkatli değerlendirin ve hedefli sinyaller kullanın. Otomasyonu yalnızca kuralın net ve güvenilir olduğu yerlerde ekleyin.

Call'ın değerlendirme kuyruğuyla önce incelenmeye değer çağrıları bulun

Demo konsolunda gelen çağrıları bir simülasyonla deneyebilirsiniz.

İlgili rehberler