Cara Menilai Perbualan Ejen Suara: Metrik dan Semakan
Cara praktikal menilai ejen suara telefon: metrik yang wajar dipantau, cara mengambil sampel dan menilai panggilan, dan cara menukar dapatan kepada pembetulan.
Setelah ejen suara menjawab panggilan sebenar, soalannya berubah daripada adakah ia berfungsi kepada adakah ia berfungsi dengan baik. Banyak pasukan menjawab dengan tanggapan kabur daripada beberapa panggilan. Sedikit struktur memberikan maklumat yang jauh lebih baik dan memberitahu anda apa yang perlu dibaiki seterusnya.

Panduan ini menawarkan pendekatan penilaian yang mudah untuk ejen suara telefon: metrik yang perlu dipantau, cara menyemak panggilan secara manual, dan cara menukar dapatan kepada penambahbaikan. Ia dibina berdasarkan Menguji Ejen AI Suara dan ukuran umum dalam KPI Pusat Panggilan.
Mulakan dengan maksud baik bagi anda
Panggilan yang baik bagi restoran tidak sama dengan panggilan yang baik bagi klinik. Sebelum memilih metrik, tulis dalam satu atau dua ayat rupa panggilan yang berjaya bagi setiap jenis panggilan yang anda jangkakan: soalan pemanggil dijawab, mesej diambil dengan butiran yang betul, atau pemanggil sampai kepada orang yang tepat. Segala yang lain menyusul daripada definisi itu.
Lima soalan dalam setiap penilaian
- Adakah pemanggil difahami?Adakah ejen mendengar soalan dan butiran dengan betul?
- Adakah jawapannya betul?Adakah ia tepat, dalam lingkungan maklumat yang diluluskan dan bebas daripada rekaan?
- Adakah panggilan mencapai pengakhiran yang berguna?Adakah tugas selesai, mesej diambil atau penyerahan dibuat?
- Adakah pengalamannya boleh diterima?Rentak, nada, pengulangan dan usaha bagi pemanggil.
- Adakah ia selamat?Adakah ejen menghormati hadnya dan menyerahkan panggilan apabila sepatutnya?
Metrik yang wajar dipantau
| Metrik | Apa yang ditunjukkannya | Cara mendapatkannya |
|---|---|---|
| Penyelesaian tugas | Bahagian panggilan yang matlamat pemanggilnya tercapai | Semakan manusia terhadap sampel, serta hasil panggilan |
| Ketepatan jawapan | Sama ada kenyataan sepadan dengan maklumat yang diluluskan | Semakan manusia berbanding sumber anda |
| Kadar penyerahan | Berapa kerap pemanggil meminta atau memerlukan manusia | Hasil panggilan dan permintaan dalam meja bantuan |
| Kadar pengulangan | Berapa kerap ejen meminta pemanggil mengulang sesuatu | Semakan transkrip |
| Jurang respons | Masa antara akhir giliran pemanggil dan balasan ejen | Masa bagi setiap giliran dalam sejarah panggilan |
| Kadar pengabaian | Pemanggil yang meletakkan telefon sebelum ada hasil | Log panggilan |
| Maklum balas pemanggil | Perasaan orang tentang panggilan itu | Tinjauan ringkas atau komen susulan |
Perhatikan bahawa kebanyakan ukuran yang berguna memerlukan pertimbangan manusia. Kiraan daripada log memberitahu berapa banyak, tetapi hanya orang yang membaca perbualan dapat menentukan sama ada panggilan berjalan dengan baik. Jangkakan gabungan kedua-duanya. Untuk ukuran yang terpakai bagi setiap jenis panggilan, lihat Penyelesaian Panggilan Pertama dan Kadar Jawapan dan Kadar Pengabaian.
Menyemak panggilan secara manual
Sampel kecil yang tetap lebih baik daripada semakan besar sekali-sekala. Pilih panggilan secara rawak, serta beberapa yang kelihatan luar biasa, seperti yang sangat pendek atau sangat panjang, panggilan yang berakhir dengan penyerahan dan panggilan yang berakhir dengan pemanggil meletakkan telefon.
Rutin semakan panggilan
- Ambil sampelPilih bilangan panggilan tetap setiap minggu, campuran rawak dan luar biasa.
- Dengar dan bacaMainkan rakaman dan baca transkrip bersama.
- Beri skorNilai setiap panggilan berdasarkan kriteria anda dengan skala mudah.
- Catat puncaTulis sebab sesuatu tidak kena.
- Betulkan dan uji semulaUbah sumber, prompt atau tetapan, kemudian uji semula kes yang sama.
Pastikan pemarkahan mudah
Tiga tahap sudah memadai: baik, boleh diterima dan lemah, atau tepat, sebahagian dan salah untuk kenyataan individu. Skala yang terlalu terperinci mencetuskan perdebatan tanpa menambah pemahaman. Minta dua orang menilai beberapa panggilan yang sama sekali-sekala; jika mereka kerap tidak bersetuju, kriteria anda perlu dirumuskan dengan lebih tajam.
Ingat bahawa transkrip boleh salah
Transkrip ialah tekaan pengecam, bukan kebenaran. Jika transkrip kelihatan pelik, dengar audio sebelum menyalahkan ejen. Lihat Mengapa Audio Telefon Sukar untuk Pengecaman Pertuturan.
Mengukur kepantasan dan rentak
Pemanggil lebih perasan kelewatan berbanding hampir semua faktor lain. Pantau jurang sebelum setiap balasan dan lihat kes paling teruk, bukan hanya purata, kerana beberapa jeda yang sangat panjang merosakkan tanggapan. Jika jurangnya panjang, pecahkan ke mana masa itu pergi; Kependaman AI Suara menunjukkan caranya. Beri perhatian juga kepada celahan: berapa kerap ejen bercakap serentak dengan pemanggil, dan berapa kerap ia membiarkan mereka menunggu?
Semakan manual atau pemarkahan automatik
Memilih kaedah
| Semakan manual | Pemarkahan automatik | |
|---|---|---|
| Kekuatan | Memahami nuansa, nada dan konteks | Meliputi setiap panggilan dengan cepat |
| Kelemahan | Perlahan; hanya sampel | Mungkin terlepas masalah halus atau tersalah nilai |
| Paling sesuai untuk | Ketepatan, keselamatan dan pengalaman pemanggil | Menandakan panggilan yang wajar dilihat manusia |
Pemarkahan automatik, termasuk model yang menilai model lain, berguna untuk penyaringan: ia boleh menyusun panggilan mengikut tanda masalah supaya manusia melihat panggilan yang betul dahulu. Ia tidak patut menggantikan persampelan manusia, terutamanya untuk ketepatan dan keselamatan. Apa pun semakan automatik yang anda gunakan, ujinya dengan membandingkan keputusannya dengan penilaian anda sendiri pada set panggilan yang telah anda semak.
Membaca angka dengan wajar
Sampel kecil mengelirukan. Jika anda menyemak sepuluh panggilan dan dua berjalan buruk, anda tidak boleh mengatakan satu daripada lima panggilan berjalan buruk; anda hanya boleh mengatakan bahawa anda menemui dua masalah yang wajar dibaiki. Gunakan sampel untuk mencari punca, bukan untuk mengumumkan kadar, melainkan sampelnya cukup besar dan rawak untuk menyokongnya.
Asingkan ejen daripada situasi. Penurunan penyelesaian tugas pada minggu berlaku gangguan perkhidmatan bukan keputusan tentang prompt. Catat peristiwa di sebelah metrik anda: waktu operasi baharu, kempen yang membawa pemanggil dengan soalan baharu, perubahan pada sumber. Log perubahan yang ringkas menjadikan trend boleh diterangkan.
Akhir sekali, tentukan lebih awal apa yang akan anda lakukan dengan setiap hasil. Peningkatan pengulangan mungkin membawa anda menyemak tetapan senyap; peningkatan penyerahan pada satu topik mungkin membawa anda menambah jawapan tepat untuknya. Metrik tanpa tindakan yang berkaitan hanyalah hiasan.
Kongsi hasil dengan orang yang menjawab telefon serta pengurus. Kakitangan sering tahu mengapa sesuatu corak wujud, dan merekalah yang akan mengambil panggilan yang diserahkan ejen. Semakan bulanan yang ringkas dengan contoh, termasuk beberapa panggilan yang berjalan lancar, memastikan kerja ini berpijak pada perbualan sebenar.
Menilai dalam Call
Dalam Call, sejarah panggilan AI menyenaraikan panggilan dalam sesuatu tempoh, berserta hasil dan, jika diketahui, sentimen, dan membuka keseluruhan perbualan giliran demi giliran. Pengurus boleh membuka panggilan untuk melihat berapa lama setiap giliran bercakap. Bahagian semakan automatik mengumpulkan panggilan terkini mengikut topik, menyusun panggilan terkini yang belum disemak manusia berdasarkan isyarat padanya, dan menawarkan sampel ringkasan AI untuk anda tandakan sebagai tepat, sebahagian atau salah, yang menyumbang kepada paparan berterusan ketepatan ringkasan. AI perbualan juga membolehkan anda mencari frasa dalam setiap transkrip yang disimpan. Bersama-sama, ini memberikan kiraan dan persampelan yang anda perlukan. Gunakan sejarah suntingan untuk melihat pembetulan yang dibuat pada kata-kata ejen.
Senarai semak penilaian mingguan
- Baca sampel panggilan tetap, rawak dan luar biasa
- Nilai penyelesaian tugas dan ketepatan
- Kira penyerahan dan catat sebabnya
- Semak jurang respons yang paling panjang
- Cari frasa yang menandakan kekeliruan dalam transkrip
- Rekod setiap isu dan pembetulan yang dibuat
- Uji semula kes yang telah dibetulkan sebelum menutupnya
Soalan lazim
Apakah satu metrik paling berguna untuk ejen suara?
Tiada satu metrik tunggal. Penyelesaian tugas memberitahu sama ada pemanggil mendapat apa yang diperlukan, tetapi anda juga memerlukan ketepatan, kualiti penyerahan dan masa untuk melihat sebabnya.
Berapa banyak panggilan yang patut saya semak?
Sampel mingguan tetap yang boleh anda kekalkan lebih baik daripada sampel besar sekali-sekala. Mulakan dengan bilangan sederhana dan tambah selepas perubahan pelancaran atau apabila masalah muncul.
Bolehkah saya bergantung pada pemarkahan automatik sahaja?
Tidak untuk ketepatan atau keselamatan. Gunakannya untuk menyusun dan menandakan panggilan, kemudian minta manusia menyemak panggilan yang ditandakan dan sampel rawak.
Mengapa transkrip kadangkala tidak sepadan dengan rakaman?
Transkrip dihasilkan oleh pengecaman pertuturan dan boleh mengandungi kesilapan. Dengar audio sebelum menilai ejen.
Bagaimana saya tahu sama ada sesuatu perubahan memperbaiki keadaan?
Simpan set kes ujian tetap dan rutin semakan berkala, kemudian bandingkan hasil sebelum dan selepas perubahan menggunakan kriteria yang sama.
Patutkah pemanggil ditinjau?
Soalan ringkas selepas panggilan boleh menambah maklumat berguna, tetapi pastikan ia pendek dan hormati sebarang peraturan tentang menghubungi orang. Gandingkan dengan semakan anda sendiri terhadap perbualan.