Berapa Banyak Panggilan yang Perlu Ditinjau? Panduan Sampling QA
Cara menentukan jumlah panggilan yang ditinjau untuk QA: sampel acak dan tertarget, jumlah minimum per agen, cara praktis tim kecil, dan cara menghindari bias.
"Berapa banyak panggilan yang perlu kami tinjau?" adalah pertanyaan pertama setiap program kualitas yang baru, dan jawaban jujurnya: tergantung apa yang ingin Anda pelajari dan berapa banyak waktu yang Anda punya. Meninjau sebagian kecil panggilan bisa melewatkan masalah nyata, tetapi meninjau terlalu banyak menciptakan tumpukan pekerjaan yang tak sempat dijadikan bahan coaching. Panduan ini menjelaskan cara berpikir tentang sampling secara praktis, tanpa perlu gelar statistik.

Ini adalah bagian dari rutinitas kualitas yang lebih luas yang dijelaskan dalam Manajemen Kualitas Panggilan; sampel yang Anda pilih sebaiknya menjadi bahan untuk sesi dalam Kerangka Sederhana untuk Coaching Agen dalam Panggilan.
Mulailah dari tujuan sampel
Tujuan yang berbeda membutuhkan sampel yang berbeda. Tentukan mana yang ingin Anda capai:
Untuk apa sampel ini?
- Umpan balik agen yang adilSetiap agen mendapat kumpulan panggilan yang ditinjau secara rutin dan bisa dibandingkan.
- Menemukan masalah sistemikGambaran luas tentang apa yang ditanyakan pelanggan dan di mana proses gagal.
- Risiko dan kepatuhanTinjauan tertarget pada panggilan di mana kesalahan paling berdampak.
- Pelatihan dan apresiasiMenemukan panggilan terbaik untuk dibagikan dan dijadikan pelajaran.
Satu sampel jarang bisa memenuhi keempatnya. Tim biasanya menggabungkan sampel acak kecil demi keadilan dengan panggilan tertarget untuk risiko.
Sampling acak versus tertarget
Dua cara memilih panggilan
| Acak | Tertarget | |
|---|---|---|
| Cara memilih panggilan | Dipilih secara acak dari semua panggilan dalam periode tersebut | Dipilih berdasarkan sinyal seperti durasi, sentimen, hasil, atau kata kunci |
| Kelebihan | Gambaran panggilan biasa yang tidak bias | Menemukan masalah dan risiko lebih cepat |
| Kekurangan | Bisa melewatkan masalah serius yang jarang terjadi | Memberi gambaran yang miring jika dipakai sendirian |
| Paling cocok untuk | Skor dan tren agen | Kepatuhan, keluhan, ide coaching |
Gunakan keduanya. Pola yang umum adalah dua atau tiga panggilan acak per agen setiap periode, ditambah beberapa panggilan tertarget yang ditinjau untuk seluruh tim. Pisahkan kedua jenis ini dalam laporan; jangan gunakan panggilan tertarget untuk menghitung skor keseluruhan agen, karena Anda akan menghukum agen yang menangani panggilan tersulit.
Cara praktis menentukan jumlahnya
Hitung mundur dari waktu yang Anda miliki. Meninjau sebuah panggilan dengan cermat biasanya memakan waktu lebih lama daripada panggilannya sendiri: mendengarkan, menilai, dan menulis komentar. Perkirakan dengan jujur.
Menentukan ukuran sampel
- Perkirakan waktu tinjauanMisalnya, panggilan sepuluh menit mungkin memerlukan lima belas sampai dua puluh menit untuk ditinjau dan dikomentari.
- Tentukan anggaran tinjauan mingguanBerapa jam yang bisa dipakai peninjau setiap minggu, setelah dikurangi waktu coaching?
- Bagi dengan waktu tinjauanHasilnya adalah jumlah panggilan yang bisa Anda tinjau dengan baik.
- Bagikan ke para agenBerikan setiap agen setidaknya jumlah minimum, lalu bagi sisanya berdasarkan risiko dan kebutuhan.
- Periksa setelah sebulanSesuaikan jika tinjauan menumpuk atau jika selesai lebih cepat.
Jumlah minimum per agen
Banyak tim menetapkan batas bawah, misalnya beberapa panggilan per agen per bulan, agar umpan balik berjalan rutin. Agen yang lebih baru atau yang sedang menjalani rencana pengembangan bisa mendapat lebih banyak; agen berpengalaman dengan hasil yang stabil bisa mendapat lebih sedikit. Sampel yang lebih besar untuk satu agen tidak berarti agen itu lebih buruk; bisa jadi itu hanya bentuk dukungan tambahan.
Tim kecil
Dengan lima sampai sepuluh agen, Anda mungkin bisa meninjau sebagian besar panggilan. Jangan khawatir soal presisi ilmiah. Pilih jumlah yang bisa dikelola, misalnya beberapa panggilan per agen per bulan, tinjau dengan baik, dan jadikan bahan coaching. Yang penting, tinjauan ini terjadi setiap bulan.
Menghindari bias dalam sampel
Sampel bisa menyesatkan jika tidak dipilih dengan cermat. Waspadai jebakan berikut:
- Hanya meninjau panggilan pendek karena lebih cepat. Panggilan panjang sering menyimpan kesulitan yang sebenarnya.
- Lebih sering meninjau agen yang sama karena mereka lebih diperhatikan. Hal ini terlihat seperti pilih kasih atau perburuan kesalahan.
- Hanya meninjau keluhan. Anda akan mendapat gambaran yang muram dan melewatkan praktik yang baik.
- Selalu meninjau shift yang sama. Waktu yang berbeda membawa penelepon dan tekanan yang berbeda.
- Membiarkan agen memilih semua panggilannya. Mereka akan memilih yang terbaik. Campuran lebih baik; lihat kerangka coaching.
Tuliskan aturan pemilihan dan buat terlihat oleh semua orang. Jika agen tahu bagaimana panggilan dipilih, mereka lebih mungkin menerima hasilnya. Periksa juga bahwa sampel mencakup semua saluran dan jenis panggilan yang Anda tangani, seperti panggilan masuk, panggilan keluar, dan antrean yang berbeda.
Keadilan bagi agen
Agen menerima tinjauan jika mereka yakin prosesnya adil. Jelaskan bagaimana sampel dipilih, tunjukkan hasil mereka dalam format yang sama dengan semua orang, dan izinkan mereka melihat komentar yang ditulis peninjau. Beri perhatian khusus pada cara Anda memperlakukan agen paruh waktu, staf malam, dan orang yang menangani jenis panggilan berbeda, karena sampel yang tidak sebanding menghasilkan skor yang tidak adil.
- Gunakan scorecard yang sama untuk setiap agen pada jenis panggilan yang sama.
- Jangan membandingkan skor antaragen yang menangani jenis panggilan berbeda tanpa mencatat perbedaannya.
- Izinkan agen mempertanyakan skor, dengan jalur sederhana untuk meminta pendapat kedua.
- Jaga data skor tetap privat, hanya untuk agen, lead-nya, dan peninjau.
Jika Anda menemukan kelemahan yang berulang di seluruh sampel, perlakukan dulu sebagai masalah tim: proses yang tidak jelas, informasi yang kurang, atau alat yang buruk. Coaching individu dilakukan setelah sistemnya diperiksa.
Sinyal yang berguna untuk tinjauan tertarget
Sinyal membantu Anda menemukan panggilan yang layak diperiksa lebih dekat tanpa harus mendengarkan semuanya:
| Sinyal | Mengapa berguna | Contoh penggunaan |
|---|---|---|
| Panggilan yang sangat panjang | Bisa menunjukkan kebingungan, masalah sulit, atau inefisiensi | Tinjau untuk mencari celah proses |
| Pelanggan bernada negatif di akhir | Kemungkinan ada kegagalan atau kebutuhan yang tak terpenuhi | Tinjau untuk pemulihan layanan |
| Pengalihan dan kontak berulang | Kemungkinan salah routing atau jawaban yang tidak lengkap | Tinjau untuk routing dan pengetahuan |
| Kata atau frasa yang ditandai | Persyaratan kepatuhan atau kehati-hatian | Periksa terhadap aturannya |
| Panggilan yang sangat pendek | Ditutup tiba-tiba, salah sambung, akhir yang mendadak | Periksa pembukaan dan penanganannya |
| Umpan balik pelanggan yang sangat baik | Praktik baik untuk dipelajari | Tambahkan ke pustaka panggilan terbaik |
Memanfaatkan sampel dengan baik
Sampel tidak ada artinya jika tidak ditindaklanjuti. Bagikan hasilnya kepada setiap agen dengan cepat, selagi mereka masih ingat panggilannya. Gabungkan hasil antaragen untuk menemukan item lemah yang berulang, lalu perbaiki dengan pelatihan, naskah, atau pembaruan pengetahuan, bukan dengan menyalahkan individu. Jalankan kalibrasi agar peninjau menilai secara konsisten; lihat Menjalankan Sesi Kalibrasi QA.
Rencana sampling sederhana
- Tujuan tinjauan sudah dinyatakan
- Jumlah panggilan acak per agen per periode
- Jumlah panggilan tertarget per periode dan sinyal yang dipakai
- Jumlah minimum untuk agen baru atau yang sedang menjalani rencana pengembangan
- Aturan pemilihan ditulis dan dibagikan
- Waktu tinjauan dianggarkan per minggu
- Kalibrasi sudah dijadwalkan
- Hasil dibagikan dalam beberapa hari
Sampling di Call
Di area Tinjauan dan pendampingan di Call, antrean tinjauan mencantumkan panggilan yang menunggu ditinjau, dengan yang terlama dan paling negatif di urutan teratas, dan menampilkan hingga dua belas panggilan sekaligus, sehingga peninjau memulai dari panggilan yang paling mungkin membutuhkan perhatian. Hasil per agen menampilkan evaluasi, skor rata-rata, panggilan yang gagal, dan rencana sampling yang dipakai. Bagian "Kemungkinan mis-selling" atau "Pelanggan yang memerlukan perhatian ekstra" mencantumkan panggilan yang ditandai oleh aturan frasa, beserta kata-kata yang cocok, tetapi hanya jika ada yang ditandai.
Jika agen AI menjawab panggilan, tab Tinjauan otomatis di AI percakapan dapat menilai panggilan terbaru yang belum ditinjau manusia dan mengurutkannya berdasarkan risiko, dengan alasan yang ditampilkan, serta mengelompokkan panggilan ke dalam topik berdasarkan kata-kata yang dipakai pelanggan. Fitur ini juga memungkinkan Anda mengambil sampel ringkasan AI dan menandai masing-masing sebagai Akurat, Sebagian, atau Salah. Gunakan alat-alat ini untuk memilih panggilan, tetapi tetap libatkan manusia untuk penilaian akhir.
Pertanyaan yang sering diajukan
Apakah ada persentase standar panggilan yang perlu ditinjau?
Tidak ada. Pilih jumlah yang bisa ditinjau dan dijadikan bahan coaching oleh tim Anda secara konsisten. Sampel kecil yang ditinjau dengan baik lebih berguna daripada sampel besar yang tidak pernah dibaca.
Berapa panggilan per agen per bulan yang wajar?
Banyak tim memulai dengan beberapa panggilan per agen, lalu menyesuaikannya. Agen yang lebih baru sering mendapat lebih banyak. Kuncinya, setiap agen ditinjau secara rutin.
Apakah agen perlu tahu panggilan mana yang ditinjau?
Mereka sebaiknya tahu aturan pemilihannya dan bahwa panggilan mereka bisa ditinjau. Mereka tidak perlu tahu sebelumnya panggilan mana secara spesifik, meskipun keterbukaan tentang prosesnya membantu membangun kepercayaan.
Bisakah perangkat lunak memilihkan sampel untuk kami?
Perangkat lunak dapat mengurutkan panggilan berdasarkan sinyal seperti sentimen, durasi, atau tanda tertentu, sehingga menghemat waktu. Gunakan itu untuk tinjauan tertarget dan tetap sertakan beberapa panggilan acak agar gambarannya tetap adil.
Bagaimana mencegah peninjau bersikap bias?
Tuliskan aturan pemilihan, rotasikan peninjau, jalankan sesi kalibrasi, dan pastikan sampel mencakup semua shift dan jenis panggilan.
Bagaimana jika kami tidak bisa meninjau cukup banyak panggilan?
Sederhanakan scorecard menjadi item-item terpenting, tinjau lebih sedikit panggilan dengan lebih cermat, dan gunakan sinyal tertarget. Tambahkan otomatisasi hanya jika aturannya jelas dan andal.