Συνεδρίες βαθμονόμησης QA για δίκαιη βαθμολόγηση κλήσεων
Πώς να οργανώνετε συνεδρίες βαθμονόμησης ώστε οι αξιολογητές να βαθμολογούν ίδια: επιλογή κλήσεων, τυφλή βαθμολόγηση, συζήτηση διαφορών, μέτρηση συμφωνίας.
Αν δύο αξιολογητές ακούσουν την ίδια κλήση και ο ένας τη βαθμολογήσει πολύ καλή ενώ ο άλλος την κόψει, οι εκπρόσωποι σύντομα παύουν να εμπιστεύονται τις βαθμολογίες. Η βαθμονόμηση είναι η συνήθεια που το αποτρέπει. Οι αξιολογητές βαθμολογούν τις ίδιες κλήσεις χωριστά, συγκρίνουν σημειώσεις και λύνουν τις διαφορές τους, ώστε μια βαθμολογία να σημαίνει το ίδιο πράγμα όποιος κι αν την έδωσε.

Αυτός ο οδηγός δείχνει πώς να κάνετε συνεδρίες βαθμονόμησης σε μια μικρή ομάδα. Βασίζεται στον οδηγό Διαχείριση ποιότητας κλήσεων και υποστηρίζει τον κύκλο ανατροφοδότησης του οδηγού Ένα απλό πλαίσιο καθοδήγησης εκπροσώπων στις κλήσεις.
Γιατί έχει σημασία η βαθμονόμηση
Τα φύλλα αξιολόγησης γράφονται με λέξεις, και οι λέξεις διαβάζονται διαφορετικά. Το «Έδειξε ενσυναίσθηση» ή το «Έλυσε το ζήτημα» σημαίνουν άλλο πράγμα για διαφορετικούς αξιολογητές ή για τον ίδιο αξιολογητή σε διαφορετικές ημέρες. Χωρίς βαθμονόμηση, έχετε τρία προβλήματα: άδικες βαθμολογίες μεταξύ εκπροσώπων, καθοδήγηση βασισμένη σε απόψεις και αναφορές που δεν συγκρίνονται μεταξύ περιόδων ή ομάδων.
Ενδείξεις ότι χρειάζεστε βαθμονόμηση
- Οι εκπρόσωποι αμφισβητούν τις βαθμολογίεςΛένε ότι ένας άλλος αξιολογητής θα είχε περάσει την ίδια κλήση.
- Οι μέσοι όροι των αξιολογητών διαφέρουνΈνας αξιολογητής είναι σταθερά αυστηρότερος ή επιεικέστερος από έναν άλλον.
- Οι νέοι αξιολογητές αποκλίνουνΟι βαθμολογίες αλλάζουν όταν κάποιος έρχεται ή αναπληρώνει.
- Τα κριτήρια είναι αόρισταΔιαφορετικοί άνθρωποι τα εξηγούν διαφορετικά.
Η προετοιμασία μιας συνεδρίας
Μια καλή συνεδρία χρειάζεται λίγη προετοιμασία. Ο συντονιστής πρέπει να είναι κάποιος που γνωρίζει καλά το φύλλο αξιολόγησης και μπορεί να μείνει ουδέτερος, συχνά ο υπεύθυνος ποιοτικού ελέγχου ή ένας έμπειρος επικεφαλής ομάδας.
Πριν από τη συνεδρία
- Επιλέξτε τρεις ή τέσσερις κλήσειςΣυμπεριλάβετε μια σαφή επιτυχία, μια σαφή αποτυχία και τουλάχιστον μία οριακή κλήση.
- Αφαιρέστε τα στοιχεία ταυτοποίησηςΚρύψτε τα ονόματα των εκπροσώπων, ώστε η συζήτηση να αφορά την κλήση.
- Μοιραστείτε το φύλλο αξιολόγησηςΌλοι χρησιμοποιούν την τρέχουσα έκδοση, με τους ορισμούς.
- Ζητήστε ανεξάρτητη βαθμολόγησηΚάθε αξιολογητής βαθμολογεί πριν από τη συνάντηση και δεν το συζητά με τους άλλους.
Οι πραγματικές κλήσεις δίνουν το καλύτερο υλικό. Πάρτε οριακές κλήσεις από την κανονική αξιολόγηση, γιατί σε αυτές κρύβεται η διαφωνία. Ελέγξτε ότι οι ηχογραφήσεις μπορούν να κοινοποιηθούν στους αξιολογητές σύμφωνα με τους εσωτερικούς σας κανόνες και χειριστείτε προσεκτικά κάθε προσωπικό δεδομένο· δείτε τον οδηγό Συγκατάθεση για ηχογράφηση κλήσεων για την πλευρά της ηχογράφησης.
Η διεξαγωγή της συνεδρίας
Ξεκινήστε από τις βαθμολογίες, όχι από τις απόψεις. Βάλτε τα αποτελέσματα όλων, κριτήριο προς κριτήριο, σε μια κοινή οθόνη και αναζητήστε τα κριτήρια με τις μεγαλύτερες διαφορές. Ασχοληθείτε πρώτα με αυτά.
- Δείξτε την απόκλιση. Για κάθε κλήση, εμφανίστε τη συνολική βαθμολογία κάθε αξιολογητή και τις διαφορές ανά κριτήριο.
- Ζητήστε από κάθε αξιολογητή να εξηγήσει ένα αμφισβητούμενο κριτήριο, αναφέροντας τη στιγμή της κλήσης που καθόρισε την απόφασή του.
- Επιστρέψτε στη διατύπωση του φύλλου αξιολόγησης. Λέει με σαφήνεια τι θεωρείται επιτυχία;
- Συμφωνήστε την απάντηση για αυτή την κλήση και καταγράψτε το σκεπτικό.
- Αν το πρόβλημα είναι η διατύπωση, σημειώστε την αλλαγή που πρέπει να γίνει· μην τη διορθώνετε επί τόπου με τρόπο που μπερδεύει τους άλλους.
Βασικοί κανόνες
- Συζητάτε την κλήση και το φύλλο αξιολόγησης, όχι πρόσωπα.
- Όλοι μιλούν πριν εκφράσει γνώμη ο συντονιστής.
- Η διαφωνία είναι αναμενόμενη και χρήσιμη.
- Οι αποφάσεις καταγράφονται, ώστε η επόμενη συνεδρία να μην τις ανοίγει ξανά χωρίς νέα στοιχεία.
Μια υποθετική συνεδρία στην πράξη
Φανταστείτε μια ομάδα έξι ατόμων με τρεις αξιολογητές. Επιλέγουν τέσσερις κλήσεις και τις βαθμολογούν μόνοι τους. Στην τρίτη κλήση, ένας αξιολογητής δίνει επιτυχία στο κριτήριο για την επιβεβαίωση των στοιχείων του πελάτη και ένας άλλος αποτυχία. Ο συντονιστής ζητά από τον καθένα να παίξει τη στιγμή στην οποία στηρίχθηκε. Αποδεικνύεται ότι ο εκπρόσωπος επιβεβαίωσε τον ταχυδρομικό κώδικα αλλά όχι το όνομα, και το φύλλο αξιολόγησης λέει απλώς «επιβεβαίωση στοιχείων». Η ομάδα συμφωνεί ότι το κριτήριο πρέπει να αναφέρει ακριβώς ποια δύο στοιχεία μετρούν, το ξαναγράφει και καταγράφει την απόφαση.
Αυτή η μικρή αλλαγή αφαιρεί μια πηγή άδικων βαθμολογιών από κάθε μελλοντική αξιολόγηση. Αυτό είναι το μοτίβο που πρέπει να αναζητάτε: μια διαφωνία για μια κλήση είναι συνήθως ένδειξη κενού στο φύλλο αξιολόγησης.
Θυμηθείτε να κλείσετε τον κύκλο με τους εκπροσώπους. Πείτε τους τι άλλαξε στη διατύπωση και γιατί, και εφαρμόστε την αλλαγή από μια δηλωμένη ημερομηνία αντί να ξαναβαθμολογήσετε παλιές κλήσεις. Αν μια παλαιότερη βαθμολογία ήταν σαφώς άδικη λόγω της παλιάς διατύπωσης, να είστε ανοιχτοί στη διόρθωσή της.
Από τη διαφωνία σε ένα καλύτερο φύλλο αξιολόγησης
Το πιο πολύτιμο αποτέλεσμα μιας συνεδρίας είναι συνήθως ένα σαφέστερο φύλλο αξιολόγησης. Αν οι αξιολογητές διαφωνούν σε ένα κριτήριο, το κριτήριο είναι πιθανότατα αόριστο. Κάντε το συγκεκριμένο.
| Αόριστο κριτήριο | Σαφέστερη εκδοχή |
|---|---|
| Έδειξε ενσυναίσθηση | Αναγνώρισε το πρόβλημα του πελάτη με τα δικά του λόγια πριν προτείνει λύση. |
| Έλυσε το ζήτημα | Έδωσε πλήρη απάντηση ή όρισε σαφές επόμενο βήμα με χρόνο. |
| Επαγγελματικό ύφος | Χωρίς διακοπές, χωρίς σαρκασμό, με ευγενικό άνοιγμα και κλείσιμο. |
| Ακολούθησε τη διαδικασία | Επαλήθευσε τον πελάτη με τα βήματα της ισχύουσας διαδικασίας. |
Προσθέστε σε κάθε κριτήριο μία ή δύο ενδεικτικές φράσεις επιτυχίας και αποτυχίας. Χρησιμοποιείτε συνειδητά το «Δεν ισχύει» για κριτήρια που δεν αφορούν έναν τύπο κλήσης, αντί να μαντεύετε. Κρατήστε τα κρίσιμα κριτήρια, εκείνα που μπορούν να κόψουν ολόκληρη την κλήση, σε πολύ μικρή λίστα και κάντε τα απολύτως σαφή. Το εύλογο όριο επιτυχίας είναι απόφαση της ομάδας σας· αποφύγετε να το αλλάζετε χωρίς να ενημερώνετε τους εκπροσώπους.
Μέτρηση της συμφωνίας με τον καιρό
Δεν χρειάζεστε πολύπλοκα στατιστικά. Ένα απλό μέτρο είναι η απόκλιση μεταξύ της υψηλότερης και της χαμηλότερης συνολικής βαθμολογίας για κάθε κλήση που βαθμονομήθηκε. Παρακολουθείτε τη μέση απόκλιση ανά μήνα και εξετάστε τα κριτήρια που προκαλούν τη μεγαλύτερη διαφωνία.
Πώς διαβάζετε την απόκλιση
| Μικρή απόκλιση | Μεγάλη απόκλιση | |
|---|---|---|
| Τι υποδηλώνει | Οι αξιολογητές διαβάζουν παρόμοια το φύλλο αξιολόγησης | Οι αξιολογητές το διαβάζουν διαφορετικά |
| Τι να κάνετε | Διατηρήστε τη ρουτίνα και εναλλάσσετε τις κλήσεις | Ξαναγράψτε κριτήρια, προσθέστε παραδείγματα, κάντε σύντομα νέα συνεδρία |
| Κίνδυνος | Εφησυχασμός, ίδια τυφλά σημεία | Άδικες βαθμολογίες και δυσπιστία |
Ως εμπειρικός κανόνας, μια απόκλιση πάνω από περίπου είκοσι μονάδες σε κλίμακα εκατό μονάδων δείχνει ότι οι αξιολογητές χρησιμοποιούν το φύλλο αξιολόγησης διαφορετικά και ότι αξίζει να συμφωνήσετε μαζί στη διατύπωση. Αντιμετωπίστε κάθε τέτοιο αριθμό ως οδηγό για τη δική σας ομάδα, όχι ως πρότυπο.
Κρατήστε ένα αρχείο αποφάσεων. Ένα απλό κοινόχρηστο έγγραφο με την ημερομηνία, την κλήση, το αμφισβητούμενο κριτήριο και την ανάγνωση που συμφωνήθηκε αρκεί. Οι νέοι αξιολογητές μπορούν να το διαβάσουν για να μάθουν πώς εφαρμόζει η ομάδα το φύλλο αξιολόγησης, και αποτρέπει την επιστροφή της ίδιας διαφωνίας κάθε μήνα. Ελέγχετε το αρχείο όταν αναθεωρείτε το φύλλο αξιολόγησης και αποσύρετε τις καταχωρίσεις που η νέα διατύπωση κάνει περιττές.
Συχνότητα και συμμετέχοντες
- Συχνότητα: κάθε δύο έως τέσσερις εβδομάδες στην αρχή και έπειτα μηνιαία, μόλις η απόκλιση μειωθεί.
- Ποιοι: όλοι οι αξιολογητές και ένας ή δύο επικεφαλής ομάδων. Συμπεριλάβετε και τους νέους εκπαιδευμένους αξιολογητές.
- Διάρκεια: σαράντα πέντε λεπτά συνήθως αρκούν για τρεις ή τέσσερις κλήσεις.
- Εκπρόσωποι: σκεφτείτε να καλείτε περιστασιακά εκπροσώπους, με ανωνυμοποιημένες κλήσεις, ώστε να βλέπουν πώς λειτουργεί η βαθμολόγηση.
Συνδυάστε τη βαθμονόμηση με το σχέδιο δειγματοληψίας σας, ώστε οι αξιολογητές να βλέπουν ένα μείγμα εκπροσώπων και τύπων κλήσεων· δείτε τον οδηγό Πόσες κλήσεις πρέπει να αξιολογείτε;. Αν ένα εργαλείο ΤΝ προβαθμολογεί κλήσεις, συμπεριλάβετε και μερικά από τα αποτελέσματά του στη βαθμονόμηση, ώστε οι άνθρωποι να μαθαίνουν πότε να το εμπιστεύονται και πότε να το παρακάμπτουν.
Βαθμονόμηση στο Call
Η περιοχή «Ανασκόπηση και καθοδήγηση» του Call περιλαμβάνει μια ενότητα «Βαθμονόμηση» που εμφανίζει τις κλήσεις που βαθμολογήθηκαν από περισσότερους από έναν αξιολογητές, μαζί με την απόκλιση μεταξύ των βαθμολογιών τους. Οι διαχειριστές και οι υπεύθυνοι βαθμολογούν κλήσεις από την ουρά αξιολόγησης με «Επιτυχία», «Αποτυχία» ή «Δεν ισχύει» για κάθε κριτήριο του φύλλου αξιολόγησης, και τα κρίσιμα κριτήρια μηδενίζουν τη βαθμολογία αν αποτύχουν. Η οδηγία του Call είναι ότι μια απόκλιση πάνω από 20 μονάδες σημαίνει ότι οι αξιολογητές διαβάζουν το φύλλο αξιολόγησης διαφορετικά, οπότε πρέπει να συμφωνήσουν μαζί σε αυτό.
Το Call μπορεί επίσης να βαθμολογεί μόνο του ορισμένα κριτήρια, όταν τα περιγράφετε ως λέξεις που ειπώθηκαν ή δεν ειπώθηκαν, με τους κανόνες «Αυτόματη βαθμολόγηση». Κρατήστε αυτούς τους κανόνες στενούς και ακριβείς· ένας κενός κανόνας είναι καλύτερος από έναν που βασίζεται σε εικασία. Η ουρά αξιολόγησης και το φύλλο αξιολόγησης απαιτούν ένα ενεργό φύλλο αξιολόγησης στον χώρο εργασίας σας, οπότε ρυθμίστε το πριν σχεδιάσετε τη βαθμονόμηση γύρω από αυτό.
Συχνές ερωτήσεις
Σε τι διαφέρει η βαθμονόμηση από τις κανονικές αξιολογήσεις ποιότητας;
Σε μια κανονική αξιολόγηση, ένας αξιολογητής βαθμολογεί μια κλήση. Στη βαθμονόμηση, αρκετοί αξιολογητές βαθμολογούν την ίδια κλήση ανεξάρτητα και έπειτα συγκρίνουν. Σκοπός της είναι η ευθυγράμμιση των αξιολογητών, όχι η κρίση του εκπροσώπου.
Πρέπει οι αξιολογητές να δίνουν πανομοιότυπες βαθμολογίες;
Όχι. Οι μικρές διαφορές είναι φυσιολογικές. Ο στόχος είναι να συμφωνήσετε τι θεωρείται επιτυχία σε κάθε κριτήριο και να κρατάτε μικρή τη συνολική απόκλιση.
Πόσες κλήσεις πρέπει να χρησιμοποιούμε σε κάθε συνεδρία;
Τρεις ή τέσσερις συνήθως αρκούν. Περισσότερες κλήσεις κάνουν τη συνάντηση μεγάλη και επιφανειακή. Επιλέξτε κλήσεις που αναδεικνύουν διαφωνίες.
Πρέπει οι εκπρόσωποι να βλέπουν τα αποτελέσματα της βαθμονόμησης;
Οι εκπρόσωποι πρέπει να βλέπουν τους ορισμούς του φύλλου αξιολόγησης και τις αλλαγές που προκύπτουν από τη βαθμονόμηση. Το αν θα μοιράζεστε τις συγκρίσεις κλήση προς κλήση είναι απόφαση της ομάδας, αλλά η διαφάνεια χτίζει εμπιστοσύνη.
Τι γίνεται αν ένας αξιολογητής είναι πάντα αυστηρότερος;
Δείτε ποια κριτήρια δημιουργούν τη διαφορά και συζητήστε τα στη συνεδρία. Συχνά η διατύπωση του φύλλου αξιολόγησης δεν είναι σαφής. Αν η διαφορά επιμένει, δώστε σε αυτόν τον αξιολογητή επιπλέον καθοδήγηση και παραδείγματα.
Πόσο συχνά πρέπει να ενημερώνεται το φύλλο αξιολόγησης;
Ενημερώστε το όταν η βαθμονόμηση δείχνει επαναλαμβανόμενη σύγχυση, όταν αλλάζει η διαδικασία ή το προϊόν σας ή όταν αλλάζουν οι ανάγκες των πελατών. Ανακοινώνετε τις αλλαγές στους εκπροσώπους.