Τεχνολογία φωνητικής AI

Πώς αξιολογείτε τις συνομιλίες ενός φωνητικού πράκτορα

Πρακτικός τρόπος να κρίνετε έναν τηλεφωνικό φωνητικό πράκτορα: δείκτες που αξίζουν, επιλογή και βαθμολόγηση κλήσεων και μετατροπή ευρημάτων σε διορθώσεις.

Συντακτική ομάδα του Call · Δημοσιεύτηκε · Ανάγνωση 6 λεπτών

Μόλις ένας φωνητικός πράκτορας απαντά σε πραγματικές κλήσεις, η ερώτηση αλλάζει από «λειτουργεί;» σε «λειτουργεί καλά;». Πολλές ομάδες απαντούν με μια αόριστη εντύπωση από λίγες κλήσεις. Λίγη δομή δίνει πολύ καλύτερες πληροφορίες και σας δείχνει τι να διορθώσετε στη συνέχεια.

Ένας υπεύθυνος ομάδας εξετάζει σημειώσεις ποιότητας κλήσεων με έναν συνάδελφο
Ενδεικτική εικόνα

Αυτός ο οδηγός προσφέρει μια απλή προσέγγιση αξιολόγησης για έναν τηλεφωνικό φωνητικό πράκτορα: ποιους δείκτες να παρακολουθείτε, πώς να ελέγχετε κλήσεις με το χέρι και πώς να μετατρέπετε τα ευρήματα σε βελτιώσεις. Βασίζεται στο Δοκιμή ενός φωνητικού πράκτορα AI και στους γενικούς δείκτες του KPI τηλεφωνικού κέντρου.

Ξεκινήστε από το τι σημαίνει «καλό» για εσάς

Μια καλή κλήση για ένα εστιατόριο δεν είναι ίδια με μια καλή κλήση για ένα ιατρείο. Πριν επιλέξετε δείκτες, γράψτε σε μία ή δύο προτάσεις πώς μοιάζει μια επιτυχημένη κλήση για κάθε είδος κλήσης που περιμένετε: απαντάται η ερώτηση του καλούντος, καταγράφεται ένα μήνυμα με τα σωστά στοιχεία ή ο καλών φτάνει στο σωστό άτομο. Όλα τα άλλα προκύπτουν από αυτούς τους ορισμούς.

Πέντε ερωτήσεις που θέτει κάθε αξιολόγηση

  • Έγινε κατανοητός ο καλών;Άκουσε σωστά ο πράκτορας την ερώτηση και τις λεπτομέρειες;
  • Ήταν σωστή η απάντηση;Ήταν ακριβής, εντός των εγκεκριμένων πληροφοριών και χωρίς επινοήσεις;
  • Κατέληξε η κλήση σε χρήσιμο αποτέλεσμα;Ολοκληρώθηκε η εργασία, καταγράφηκε μήνυμα ή έγινε μεταβίβαση;
  • Ήταν αποδεκτή η εμπειρία;Ρυθμός, τόνος, επαναλήψεις και κόπος για τον καλούντα.
  • Ήταν ασφαλής;Σεβάστηκε ο πράκτορας τα όριά του και μεταβίβασε όταν έπρεπε;

Δείκτες που αξίζει να παρακολουθείτε

ΔείκτηςΤι σας λέειΠώς τον παίρνετε
Ολοκλήρωση εργασίαςΠοσοστό κλήσεων όπου επιτεύχθηκε ο στόχος του καλούντοςΑνθρώπινος έλεγχος δείγματος, μαζί με τα αποτελέσματα κλήσεων
Ακρίβεια απαντήσεωνΑν οι δηλώσεις αντιστοιχούσαν στις εγκεκριμένες πληροφορίεςΑνθρώπινος έλεγχος σε σύγκριση με τις πηγές σας
Ποσοστό μεταβίβασηςΠόσο συχνά οι καλούντες ζητούν ή χρειάζονται άνθρωποΑποτελέσματα κλήσεων και αιτήματα στο help desk
Ποσοστό επαναλήψεωνΠόσο συχνά ο πράκτορας ζήτησε από τον καλούντα να πει κάτι ξανάΈλεγχος απομαγνητοφωνήσεων
Κενό απόκρισηςΧρόνος από το τέλος της σειράς του καλούντος έως την απάντηση του πράκτοραΧρονισμός ανά σειρά στο ιστορικό κλήσεων
Ποσοστό εγκατάλειψηςΚαλούντες που κλείνουν πριν από ένα αποτέλεσμαΑρχείο κλήσεων
Σχόλια καλούντωνΠώς ένιωσαν οι άνθρωποι για την κλήσηΣύντομες έρευνες ή σχόλια μετά την κλήση

Παρατηρήστε ότι οι περισσότεροι χρήσιμοι δείκτες χρειάζονται κάποια ανθρώπινη κρίση. Οι καταμετρήσεις από ένα αρχείο σας λένε πόσες, αλλά μόνο ένας άνθρωπος που διαβάζει τη συνομιλία μπορεί να πει αν μια κλήση πήγε καλά. Να περιμένετε έναν συνδυασμό των δύο. Για δείκτες που ισχύουν για κάθε είδος κλήσης, δείτε Επίλυση με την πρώτη κλήση και Ποσοστό απάντησης και ποσοστό εγκατάλειψης.

Έλεγχος κλήσεων με το χέρι

Ένα μικρό, τακτικό δείγμα είναι καλύτερο από έναν περιστασιακό μεγάλο έλεγχο. Επιλέξτε κλήσεις τυχαία, συν μερικές που φαίνονται ασυνήθιστες, όπως πολύ σύντομες ή πολύ μεγάλες, κλήσεις που κατέληξαν σε μεταβίβαση και κλήσεις όπου ο καλών έκλεισε.

Μια ρουτίνα ελέγχου κλήσεων

  1. ΔείγμαΕπιλέξτε σταθερό αριθμό κλήσεων κάθε εβδομάδα, συνδυάζοντας τυχαίες και ασυνήθιστες.
  2. Ακρόαση και ανάγνωσηΠαίξτε την ηχογράφηση και διαβάστε ταυτόχρονα την απομαγνητοφώνηση.
  3. ΒαθμολόγησηΒαθμολογήστε κάθε κλήση με βάση τα κριτήριά σας σε μια απλή κλίμακα.
  4. Καταγραφή αιτιώνΣημειώστε γιατί πήγε κάτι στραβά.
  5. Διόρθωση και νέα δοκιμήΑλλάξτε την πηγή, το prompt ή τη ρύθμιση και δοκιμάστε ξανά την ίδια περίπτωση.

Κρατήστε απλή τη βαθμολόγηση

Τρία επίπεδα αρκούν: καλό, αποδεκτό και κακό, ή ακριβές, εν μέρει και λάθος για μεμονωμένες δηλώσεις. Οι λεπτομερείς κλίμακες δημιουργούν διαφωνίες χωρίς να προσθέτουν γνώση. Κατά διαστήματα, ζητήστε από δύο άτομα να βαθμολογήσουν τις ίδιες λίγες κλήσεις· αν διαφωνούν συχνά, τα κριτήριά σας χρειάζονται σαφέστερη διατύπωση.

Θυμηθείτε ότι οι απομαγνητοφωνήσεις μπορεί να είναι λάθος

Η απομαγνητοφώνηση είναι η εκτίμηση του συστήματος αναγνώρισης, όχι η αλήθεια. Αν μια απομαγνητοφώνηση φαίνεται παράξενη, ακούστε τον ήχο πριν κατηγορήσετε τον πράκτορα. Δείτε Γιατί ο τηλεφωνικός ήχος δυσκολεύει την αναγνώριση ομιλίας.

Μέτρηση ταχύτητας και ρυθμού

Οι καλούντες προσέχουν την καθυστέρηση περισσότερο από σχεδόν οποιονδήποτε άλλο παράγοντα. Παρακολουθήστε το κενό πριν από κάθε απάντηση και κοιτάξτε τις χειρότερες περιπτώσεις, όχι μόνο τον μέσο όρο, αφού λίγες πολύ μεγάλες παύσεις χαλάνε την εντύπωση. Αν τα κενά είναι μεγάλα, αναλύστε πού πηγαίνει ο χρόνος· το Καθυστέρηση στη φωνητική AI δείχνει πώς. Προσέξτε και τις διακοπές: πόσο συχνά μίλησε ο πράκτορας πάνω από τον καλούντα και πόσο συχνά τον άφησε να περιμένει;

Τρόποι αξιολόγησης

Επιλογή μεθόδου

Χειροκίνητος έλεγχοςΑυτόματη βαθμολόγηση
ΠλεονέκτημαΚατανοεί αποχρώσεις, τόνο και πλαίσιοΚαλύπτει γρήγορα κάθε κλήση
ΜειονέκτημαΑργός· μόνο ένα δείγμαΜπορεί να χάσει λεπτά προβλήματα ή να κρίνει λάθος
Καλύτερη χρήση γιαΑκρίβεια, ασφάλεια και εμπειρία καλούντοςΕπισήμανση κλήσεων που αξίζουν ανθρώπινη ματιά

Η αυτόματη βαθμολόγηση, συμπεριλαμβανομένων μοντέλων που βαθμολογούν άλλα μοντέλα, είναι χρήσιμη για διαλογή: μπορεί να κατατάσσει τις κλήσεις με βάση ενδείξεις προβλήματος, ώστε οι άνθρωποι να κοιτάζουν πρώτα τις σωστές. Δεν πρέπει να αντικαθιστά τη δειγματοληψία από ανθρώπους, ειδικά για την ακρίβεια και την ασφάλεια. Όποιον αυτόματο έλεγχο κι αν χρησιμοποιείτε, δοκιμάστε τον συγκρίνοντας τις κρίσεις του με τις δικές σας σε ένα σύνολο κλήσεων που έχετε ελέγξει.

Λογική ανάγνωση των αριθμών

Τα μικρά δείγματα παραπλανούν. Αν ελέγξετε δέκα κλήσεις και δύο πήγαν άσχημα, δεν μπορείτε να πείτε ότι μία στις πέντε κλήσεις πηγαίνει άσχημα· μπορείτε μόνο να πείτε ότι βρήκατε δύο προβλήματα που αξίζει να διορθωθούν. Χρησιμοποιήστε τα δείγματα για να βρίσκετε αιτίες, όχι για να ανακοινώνετε ποσοστά, εκτός αν το δείγμα είναι αρκετά μεγάλο και τυχαίο για να τα στηρίξει.

Ξεχωρίστε τον πράκτορα από την κατάσταση. Μια πτώση στην ολοκλήρωση εργασιών σε μια εβδομάδα με διακοπή υπηρεσίας δεν είναι ετυμηγορία για το prompt. Σημειώνετε τα γεγονότα δίπλα στους δείκτες σας: ένα νέο ωράριο, μια καμπάνια που έφερε καλούντες με νέα ερώτηση, μια αλλαγή στις πηγές. Ένα απλό αρχείο αλλαγών κάνει τις τάσεις εξηγήσιμες.

Τέλος, αποφασίστε εκ των προτέρων τι θα κάνετε με κάθε αποτέλεσμα. Μια αύξηση των επαναλήψεων μπορεί να σας οδηγήσει στις ρυθμίσεις σιωπής· μια αύξηση των μεταβιβάσεων σε ένα θέμα μπορεί να σας οδηγήσει να προσθέσετε μια ακριβή απάντηση γι' αυτό. Ένας δείκτης χωρίς συνδεδεμένη ενέργεια είναι απλώς διακόσμηση.

Μοιραστείτε τα αποτελέσματα με όσους απαντούν στα τηλέφωνα και όχι μόνο με τους διευθυντές. Το προσωπικό συχνά ξέρει γιατί υπάρχει ένα μοτίβο, και είναι αυτοί που θα αναλάβουν τις κλήσεις που μεταβιβάζει ο πράκτορας. Μια σύντομη μηνιαία ανασκόπηση με παραδείγματα, μαζί με μερικές κλήσεις που πήγαν καλά, κρατά τη δουλειά δεμένη με πραγματικές συνομιλίες.

Αξιολόγηση στο Call

Στο Call, το ιστορικό κλήσεων AI εμφανίζει τις κλήσεις μιας περιόδου με το αποτέλεσμα και, όταν είναι γνωστό, το συναίσθημα, και ανοίγει ολόκληρη τη συνομιλία γύρο προς γύρο. Οι διευθυντές μπορούν να ανοίξουν μια κλήση για να δουν πόσο διήρκεσε κάθε προφορική σειρά. Η ενότητα αυτόματου ελέγχου ομαδοποιεί τις πρόσφατες κλήσεις ανά θέμα, κατατάσσει τις πρόσφατες κλήσεις χωρίς ανθρώπινο έλεγχο με βάση τις ενδείξεις τους και προσφέρει ένα δείγμα περιλήψεων AI για να τις χαρακτηρίσετε ως ακριβείς, εν μέρει ή λάθος, κάτι που τροφοδοτεί μια συνεχή εικόνα της ακρίβειας των περιλήψεων. Η Conversation AI σάς επιτρέπει επίσης να αναζητήσετε μια φράση σε κάθε αποθηκευμένη απομαγνητοφώνηση. Μαζί σάς δίνουν τις καταμετρήσεις και τη δειγματοληψία που χρειάζεστε. Χρησιμοποιήστε το ιστορικό επεξεργασίας για να δείτε τις διορθώσεις στις διατυπώσεις του πράκτορα.

Μια εβδομαδιαία λίστα ελέγχου αξιολόγησης

  • Διαβάστε ένα σταθερό δείγμα κλήσεων, τυχαίων και ασυνήθιστων
  • Βαθμολογήστε την ολοκλήρωση εργασιών και την ακρίβεια
  • Μετρήστε τις μεταβιβάσεις και σημειώστε γιατί έγιναν
  • Ελέγξτε τα μεγαλύτερα κενά απόκρισης
  • Αναζητήστε στις απομαγνητοφωνήσεις φράσεις που δείχνουν σύγχυση
  • Καταγράψτε κάθε ζήτημα και τη διόρθωση που έγινε
  • Δοκιμάστε ξανά τις διορθωμένες περιπτώσεις πριν τις κλείσετε

Συχνές ερωτήσεις

Ποιος είναι ο πιο χρήσιμος δείκτης για έναν φωνητικό πράκτορα;

Δεν υπάρχει ένας μόνο. Η ολοκλήρωση εργασιών σας λέει αν οι καλούντες πήραν ό,τι χρειάζονταν, αλλά χρειάζεστε επίσης ακρίβεια, ποιότητα μεταβίβασης και χρονισμό για να δείτε γιατί.

Πόσες κλήσεις πρέπει να ελέγχω;

Ένα σταθερό εβδομαδιαίο δείγμα που μπορείτε να διατηρήσετε είναι καλύτερο από ένα περιστασιακό μεγάλο. Ξεκινήστε με έναν μέτριο αριθμό και αυξήστε τον μετά από αλλαγές της έναρξης ή όταν εμφανίζονται προβλήματα.

Μπορώ να βασιστώ μόνο στην αυτόματη βαθμολόγηση;

Όχι για την ακρίβεια ή την ασφάλεια. Χρησιμοποιήστε τη για να κατατάσσετε και να επισημαίνετε κλήσεις, και μετά ζητήστε από ανθρώπους να ελέγξουν τις επισημασμένες και ένα τυχαίο δείγμα.

Γιατί οι απομαγνητοφωνήσεις διαφωνούν μερικές φορές με την ηχογράφηση;

Η απομαγνητοφώνηση παράγεται από την αναγνώριση ομιλίας και μπορεί να περιέχει λάθη. Ακούστε τον ήχο πριν κρίνετε τον πράκτορα.

Πώς ξέρω αν μια αλλαγή βελτίωσε τα πράγματα;

Κρατήστε ένα σταθερό σύνολο περιπτώσεων δοκιμής και μια τακτική ρουτίνα ελέγχου, και συγκρίνετε τα αποτελέσματα πριν και μετά την αλλαγή με τα ίδια κριτήρια.

Πρέπει να γίνονται έρευνες στους καλούντες;

Μια σύντομη ερώτηση μετά την κλήση μπορεί να προσθέσει χρήσιμες πληροφορίες, αλλά κρατήστε τη σύντομη και σεβαστείτε τους κανόνες επικοινωνίας με τους ανθρώπους. Συνδυάστε τη με τον δικό σας έλεγχο της συνομιλίας.

Ελέγξτε τις συνομιλίες AI στο ιστορικό κλήσεων του Call

Στην κονσόλα demo μπορείτε να δοκιμάσετε εισερχόμενες κλήσεις σε προσομοίωση.

Σχετικοί οδηγοί

Τεχνολογία φωνητικής AI

Prompt για καλύτερες περιλήψεις κλήσεων: πρότυπα και δοκιμές

Πώς γράφετε ένα prompt που μετατρέπει μια απομαγνητοφώνηση σε σύντομη, ακριβή σημείωση: για ποιον είναι, τι περιέχει, κανόνες κατά των επινοήσεων και δοκιμές.

Συντακτική ομάδα του Call ·
Τεχνολογία φωνητικής AI

Ανάλυση συναισθήματος στις κλήσεις: χρήσεις, όρια, υπεύθυνη χρήση

Τι μετρά η ανάλυση συναισθήματος στις κλήσεις, πού βοηθά στη διαλογή και στις τάσεις, πού παραπλανά και πώς τη χρησιμοποιείτε χωρίς άδικες ή αυτόματες αποφάσεις.

Συντακτική ομάδα του Call ·
Τεχνολογία φωνητικής AI

SIP trunking: πώς ταξιδεύουν οι επαγγελματικές κλήσεις μέσω διαδικτύου

Τι είναι ένα SIP trunk, πώς διαφέρει από τις παραδοσιακές γραμμές, τι να ελέγξετε σε codecs, κανάλια και εφεδρεία και πώς να επιλέξετε πάροχο.

Συντακτική ομάδα του Call ·
Τεχνολογία φωνητικής AI

Μοντέλα speech-to-speech και διαδοχικές φωνητικές αλυσίδες: σύγκριση

Δύο τρόποι να φτιάξετε τηλεφωνικό φωνητικό πράκτορα: μοντέλα speech-to-speech και διαδοχικές αλυσίδες. Δυνατά και αδύναμα σημεία και επιλογή μέσω δοκιμών.

Συντακτική ομάδα του Call ·