So messen Sie, ob Ihre KI-Telefonassistenz funktioniert
Welche Zahlen und Prüfungen zeigen, ob eine KI-Telefonassistenz hilft – von verpassten Anrufen und Nachrichtenqualität bis zu Rückrufen und Feedback.
Man hat leicht das Gefühl, eine KI-Telefonassistenz funktioniere, weil sie das Telefon annimmt. Schwieriger ist es zu wissen, ob sie dem Unternehmen hilft. Ohne Messplan verlassen Sie sich auf Eindrücke: Die Inhaberin bemerkt einen guten und einen schlechten Anruf, und die Meinung schwankt entsprechend.

Dieser Leitfaden schlägt eine kleine Auswahl an Kennzahlen vor, die ein kleines Unternehmen ohne Datenteam verfolgen kann, und eine Routine, um daraus Verbesserungen abzuleiten. Umfassendere Kennzahlen für ein Contact Center finden Sie in der KPI-Liste für Contact Center.
Zuerst Erfolg definieren
Erfolg hängt davon ab, warum Sie die KI eingeführt haben. Schreiben Sie Ihr Ziel in einem Satz auf, bevor Sie Daten ansehen – sonst wählen Sie die Zahlen, die gerade gut aussehen.
Typische Ziele und ihre Kennzahlen
- Weniger verpasste AnrufeAngenommene Anrufe, abgebrochene Anrufe, unbeantwortete Anrufe.
- Bessere Abdeckung außerhalb der GeschäftszeitenAußerhalb der Geschäftszeiten erfasste Nachrichten und wie viele davon zu Aufträgen wurden.
- Weniger Unterbrechungen für das TeamOhne Mitarbeitende bearbeitete Anrufe und eingesparte Zeit bei wiederkehrenden Fragen.
- Besseres Erlebnis für AnrufendeBeschwerden, wiederholte Anrufe und Kommentare von Anrufenden.
Wählen Sie anfangs ein oder zwei Ziele und schreiben Sie sie dort auf, wo das ganze Team sie sieht. Eine Übersicht mit zwanzig Kennzahlen wird selten gelesen.
Einen Ausgangswert erfassen
Sie brauchen ein „Vorher“ zum Vergleich. Sammeln Sie zwei bis vier Wochen Daten aus Ihrer aktuellen Lösung.
Einen Ausgangswert erstellen
- Anrufe zählenAnrufe insgesamt und unbeantwortete Anrufe.
- Zeitpunkte notierenWann die Lücken auftraten und wie lange Anrufende warteten.
- Anliegen stichprobenartig prüfenLesen oder hören Sie eine Stichprobe, um zu sehen, was Anrufende fragten.
- Zeitaufwand festhaltenSchätzen Sie die Zeit des Teams für wiederkehrende Fragen.
- SpeichernBewahren Sie die Zahlen für spätere Vergleiche an einem Ort auf.
Haben Sie keine Berichte, genügt eine Strichliste. Der Ausgangswert muss nicht präzise sein, aber ehrlich. Definitionen finden Sie unter Annahmequote und Abbruchquote.
Die zentralen Kennzahlen
Eine kurze Liste deckt den meisten Bedarf ab. Messen Sie jede Kennzahl jedes Mal auf dieselbe Weise.
| Kennzahl | Was sie zeigt | Wie Sie sie prüfen |
|---|---|---|
| Angenommene Anrufe | Ob Anrufende jemanden oder etwas erreichen | Anrufverlauf nach Status |
| Abgebrochene Anrufe | Ob Anrufende aufgeben | Anrufverlauf, kurze Anrufe ohne Ergebnis |
| Brauchbare Nachrichten | Ob sich Nachrichten ohne zusätzliche Anrufe bearbeiten lassen | Wöchentlich zehn Nachrichten stichprobenartig prüfen |
| Erledigte Rückrufe | Ob aus Nachrichten Kontakt wird | Rückrufe im Verhältnis zu Nachrichten zählen |
| Ohne Menschen bearbeitet | Ob die KI einfache Fragen klärt | Transkripte prüfen, die ohne Nachricht endeten |
| Übergaben an einen Menschen | Ob die KI ihre Grenzen kennt | Weitergegebene Anrufe und die Gründe zählen |
| Beschwerden | Ob Anrufende unzufrieden sind | Notizen des Teams und schriftliches Feedback |
Vermeiden Sie Rechnungen, die präzise aussehen, aber wenig aussagen, denn ein sauberer Prozentwert kann ein schlechtes Erlebnis verbergen. „Die KI hat die meisten Anrufe bearbeitet“ ist zum Beispiel bedeutungslos, wenn die meisten Anrufe sofort aufgelegt wurden. Fragen Sie immer, was im Gespräch passiert ist, nicht nur, ob die KI angenommen hat. Kennzahlen zu Rückrufen beschreibt die Rückruf-Erledigungsquote.
Die Anrufe lesen
Zahlen zeigen, was passiert ist. Transkripte zeigen, warum. Wer im ersten Monat zwanzig Anrufe pro Woche liest, erfährt mehr als aus jedem Diagramm.
- Wo wiederholen sich Anrufende?
- Welchen Fragen weicht die KI aus oder beantwortet sie schlecht?
- Wo verlangen Anrufende einen Menschen?
- Passt der Ton zu jeder Art von Anrufer?
- Gibt es Fragen, die Sie nicht erwartet haben?
Halten Sie Probleme in einer gemeinsamen Liste fest und ordnen Sie sie nach Ursache: fehlende Informationen, unklare Formulierung, falsches Routing oder eine Grenze des Systems. Beheben Sie die Ursache, die am häufigsten auftritt. Siehe Wissenslücken aus Anrufen erkennen und Kennzahlen zur Bewertung von Voice AI.
Anrufende behutsam fragen
Direktes Feedback ist wertvoll, aber man übertreibt es leicht. Bitten Sie nicht jeden Anrufer um eine Bewertung. Eine kurze Nachfrage in einigen Fällen genügt, oder Sie verlassen sich darauf, was Kundinnen und Kunden dem Team erzählen.
Wege, von Anrufenden zu hören
| Nach dem Anruf fragen | Zuhören, was sie sagen | |
|---|---|---|
| Aufwand | Braucht eine Umfrage oder Nachfrage | Transkripte und Notizen des Teams lesen |
| Verzerrung | Nur wer antwortet | Umfasst alle, die angerufen haben |
| Am besten für | Konkrete Fragen | Muster erkennen |
Wenn Sie befragen, beschränken Sie sich auf ein oder zwei Fragen. Siehe CSAT nach Anrufen für Ansätze, die Umfragemüdigkeit vermeiden, und denken Sie daran, dass Regeln zur Kontaktaufnahme mit Kunden je nach Land verschieden sind.
Ein Prüfrhythmus
Eine Gewohnheit schlägt eine große Jahresprüfung. Passen Sie die Häufigkeit an die Phase an, in der Sie sich befinden.
Prüfrhythmus
- In der ersten Woche täglich: alle Nachrichten und einige Anrufe lesen
- Im ersten Monat wöchentlich: zentrale Kennzahlen prüfen und das wichtigste Problem beheben
- Danach monatlich: mit dem Ausgangswert vergleichen und mit dem Team teilen
- Vierteljährlich: fragen, ob sich das Ziel geändert hat
- Nach jeder Änderung: die Wirkung in der folgenden Woche prüfen
Ändern Sie immer nur eine Sache. Wenn Sie Begrüßung, Quellen und Routing gleichzeitig anpassen, wissen Sie nicht, was geholfen hat.
Warnsignale
Manche Muster deuten auf Probleme hin, egal was die Gesamtzahlen sagen.
- Anrufende verlangen direkt nach der Begrüßung einen Menschen.
- Viele Nachrichten mit fehlenden oder falschen Nummern.
- Das Team stellt Anrufenden dieselben Fragen erneut.
- Mehr wiederholte Anrufe zum selben Anliegen.
- Anrufe enden abrupt ohne erkennbaren Grund.
Wenn Sie solche Signale sehen, lesen Sie sofort die betreffenden Anrufe. Prüfen Sie Quellen, Anweisungen und Audioqualität. Kann ein Agent ein Thema regelmäßig nicht beantworten, ergänzen Sie entweder die Inhalte oder leiten Sie dieses Thema an einen Menschen.
Ein einseitiger Beispielbogen
Hier ist ein einfacher Bewertungsbogen für ein fiktives kleines Unternehmen. Füllen Sie ihn wöchentlich mit Zahlen aus Ihrem eigenen Anrufverlauf aus.
| Frage | Diese Woche | Letzte Woche | Hinweis |
|---|---|---|---|
| Wie viele Anrufe kamen herein? | Eintragen | Eintragen | Einschließlich außerhalb der Geschäftszeiten |
| Wie viele blieben unbeantwortet? | Eintragen | Eintragen | Mit Ausgangswert vergleichen |
| Wie viele brauchbare Nachrichten? | Eintragen | Eintragen | Zehn stichprobenartig prüfen |
| Wie viele Rückrufe wurden erledigt? | Eintragen | Eintragen | Innerhalb Ihrer Zielzeit |
| Wie viele Anrufende wollten einen Menschen? | Eintragen | Eintragen | Auf Muster achten |
| Was war diese Woche die wichtigste Korrektur? | Eintragen | Eintragen | Nur eine Änderung |
Ein solcher Bogen dauert zehn Minuten. Sein Wert liegt in der Gewohnheit und im Trend, nicht in einer einzelnen Zahl. Bewahren Sie die alten Bögen auf. Nach einigen Wochen sehen Sie, wie „normal“ für Ihr Unternehmen aussieht – nützlicher als jeder Vergleichswert von anderswo –, und Sie erkennen Veränderungen schnell. Teilen Sie den Bogen mit allen, die Rückrufe erledigen, damit alle dasselbe Bild sehen und sagen können, was ihnen auffällt. Ein Tool funktioniert, wenn das die Menschen drumherum ebenso bestätigen wie die Zahlen.
Fallen, die Sie vermeiden sollten
- Angenommene Anrufe als Erfolg zählen. Ein angenommener Anruf, der in Verwirrung endet, ist ein Misserfolg.
- Einer einzigen Zahl hinterherjagen. Wer auf kürzere Bearbeitungszeit drängt, kürzt womöglich hilfreiche Gespräche.
- Wochen mit unterschiedlichen Umständen vergleichen. Ein Feiertag oder eine Aktion verändert das Muster.
- Kleine Stichproben überbewerten. Bei einer Handvoll Anrufen wirkt ein schlechter Anruf wie ein Trend. Sammeln Sie genug Daten, bevor Sie Schlüsse ziehen.
- Das Team vergessen. Seine Sicht auf die Nacharbeit ist selbst eine Kennzahl.
Messen in Call
In Call listet der Anrufverlauf jeden Anruf mit Status, Leitung, Ergebnis, Dauer und Zusammenfassung auf, und der KI-Anrufverlauf zeigt jedes Gespräch neben der Liste. Mit Filtern grenzen Sie nach Status ein, etwa keine Antwort oder Mailbox, und Anrufe lassen sich in eine Tabelle exportieren. Analyseseiten zeigen die Anrufaktivität und eingehende KI-Anrufe, und eine Seite zeigt, was der Agent aus Anrufen gelernt hat, mit der Möglichkeit, Änderungen rückgängig zu machen. Diese Werkzeuge liefern die Zahlen; die Transkripte liefern die Gründe.
Häufig gestellte Fragen
Was ist die wichtigste einzelne Kennzahl?
Das hängt von Ihrem Ziel ab. Für die meisten kleinen Unternehmen ist die Zahl der Anrufenden, die ein nützliches Ergebnis erhielten – etwa eine Antwort oder eine bearbeitbare Nachricht –, aussagekräftiger als die Zahl der angenommenen Anrufe.
Wie lange dauert es, bis ich urteilen kann?
Geben Sie dem Ganzen mindestens einige Wochen, damit Sie genug Anrufe haben, um Muster zu erkennen. Sehen Sie sich in der ersten Woche die täglichen Ergebnisse an, um offensichtliche Probleme zu erkennen.
Brauche ich ein Dashboard?
Anfangs nicht. Eine wöchentliche Strichliste und eine Stichprobe von Transkripten genügen. Ergänzen Sie Dashboards, wenn Sie eine Frage haben, die die Strichliste nicht beantworten kann.
Woran erkenne ich, ob die KI falsche Antworten gibt?
Lesen Sie Transkripte, testen Sie mit bekannten Fragen und bitten Sie das Team, Fehler zu melden. Falsche Antworten zeigen sich oft daran, dass Anrufende erneut anrufen oder der KI widersprechen.
Sollte ich mit einer menschlichen Empfangskraft vergleichen?
Vergleichen Sie mit Ihrer bisherigen Lösung und verwenden Sie dieselben Kennzahlen. Menschen und KI können unterschiedliche Dinge gut, nutzen Sie den Vergleich also zur Verbesserung, nicht zur Benotung.
Was, wenn die Zahlen gut aussehen, das Team aber unzufrieden ist?
Glauben Sie dem Team. Es sieht die Nacharbeit und die Probleme, die Zahlen verbergen. Fragen Sie, was schiefläuft, und beheben Sie es.