AI受付の効果を測る
AI受付が役立っているかどうかを教えてくれる数字とレビューです。不在着信や伝言の質から、折り返し、発信者の声までを取り上げます。
AI受付が電話に出ているから、うまくいっていると感じるのは簡単です。事業の助けになっているかを知るのは、もっと難しいことです。測る計画がなければ、印象に頼ります。オーナーが良い通話を1件、悪い通話を1件目にして、意見もそれに合わせて揺れ動きます。

このガイドは、データチームなしで小規模事業が追える少数の指標と、それを改善につなげる習慣を提案します。コンタクトセンター全般の指標は、コンタクトセンターのKPI一覧をご覧ください。
まず成功を定義する
成功は、なぜAIを導入したかで決まります。データを見る前に、目標を一文で書き出しましょう。そうしないと、見栄えの良い数字を選んでしまいます。
よくある目標と指標
- 不在着信を減らす応答した電話、放棄された電話、応答のなかった電話。
- 時間外の対応を改善する営業時間外に聞き取った伝言と、そのうち仕事になった数。
- スタッフの中断を減らすスタッフなしで対応した電話と、繰り返しの質問で節約できた時間。
- 発信者の体験を良くする苦情、リピートの電話、発信者のコメント。
最初は1つか2つの目標を選び、チーム全員が見える場所に書いておきましょう。20の指標が並んだスコアカードは、まず読まれません。
基準値を取る
比較するための「前」が必要です。現在の体制で、2〜4週間分のデータを集めましょう。
基準値を作る
- 通話を数える全体の通話数と、応答のなかった通話。
- 時間を記録する空白が生じた時間帯と、発信者の待ち時間。
- 理由をサンプリングするサンプルを読むか聴いて、発信者が何を尋ねたかを確認する。
- かかった時間を記録する繰り返しの質問に費やすスタッフの時間を見積もる。
- 保存する後で比較できるよう、数字を1か所に保管する。
レポートがなければ、集計用紙で十分です。基準値は正確である必要はなく、正直である必要があります。定義は、応答率と放棄率をご覧ください。
中心となる指標
短いリストで、ほとんどのニーズを満たせます。毎回、同じ方法で測りましょう。
| 指標 | 分かること | 確認方法 |
|---|---|---|
| 応答した電話 | 発信者が人や何かにつながっているか | ステータス別の通話履歴 |
| 放棄された電話 | 発信者が諦めているか | 通話履歴で、結果のない短い通話 |
| 使える伝言 | 追加の電話なしで、伝言から行動できるか | 毎週10件の伝言をサンプリング |
| 完了した折り返し | 伝言が連絡につながっているか | 伝言に対する折り返しを数える |
| 担当者なしで対応 | AIが簡単な質問を解決しているか | 伝言なしで終わった文字起こしを見る |
| 担当者への引き継ぎ | AIが自分の限界を知っているか | 引き継いだ通話とその理由を数える |
| 苦情 | 発信者が不満を持っているか | スタッフのメモと書面のフィードバック |
きれいな割合は、悪い体験を隠すことがあるため、精密に見えて意味の乏しい計算は避けましょう。たとえば、「AIが大半の電話に対応した」という数字は、大半が切られた電話であれば意味がありません。AIが応答したことだけでなく、通話で何が起きたかを常に尋ねてください。折り返しの指標は、コールバック完了率をお読みください。
通話を読む
数字は何が起きたかを示します。文字起こしは、その理由を示します。最初の1か月は、週に20件の通話を読めば、どんなグラフよりも多くのことが分かります。
- 発信者が繰り返しているのはどこか?
- AIが避けている、または下手に答えている質問は何か?
- 発信者が担当者を求めるのはどこか?
- トーンは、発信者の種類ごとに適切か?
- 予想していなかった質問はあるか?
課題を共有のリストに印をつけ、原因別にまとめます。情報の不足、分かりにくい言葉遣い、誤ったルーティング、システムの制約です。最も多く現れる原因を直しましょう。詳しくは通話からナレッジの不足を見つける、音声AIの評価指標をご覧ください。
やさしく発信者に尋ねる
直接のフィードバックは貴重ですが、やりすぎやすいものです。すべての発信者に評価を頼まないでください。場合によっては短いフォローアップで十分で、お客様がスタッフに話すことに頼ることもできます。
発信者の声を聞く方法
| 通話後に尋ねる | 話すことを聴く | |
|---|---|---|
| 手間 | アンケートやフォローアップが必要 | 文字起こしとスタッフのメモを読む |
| 偏り | 答えた人だけ | 電話をかけたすべての人を含む |
| 向いている用途 | 特定の質問 | パターンの発見 |
アンケートを行うなら、質問は1つか2つにとどめましょう。疲れさせない方法は、通話後のCSATをご覧ください。お客様への連絡に関するルールは国によって異なることも忘れないでください。
見直しのリズム
習慣は、年1回の大がかりな見直しに勝ります。頻度は、いまの段階に合わせましょう。
見直しのリズム
- 最初の1週間は毎日:すべての伝言と数件の通話を読む
- 最初の1か月は毎週:中心となる指標を見直し、最大の課題を直す
- その後は毎月:基準値と比べ、チームに共有する
- 四半期ごと:目標が変わっていないかを問う
- 変更のたびに:次の1週間で効果を確認する
一度に1つだけ変更しましょう。あいさつ、情報源、ルーティングを同時に変えると、どれが効いたか分かりません。
警告のサイン
見出しの数字がどうであれ、問題を示すパターンがあります。
- あいさつの直後に、発信者が担当者を求める。
- 番号が欠けているか間違っている伝言が多い。
- スタッフが発信者に同じ質問をし直している。
- 同じ問題についてのリピートの電話が増える。
- はっきりした理由なく、通話が突然終わる。
これらが見えたら、関連する通話をすぐ読みましょう。情報源、指示、音質を確認します。エージェントがあるテーマに繰り返し答えられないなら、内容を追加するか、そのテーマを担当者に回してください。
1ページのスコアカードの例
仮の小規模事業のための、簡単なスコアカードです。毎週、自分の通話履歴の数字で埋めてください。
| 質問 | 今週 | 先週 | メモ |
|---|---|---|---|
| 何件の電話があったか? | 記入する | 記入する | 時間外を含める |
| 何件に応答できなかったか? | 記入する | 記入する | 基準値と比べる |
| 使える伝言は何件か? | 記入する | 記入する | 10件をサンプリングする |
| 折り返しは何件完了したか? | 記入する | 記入する | 目標の時間内か |
| 何人の発信者が担当者を求めたか? | 記入する | 記入する | パターンを探す |
| 今週の最大の改善点は何か? | 記入する | 記入する | 変更は1つだけ |
このようなスコアカードは10分でできます。価値は、習慣と傾向にあり、1つの数字にはありません。古い用紙は取っておきましょう。数週間たてば、自社にとっての普通がどういうものか分かります。それは、他所のどんなベンチマークよりも役立ち、変化にもすぐ気づけます。折り返しに対応する人とシートを共有し、全員が同じ状況を見て、気づいたことを言えるようにします。ツールが機能しているのは、数字だけでなく、周りの人たちもそう言うときです。
避けるべき落とし穴
- 応答した電話を成功と数える。混乱で終わった応答は、失敗です。
- 1つの数字を追い求める。対応時間を減らそうと押せば、役立つ会話まで短くしてしまうおそれがあります。
- 状況の違う週を比べる。祝日やキャンペーンがあると、パターンが変わります。
- 小さなサンプルを無視する。数件の通話では、1件の悪い通話が傾向のように見えます。結論の前に、十分なデータを集めてください。
- スタッフを忘れる。フォローアップ作業に対するスタッフの見方は、それ自体が指標です。
Callでの測定
Callでは、通話履歴にすべての通話がステータス、回線、結果、時間、要約とともに一覧され、AI通話履歴では一覧の隣に各会話が表示されます。フィルターで、応答なしや留守番電話などのステータスで絞り込め、通話はスプレッドシートに書き出せます。分析のページには通話の動きとAIの着信が表示され、別のページには、エージェントが通話から学んだことが表示されて、変更を元に戻せます。これらのツールが数字を与え、文字起こしが理由を与えます。
よくある質問
最も重要な指標は1つだけ挙げるなら何ですか?
目標によります。たいていの小規模事業では、応答した電話の数よりも、答えや行動につながる伝言など、役に立つ結果を得た発信者の数のほうが、多くを教えてくれます。
いつ頃から判断できますか?
パターンが見えるだけの通話数を得るため、少なくとも数週間は見てください。明らかな問題を拾うには、最初の1週間は日々の結果を見ます。
ダッシュボードは必要ですか?
最初は不要です。週ごとの集計と文字起こしのサンプルで十分です。集計では答えられない疑問が出たら、ダッシュボードを加えましょう。
AIが間違った答えを出しているかどうか、どう分かりますか?
文字起こしを読み、既知の質問でテストし、スタッフに誤りを知らせてもらいます。間違った答えは、発信者がかけ直したり、AIに反論したりする形で現れることが多いです。
人間の受付と比べるべきですか?
同じ指標を使って、以前の体制と比べましょう。人とAIは得意なことが違うので、点数をつけるためではなく、改善のために比較してください。
数字は良いのにスタッフが不満な場合は?
スタッフを信じましょう。彼らは、フォローアップの作業や、数字が隠す問題を見ています。何がうまくいっていないかを尋ねて、直してください。