质量与团队

如何开展质检校准会议,让评分保持公平

如何开展质检校准会议,让评审人员以相同的标准为通话评分:挑选通话、各自盲评、讨论分歧、完善评分表措辞,并长期跟踪评分的一致程度。

Call 编辑部 · 发布于 · 阅读约需 5 分钟

如果两位评审人员听同一通电话,一位打出“非常好”,另一位却判为不合格,坐席很快就不会再相信评分。校准就是防止这种情况的习惯做法。评审人员分别为同一批通话评分,对照意见,消除分歧,让无论谁打的分,含义都相同。

几位质检评审人员围坐在会议桌旁,讨论一份打印出来的评分表
示意图

本文介绍小团队如何开展校准会议。它以通话质量管理(QA)基础:评分表与辅导为基础,并为简单实用的客服通话辅导框架中的反馈循环提供支持。

为什么校准很重要

评分表是用文字写成的,而文字会被不同地解读。“表现出同理心”或“解决了问题”,对不同的评审人员,甚至对同一位评审人员在不同的日子里,含义都可能不同。没有校准,就会出现三个问题:坐席之间的评分不公平、辅导基于个人看法,以及报表无法在不同时期或不同团队之间进行比较。

需要校准的信号

  • 坐席对评分有异议他们说换一位评审人员,同一通电话就会判为合格。
  • 评审人员的平均分不同某位评审人员总是比另一位更严或更松。
  • 新评审人员出现偏差有人加入或临时顶岗时,评分就会变化。
  • 评分表项目含糊不同的人对它们的解释各不相同。

会议准备

一次好的会议需要一点准备。主持人应当熟悉评分表并能保持中立,通常由质检负责人或资深团队主管担任。

会议之前

  1. 挑选三四通电话包括一通明显合格、一通明显不合格,以及至少一通处于临界的电话。
  2. 去除身份信息隐去坐席姓名,让讨论始终围绕通话本身。
  3. 共享评分表所有人都使用附有定义的最新版本。
  4. 要求独立评分每位评审人员在会前完成评分,并且不与其他人讨论。

真实通话是最好的素材。从日常复核中挑出临界通话,因为分歧往往就藏在这些通话里。确认按照内部规定可以把录音分享给评审人员,并谨慎处理其中的个人数据;录音方面的问题请参阅通话录音告知:措辞、示例与良好做法。

主持会议

从分数入手,而不是从意见入手。把每个人逐项的评分结果放在共享屏幕上,找出分差最大的项目,先讨论这些项目。

  1. 说明分差。针对每通电话,展示每位评审人员的总分以及各项目的差异。
  2. 请每位评审人员解释有争议的项目,并指出通话中促使自己作出判断的那个时刻。
  3. 回到评分表的措辞。它是否清楚地说明了怎样算合格?
  4. 就这通电话商定结论,并写下理由。
  5. 如果问题出在措辞上,记下需要修改的地方;不要当场修改,以免让大家混淆。

基本规则

一次假设的会议实例

设想一个六人团队,有三位评审人员。他们挑了四通电话,各自评分。在第三通电话上,关于确认客户信息的项目,一位评审人员判为合格,另一位判为不合格。主持人请两人分别播放自己所依据的那个时刻。原来坐席确认了邮政编码,但没有确认姓名,而评分表上只写着“确认信息”。团队一致认为,该项目应明确列出需要确认的两项信息,于是重写了该项目并记录了这一决定。

这个小小的修改,消除了今后每一次复核中评分不公的一个根源。这正是需要留意的规律:对某通电话的分歧,通常意味着评分表存在漏洞。

记得与坐席形成闭环。告诉他们措辞改了什么、为什么改,并从指定日期起执行,而不是重新给旧通话评分。如果过去的某个评分明显因旧措辞而不公平,请坦率地予以更正。

把分歧变成更好的评分表

一次会议最有价值的成果,通常是一份更清晰的评分表。如果评审人员在某个项目上意见不一,这个项目很可能写得含糊。把它写得具体。

含糊的项目更清晰的版本
表现出同理心在提出解决方案之前,用客户自己的话确认了客户的问题。
解决了问题给出了完整的答复,或明确了下一步及其时间。
语气专业没有打断,没有讽刺,开场和结束都有礼貌。
遵循流程按照现行流程中的步骤核实了客户身份。

为每个项目添加一两个合格和不合格的示例说法。对于不适用于某类通话的项目,要有意识地使用“N/A”(不适用),而不是去猜。能让整通电话判为不合格的关键项目要尽量少,并且要明确无歧义。合理的合格线由您的团队决定;不要在未告知坐席的情况下更改。

长期衡量一致程度

您不需要复杂的统计方法。一个简单的指标,是每通校准通话最高总分与最低总分之间的分差。按月跟踪平均分差,并留意引发分歧最多的项目。

如何解读分差

分差小分差大
说明什么评审人员对评分表的理解相近评审人员对评分表的理解不同
该怎么做保持现有做法,并轮换所用通话重写项目、补充示例,并尽快再开一次会议
风险自满,存在共同的盲点评分不公和互不信任

根据经验,在百分制下,分差超过大约二十分,就说明评审人员对评分表的使用方式不同,值得一起统一措辞。请把这类数字当作您自己团队的参考,而不是标准。

保留一份决定记录。一份简单的共享文档,写明日期、通话、有争议的项目和商定的理解就足够了。新评审人员可以通过它了解团队如何运用评分表,它也能防止同样的争论每个月卷土重来。修订评分表时复查这份记录,并删除因新措辞而不再需要的条目。

频率与参与者

把校准与抽样计划结合起来,让评审人员看到不同坐席和不同类型的通话;请参阅质检抽样:应该抽查多少通电话?。如果有 AI 工具预先为通话评分,也在校准中纳入它的一部分结果,让大家知道什么时候可以信任它、什么时候应该推翻它。

在 Call 中进行校准

Call 的「复核与辅导」区域包含「校准」部分,列出由多位评审人员评过分的通话,以及他们之间的分差。管理员和经理在复核队列中为通话评分,评分表的每一项可选「合格」「不合格」或不适用,关键项目一旦不合格,总分即为零。Call 的指引是:分差超过 20 分,说明评审人员对评分表的理解不同,应当一起统一认识。

对于您描述为“说了或没说某些话”的项目,Call 还可以借助「自动评分」规则自行评分。让这些规则保持范围窄、内容准确;宁可留空,也不要靠猜测来写规则。复核队列和评分表需要您的工作区中有一份启用中的评分表,因此请先完成设置,再围绕它规划校准。

常见问题

校准与日常质检复核有什么不同?

日常复核由一位评审人员为一通电话评分。校准则由几位评审人员独立为同一通电话评分,然后进行比较。它的目的是统一评审人员的标准,而不是评判坐席。

评审人员必须打出相同的分数吗?

不必。小的差异很正常。目标是就每个项目怎样算合格达成一致,并让总体分差保持在较小范围。

每次会议应该用多少通电话?

通常三四通就够了。电话太多,会议就会冗长而流于表面。挑选能暴露分歧的通话。

应该让坐席看到校准结果吗?

坐席应当看到评分表的定义,以及校准带来的任何修改。是否分享逐通电话的对比由团队决定,但公开透明有助于建立信任。

如果某位评审人员总是更严格怎么办?

找出造成差距的是哪些项目,并在会议上讨论。很多时候是评分表的措辞不清楚。如果差距一直存在,就为这位评审人员提供更多指导和示例。

评分表应该多久更新一次?

当校准显示反复出现混淆、流程或产品发生变化,或者客户需求发生变化时,就应更新。修改后要通知坐席。

在 Call 中比较不同评审人员对同一通电话的评分

在演示控制台中,您可以通过模拟体验来电。

相关指南