AI 通话摘要:如何安全地减少话后处理工作
介绍 AI 通话摘要的生成方式、好摘要应包含的内容、错误从何而来,以及如何结合人工审核和合理的隐私规则来推行。
每通电话结束后都有同样的小任务:把它记下来。坐席一边打字,下一位来电者已经在等了,而记录质量参差不齐,有的精确到三行,有的只是含糊的“客户来电询问订单”。一天下来,这会累积成大量时间;一个月下来,则成了谁也不信任的记录。

AI 生成的通话摘要正是针对这项工作。系统先把语音转成文字,再让语言模型生成简短的结构化记录。本文介绍它的工作原理、好摘要的样子、容易出错的地方,以及如何负责任地引入。内容建立在语音 AI 的工作原理的基础上。
摘要是怎么生成的
从对话到记录
- 采集通话音频按您的录音规则和告知要求进行录制或流式传输。
- 转写语音识别把音频转成文字,通常会区分通话双方。
- 指令由提示词告诉语言模型要包含什么内容、按什么顺序。
- 生成模型根据转写文本写出摘要。
- 审核坐席检查并修改,然后保存到客户记录中。
每个环节都会影响结果。线路嘈杂会产生糟糕的转写,糟糕的转写又会产生糟糕的摘要。提升电话语音识别效果解释了这条链路的前半部分。
有用的摘要包含什么
摘要越可预期就越有用。读者浏览二十条记录时,应当在同样的位置找到同样的字段。
| 字段 | 为何重要 | 示例措辞(假设) |
|---|---|---|
| 来电原因 | 便于对话题分组和统计 | 询问配送为何延迟 |
| 已做的处理 | 避免重复劳动 | 查询了物流信息,发现包裹在本地中转站 |
| 结果 | 显示问题是否已解决 | 已解决;客户明天可收到 |
| 下一步及负责人 | 避免承诺被遗漏 | 如果仍未送达,由坐席回电 |
| 客户情绪 | 帮助下一位坐席把握语气 | 起初有些不满,最后平静下来 |
哪些内容不应写入
- 口头说出的完整银行卡号、密码和其他机密信息。
- 与案件无关的、对来电者的主观评价。
- 超出工作所需的敏感细节,例如普通客服团队中的健康信息。
好处与预期效果
摘要的帮助所在
- 减少打字坐席修改草稿而不是从头写起,话后处理时间随之缩短。
- 记录一致无论谁接的电话,每条记录的结构都相同。
- 交接更快同事或主管只需读三十秒的文字,而不用重听录音。
- 报表更好原因和结果写法一致,就可以被统计。
- 辅导更容易主管可以浏览摘要,挑出值得复盘的通话。
第一项好处与工作量直接相关。如果您的团队话后处理时间很长,请参阅缩短平均处理时长而不影响质量。
局限与风险
通话往往杂乱:人们会打断、转换话题,线路不好时还会说话重叠。摘要必须取舍什么重要,而机器对您业务的了解不如您的坐席。
摘要是一种压缩,压缩就会丢失细节。模型还可能听错不清晰的音频,或把两位说话者的话混在一起。请针对这些故障类型做好预案。
常见错误与应对
| 成因 | 应对 | |
|---|---|---|
| 姓名、号码或日期有误 | 转写时听错 | 保存前对照记录核实关键事实 |
| 把承诺记到了错误的一方 | 说话人被混淆 | 让坐席核实各项承诺 |
| 编造细节 | 模型自行填补空白 | 指示它只写对话中说过的内容,并进行审核 |
| 遗漏细微之处 | 摘要过短 | 保留可随时查阅的转写文本或录音 |
写出更好的提示词
您给模型的指令是您能掌控的最大杠杆。“总结这通电话”这样含糊的要求,结果会参差不齐,所以要具体。
- 写明字段及其顺序。
- 设定长度限制,例如三到五行。
- 告诉模型只使用通话中陈述的信息,缺少内容时写“未提及”。
- 要求为双方各自做出的承诺单独列一行。
- 指定摘要所用的语言,即使通话是用另一种语言进行的。
撰写提示词以获得更好的通话摘要提供了示例和测试方法。
安全地推行摘要
从小处着手
选择一种来电类型和一个团队。用几周时间比较 AI 草稿与坐席自己的记录,统计草稿需要修改的频率以及出现了哪类错误。
保持人工把关
要求坐席在保存前审核并修改每一份摘要。当摘要会触发某项动作时,例如退款或法律通知,必须由人明确确认。
告知相关人员
来电者应当知道通话被录音和处理。通话录音告知提供了措辞示例,语音 AI 的隐私设计则介绍了保存期限和访问权限。
摘要上线清单
- 已选定试点的来电类型和团队
- 已在提示词中定义字段、长度和语言
- 已将审核环节纳入坐席工作流程
- 已制定哪些内容绝不能记录的规则
- 已确定保存期限和访问权限
- 已审核对来电者的告知内容
- 每周抽查一批摘要的准确性
摘要在坐席工位之外的用途
摘要一旦可靠并经过审核,就能服务那些从未听过这通电话的人。经理可以浏览一天的记录,看哪些话题在上升;产品团队可以阅读一批投诉摘要,而不必听录音;二线专家接手升级案件时,上下文已经摆在面前。
这也是为什么一致性比文采更重要。一条朴素、可预期、写着原因、行动、结果和下一步的记录,比每次写法都不同的优美段落更容易搜索和统计。
- 对主管:按结果筛选摘要,找出未解决的案件。
- 对质量团队:抽取摘要样本,选出需要完整复盘的通话。
- 对知识库撰写者:把来电原因分组,为最大的几组撰写答案。
对这些次要用途要像对待首要用途一样谨慎。摘要是客户记录的一部分,因此适用同样的访问和保存规则,而且任何阅读它们的人都应知道,这些内容由软件起草、经人审核。
衡量效果如何
统计从通话结束到保存记录的时间在使用前后的变化、被修改的摘要比例,以及抽样的准确性评分。同时关注下游信号:因上下文丢失而导致的重复来电减少、交接更快。如果修改很多,在责怪模型之前,先调整提示词或改善音频。
Call 中的摘要
在 Call 中,已结束的通话会在通话历史里显示其摘要和转写文本。如有脱敏版本,转写视图中的银行卡号和电话号码可以隐藏。在通话中,您可以请求生成记录草稿、跟进邮件或建议的结果,并复制该内容;来自已连接模型的草稿会有相应标注,可能需要修改,在您使用之前不会发送或保存任何内容。所有者和管理员还可以在简易模式下,把已结束通话的摘要发送到自己的邮箱。逐轮对话只保留有限的时间,如果您的保存规则要求更短,则按其执行。详情请参阅在 Call 中使用通话历史与摘要。
常见问题
AI 通话摘要是如何工作的?
通话先经语音识别转为文字,再指示语言模型根据该文字写出一条简短记录,之后由人审核并保存。
AI 摘要准确吗?
可以做到准确,但也可能听错姓名和号码,或把话记到错误的说话人名下。请审核每一份摘要,尤其是事实和承诺。
摘要应该包含什么?
来电原因、已做的处理、结果、带有负责人的下一步,以及在有用时来电者的情绪。每次保持相同的结构。
需要告知来电者吗?
如果通话被录音或处理,请按您所在地区的规则告知来电者。这只是一般性信息,不构成法律意见,请向监管机构或顾问咨询。
它会取代坐席的记录吗?
它应当取代的是打字,而不是思考。坐席仍需检查草稿,并补充模型遗漏的内容。
如何改进质量不佳的摘要?
用固定字段和长度限制来收紧提示词,告诉模型只使用对话中说过的内容,并检查音频质量,因为糟糕的转写会产生糟糕的摘要。