CodeLeo · 方法一页纸
评估表
AI 客服自助服务评估表
判断哪些咨询适合自助、哪些必须转人工,并为首次回复、解决率和风险设置验收口径。
我们的立场
自助服务的关键指标不是解决率,是「该转人工的时候有没有转」。
带走的要点
- 从高频、低风险、答案稳定的问题开始,而不是追求覆盖所有咨询。
- 自助完成率必须和答案质量、转人工体验一起评估。
- 未解决问题是改进知识、流程和产品的重要数据。
方法拆解
-
按频率、风险和可回答性分类
适合首批自助的问题通常出现频繁、答案有权威来源、错误后果可控。退款争议、复杂投诉或需要身份核验的任务风险更高,应设计人工升级,而不是用同一套自动回答覆盖。
- 整理近三个月咨询主题与数量
- 标注答案来源和变化频率
- 按错误影响划分风险等级
-
区分回答、解决与转接
机器人给出回复不等于客户问题已解决。应分别记录首次回答是否相关、客户是否继续追问、任务是否完成,以及转人工后是否需要重复描述。这样才能避免只用对话量证明效果。
- 设置首次有效回复率
- 跟踪自助完成与重复追问
- 衡量转人工后的上下文保留
-
把失败样本变成服务改进
未命中问题可能意味着知识缺失、流程不清或产品体验有缺口。定期聚类失败样本,分配给知识维护、客服运营或产品团队,才能让自助服务形成持续改进闭环。
- 每周归类未解决问题
- 明确知识、流程与产品责任方
- 更新后用同一问题回归测试
行动清单
- 是否掌握主要咨询主题、数量和人工处理时长?
- 首批问题是否有稳定、可更新的权威答案?
- 高风险问题是否有身份验证和人工升级路径?
- 是否同时衡量回复质量、自助完成与转人工体验?
- 失败样本是否进入固定的改进流程?
适用对象
客服负责人、运营负责人,以及准备上线聊天机器人或服务助手的团队。