智能外呼的质检报告可以告知客户当前知识库的问题,哪些地方会影响到机器人的问答效果,并给出知识库的优化建议,供客户参考。一般来说,质检报告和优化建议,可能会涉及到知识结构体系和语料标注规则的改变,知识库语料的增加或者删除等,因此,都需要资深的业务人员参与。
质检报告包含三方面:知识库的总体得分,需要优化的知识,以及优化建议。
我们会首先给出当前知识库的总体得分,让客户对当前知识库有一个总体的认识。然后给出知识库的各项质检报告,并给出优化建议。
如果当前的机器人知识覆盖率(业务覆盖率)较低,我们会建议客户使用新分类发现工具,从用户日志中发现新的意图,并将其增加到知识库中,从而使机器人可以识别当前无法应答的用户问题。
若知识库中存在有歧义的意图分类和问法,我们会将这些意图分类和问法展示给客户,使得客户可以直接的进行对比分析,并进行在线修改。对于一些用户表达较为模糊的样本,我们也会展示出来,告诉客户,这些样本需要优化话术,使意图更明确。
当机器人日志中出现一定频率的超纲词汇后,我们会将其展示给客户,建议客户增加业务关键词或者对应的意图分类,解决潜在的重要业务问题。
对于知识库中语料的标注是否存在错误,每个分类样本是否冲突等情况,也会生成报告,然后告诉客户,哪些样本需要重新标注,哪些意图分类需要扩充样本,需要扩充多少样本,可以达到理想的效果。
机器人应答的评价,我们也会及时的展示给客户,对于评价较低的意图分类,我们会建议客户考虑优化对应分类的知识或者答案。
领取专属 10元无门槛券
私享最新 技术干货