我的服务模式是什么?
附加功能 人工智能专员(高级)
本文仅适用于基于 表达式的人工智能专员。

置信度决定了人工智能专员对接收到的表达式与意向匹配的确定程度。

当您单击任意消息时,您可以在 对话日志 中看到该消息被识别为什么,以及它是该意向的置信度。

Screenshot_2022-10-05_at_08.45.06.png Screenshot_2022-10-05_at_08.46.19.png

 

您可以选择置信度阈值——人工智能专员需要在多大程度上确定自己才能发送意向回复?

我们将人工智能专员的置信度阈值设置为 60,发现大多数用户将阈值设置在 50% 到 70% 之间,作为训练人工智能专员时提供最大价值的最佳平衡点。但您可能会问自己……如何知道最适合自己的置信阈值是多少?
为此,您需要知道降低或提高阈值会发生什么。当人工智能专员收到任意超过阈值的表情时会怎样? 

在这篇文章中,我们将介绍:

  • 设置置信度阈值
  • 置信度场景 
  • 注意事项

设置置信度阈值

早期阶段

我们可以推荐的一个方法是,在一开始就从较高的置信度阈值开始,一旦您对自己的意向回复有信心,您就可以为人工智能专员添加更多表达式和训练,并考虑到用户的反馈,您可以降低该值进行试验,看看是否会影响其他指标。 

设置置信度阈值

您可以在“设置”中找到人工智能专员的置信度阈值 > 通用 >置信度阈值

注释 -根据 表达式的置信度,您可以使用带有 confidence_score 参数 的条件块 发送不同的回复。

置信度场景 

当有消息进入时,人工智能就会启动,将消息内容与您创建的所有意向及其理解程度进行比较,以查看是否可以找到匹配项。根据此分析,它会进行一些快速计算,以确定它对自己属于其中一个意向的置信度,以及它与人工智能已建立的表示形式的匹配程度。阈值范围为 0-100,如果置信度阈值默认为 60,则 60 及以上的所有内容都会触发所匹配的意向及其后续操作和回复。  

  • 如果它高于阈值,则触发该意向(可能是正确的,也可能是错误的)——阈值设置的越低,触发错误意向的可能性就越高。
  • 如果低于阈值,将发送一条默认回复。
  • 对于工单自行程序,如果低于阈值,则不会发送回复,除非您已进行其他配置。
    对于在线交谈自行程序,可能会升级客户,具体取决于您设计默认回复的方式。

置信度阈值越高,人工智能专员越准确,但会发送更多默认回复。因此,您需要考虑 5 件事:

  • 您希望通过人工智能专员实现哪些优势?
  • 人工智能专员出错会给您的企业和客户带来什么损失?
  • 对于发送默认回复的人工智能专员,您和您的客户将要支付多少费用?
  • 对于企业和客户,不进行任何操作或升级将使您承受哪些成本?
  • 默认回复的对话设计

注意事项 

要确定置信度阈值,您可以运行完整的分析,然而,如果您正在寻找简便方法,我们可以向您提出一个非此即彼的问题。 

100 条消息中,哪一条更好?
50 个可能错误答案 + 50 个正确答案 100 默认回复 / 不进行任何操作
40 个可能错误答案 + 60 个正确答案 100 默认回复 / 不进行任何操作
30 个可能错误答案 + 70 个正确答案 100 默认回复 / 不进行任何操作
20 个可能错误答案 + 80 个正确答案 100 默认回复 / 不进行任何操作


现在,答案取决于您构建意向回复的方式。

对话设计是否灵活?

他们是否可以选择,尤其是在退货流程与退款查询等类似意向时?他们在退货方面有很多常用词,因此混淆的可能性更高,但如果在第一条消息中就能让他们回到正轨,那么触发错误意向的负面影响就会更低。 

培训效果如何?

您是否对各种意向很困惑?通过分析 混淆矩阵, 您可以尝试减少混淆,从而对置信度产生积极影响。 

 

翻译免责声明:本文章使用自动翻译软件翻译,以便您了解基本内容。 我们已采取合理措施提供准确翻译,但不保证翻译准确性

如对翻译准确性有任何疑问,请以文章的英语版本为准。

由 Zendesk 提供技术支持