概要
2024 年 9 月 10 日 22:57 UTC 至 04:09 UTC 之间,在所有 Pod 中使用 Zendesk Talk 的客户都遇到了严重的通话中断,无法拨打和接听电话。此事件影响到多个地点和网络的专员,导致未接来电和业务运营中断。许多专员在呼叫控制台中遇到过这样的情况 :对不起,Talk 当前不可用 ,并伴有未接来电通知。
时间线
UTC 时间 | 2024 年 9 月 11 日上午 01:20 2024 年 9 月 10 日下午 6:20(太平洋时间)
我们目前正在调查多个地区的 Talk 通话问题。即将提供更多信息。
UTC 时间 | 2024 年 9 月 11 日上午 01:41 2024 年 9 月 10 日下午 6:41(太平洋时间)
我们正在与 Talk 合作伙伴合作调查影响拨打或接听电话的问题。我们将在接下来的 30 分钟内提供最新动态,或者我们还有更多可分享。
UTC 时间 | 2024 年 9 月 11 日上午 02:03 2024 年 9 月 10 日下午 7:03(太平洋时间)
我们的 Talk 合作伙伴已确认存在问题,并将继续进一步调查。我们将继续与他们合作,并将在 30 分钟内或有更多信息可用时提供最新信息。
UTC 时间 | 2024 年 9 月 11 日上午 02:33 2024 年 9 月 10 日下午 07:33(太平洋时间)
Talk 合作伙伴已识别出 Voice SDK 的一个潜在问题,其工程师正在积极解决此问题。我们也已开始接收关于恢复的反馈。更多详情将在接下来的 60 分钟内提供。
UTC 时间 | 2024 年 9 月 11 日上午 03:01 2024 年 9 月 10 日下午 08:01(太平洋时间)
我们确认,客户现在应已成功完成 Talk 通话。我们将继续监测此问题,并在完全解决后提供最终更新。谢谢。
UTC 时间 | 2024 年 9 月 11 日上午 04:10 2024 年 9 月 10 日下午 09:10(太平洋时间)
我们很高兴地报告,Talk 通话问题现已解决。感谢您在我们团队处理过程中的耐心等待和理解。
事后分析
根本原因分析
此事件的起因是我们 Talk 合作伙伴的生产部署代码未能正确解析功能密钥的 Base 64 编码,因为这些密钥在特定位置包含“-”或“_”字符。其结果是,部分使用我们 Talk 合作伙伴语音 SDK 功能密钥的客户无法连接,从而导致他们无法拨打或接听语音 SDK 电话。此解析错误导致受影响的客户连接失败,使其无法使用 Zendesk Talk。
解决方案
为解决此问题,工程技术团队与 Talk 合作伙伴密切合作,确认了代码部署错误。确定根本原因后,团队实施了修复,以确保正确解析功能密钥,使受影响的客户能够再次成功拨打和接听电话。
修复项目
- 检查语音服务身份验证策略,并迁移到替代身份验证方法。
- 专门针对 Talk 合作伙伴设备错误创建更多警报,以加快响应时间。
- 审查并改进监测指标,以在潜在问题升级为事务事件之前捕获它们。
注意:我们的 Talk 合作伙伴也将有他们自己的修复项目,其中包括更好的测试和监测。
如需更多信息
如需了解您 Zendesk 当前的系统状态信息,请查看我们的 系统状态页面。我们的事后调查概要通常会在事件结束几天后发布在这里。如果您对此事件有其他疑问,请 联系 Zendesk 客户支持。
翻译免责声明:本文章使用自动翻译软件翻译,以便您了解基本内容。 我们已采取合理措施提供准确翻译,但不保证翻译准确性
如对翻译准确性有任何疑问,请以文章的英语版本为准。
0 条评论