概要

2024 年 9 月 4 日 18:21 至 23:22 UTC 之间,由于我们帐单结算合作伙伴的上游问题,客户在购买、预览商品以及在购物车中进行其他操作时遇到了问题。

时间线

UTC 时间 | 2024 年 9 月 4 日下午 7:17 2024 年 9 月 4 日下午 12:17(太平洋时间)
我们正在调查帐单结算管理员页面的访问问题。当我们有更多信息可分享时,将在 30 分钟内提供更新。

UTC 时间 | 2024 年 9 月 4 日下午 7:23 2024 年 9 月 4 日下午 12:23(太平洋时间)
我们的帐单结算合作伙伴当前遇到了服务降级,但我们的工程师已将帐单结算置于维护模式,直到降级问题得到解决。在解决服务事件之前,订阅更改将被禁用。我们将在一小时后或有新信息可分享时提供最新动态。

UTC 时间 | 2024 年 9 月 4 日下午 09:33 2024 年 9 月 4 日下午 02:33(太平洋时间)
我们的帐单结算合作伙伴持续遇到服务降级问题,而管理中心帐单结算仍处于维护模式,直到降级问题得到解决。在解决服务事件之前,订阅更改将保持禁用状态。解决了合作伙伴的服务故障后,我们将提供另一个。

UTC 时间 | 2024 年 9 月 5 日上午 12:11 2024 年 9 月 4 日下午 05:11(太平洋时间)
由于我们合作伙伴的服务事务已解决,我们的工程师已将帐单结算退出维护模式并恢复了帐单结算访问。现在您可以再次更新帐户订阅了。请清除浏览器缓存和 Cookie,以使更改生效。

 

事后分析

根本原因分析

此事件是由 Zuora 生产环境中断引起的,而生产环境中断又与其 Redis 缓存层问题有关。Zuora 的中断导致我们的帐单结算系统无法正常运作,进而影响了依赖 Zuora 的各种面向客户的功能。

解决方案

为解决此问题,帐单结算团队已将帐单结算应用置于维护模式,并联系 Zuora 寻求解决方案。Zuora 识别并解决了问题,帐单结算应用恢复正常运行。

修复项目

  1. 提高帐单结算筛选页面的稳健性,以处理由 Zuora 中断触发的性能问题。
  2. 确保即使 Zuora 发生故障,基本功能仍能加载并部分运行。
  3. 实施主动警报和断路器,以便在检测到 Zuora 服务中断时自动进入维护模式。

如需更多信息

如需了解您 Zendesk 当前的系统状态信息,请查看我们的 系统状态页面。我们的事后调查概要通常会在事件结束几天后发布在这里。如果您对此事件有其他疑问,请 联系 Zendesk 客户支持。

翻译免责声明:本文章使用自动翻译软件翻译,以便您了解基本内容。 我们已采取合理措施提供准确翻译,但不保证翻译准确性

如对翻译准确性有任何疑问,请以文章的英语版本为准。

由 Zendesk 提供技术支持