概要

2025 年 7 月 27 日 - 2025 年 8 月 8 日 - 期间,我们共收到 48 份客户报告,涉及 Zendesk 销售 (Sell) 服务性能下降。经调查,用户帐户“Persimmon”生成的预约消息异常多,这在很大程度上导致了服务降级。

时间线

2025 年 7 月 31 日 17:50 UTC | 2025 年 7 月 31 日 10:50(太平洋时间)

我们正在调查客户在所有 Pod 中使用 Zendesk Sales (Sell) 时出现的性能问题。影响包括通话失败、性能下降,以及导入/导出问题。我们的工程师正在添加资源,继续调查并监测事态的发展。

UTC 时间 | 2025 年 7 月 31 日 6:51 2025 年 7 月 31 日 11:51(太平洋时间)

Zendesk语音销售和实时数据服务的问题现已解决。我们将继续解决 Zendesk Sales 其他服务的性能问题。某些搜索可能不会返回最近创建的项目。我们会更新此数据何时处理完毕。

UTC 时间 | 2025 年 8 月 4 日2025 年 8 月 4 日上午 8:30(太平洋时间)

我们的工程团队已部署有针对性的更新,以解决最近影响Zendesk Sell服务的性能降级问题。此修复现已上线,并受到密切监测。如果您在使用Zendesk Sell继续遇到任何性能问题,请及时联系我们,以便我们立即提供帮助。感谢您的耐心等待和理解。

UTC 时间 | 2025 年 8 月 5 日2025 年 8 月 5 日上午 05:55(太平洋时间)

针对最近影响Zendesk Sell 的性能下降问题部署修复程序后,我们的工程师将继续密切监测系统活动。请告知您此问题是否已解决,我们将不胜感激。您的意见将使我们能够更有效地为您提供帮助。感谢您的合作。

UTC 时间 | 2025 年 8 月 6 日2025 年 8 月 6 日上午 8:39(太平洋时间)

由于我们的工程师继续处理与 Zendesk Sales 产品相关的性能问题,我们已经完成了导致报告数据不准确或“过时”相关问题的积压记录的处理。根据我们的观察,报告中未出现其他问题,我们将继续监测以确保其完全恢复。如果您在实时数据或历史数据准确性和产品功能方面继续遇到任何问题,请与我们联系。

2025 年 8 月 8 日 06:06 UTC |太平洋时间 2025 年 8 月 7 日下午 11:06

我们很高兴地通知您,Zendesk Sales (Sell) 的性能问题已解决。感谢您在我们处理此问题期间的耐心配合和合作。

根本原因分析

此事件的根本原因是用户帐户“Persimmon”生成了大量预约消息,在很大程度上导致了服务性能下降。

解决

为解决此问题,工程师将消息传输至 RabbitMQ 代理,并清除了来自受影响用户帐户的近 170,000 条“预约”消息。

修复项目

  1. 重新访问所有 RQ 相关警报,确保覆盖全面,包括每个队列的重新启动、崩溃、错误率增加以及与磁盘相关的指标。验证警报阈值并相应更新 Playbook 链接。
  2. 更新并完善 RabbitQOS 服务的特定程序,以及违规者处理指南。
  3. 审阅在事务期间升级的服务,例如 sell-hoarder 服务。更正并更新资源限制,考虑实施或校准 Pod 水平自动扩展 (HPA),并根据需要调整现有资源请求。
  4. 执行代理删除和其他必要的清理工作。调查是否可以解决源自销售预约服务的有效负载问题,以提高系统稳定性。

如需更多信息

有关 Zendesk 当前系统状态信息以及对您帐户的具体影响,请访问我们的系统状态页面。请关注此文章,以便在我们的事后分析报告发布时获得通知。如果您对此事务有其他疑问,请联系 Zendesk 客户支持。

翻译免责声明:本文章使用自动翻译软件翻译,以便您了解基本内容。 我们已采取合理措施提供准确翻译,但不保证翻译准确性

如对翻译准确性有任何疑问,请以文章的英语版本为准。

由 Zendesk 提供技术支持