Zusammenfassung
Zwischen dem 27. Juli 2025, 08:30 UTC und dem 8. August 2025, 06:25 UTC, gingen 48 Kundenberichte zu Leistungseinbußen ein, die sich auf den Zendesk-Vertriebsservice (Sell) auswirkten. Bei der Untersuchung stellte sich heraus, dass das Benutzerkonto „Persimmon“ ungewöhnlich viele Terminnachrichten generierte, was erheblich zur Verschlechterung des Service beitrug.
Zeitlicher Ablauf
31. Juli 2025 17:50 UTC | 31. Juli 2025 10:50 PT
Wir untersuchen Leistungsprobleme für Kunden, die Zendesk Sales (Sell) für alle Pods verwenden. Auswirkungen sind fehlgeschlagene Anrufe, langsame Leistung und Probleme mit Importen/Exporten. Unsere Ingenieure fügen Ressourcen hinzu und untersuchen und überwachen die Situation weiter.
31. Juli 2025 6:51 UTC | 31. Juli 2025 11:51 PT
Probleme mit Zendesk Sales Voice und Live-Datendiensten sind jetzt gelöst. Wir kümmern uns weiterhin um Leistungsprobleme mit anderen Services von Zendesk Sales. Bei manchen Suchen werden zuletzt erstellte Elemente möglicherweise nicht zurückgegeben. Wir werden diese Daten aktualisieren, sobald sie verarbeitet wurden.
04. August 2025 15:30 UTC | 04. August 2025 08:30 PST
Unser Engineering-Team hat ein gezieltes Update eingeführt, um die jüngste Leistungseinbuße zu beheben, die sich auf Zendesk Sell Services auswirkt. Diese Korrektur ist jetzt live und wird genau überwacht. Wenn Sie weiterhin Leistungsprobleme mit Zendesk Sell haben, kontaktieren Sie uns umgehend, damit wir Ihnen sofort helfen können. Vielen Dank für Ihre Geduld und Ihr Verständnis.
05. August 2025 12:55 UTC | 05. August 2025 05:55 PST
Unsere Ingenieure überwachen die Systemaktivität weiterhin genau, nachdem eine Korrektur für die jüngste Leistungseinbuße in Zendesk Sell eingeführt wurde. Wir freuen uns über Ihr Feedback, ob das Problem von Ihrer Seite gelöst wurde. Durch Ihre Eingabe können wir Ihnen effektiver helfen. Danke für Ihr Verständnis.
06. August 2025 15:39 UTC | 06. August 2025 08:39 PST
Während unsere Ingenieure weiterhin an den Leistungsproblemen im Zusammenhang mit dem Zendesk-Vertriebsprodukt arbeiten, haben wir einen Rückstand von Datensätzen verarbeitet, die zu den Problemen im Zusammenhang mit ungenauen oder veralteten Berichtdaten beigetragen haben. Wir stellen fest, dass keine weiteren Probleme in Berichten enthalten sind, und überwachen weiterhin, um die vollständige Wiederherstellung sicherzustellen. Bitte lassen Sie uns wissen, ob Sie weiterhin Probleme mit Live-Daten oder historischer Datengenauigkeit und Produktfunktionalität haben.
08. August 2025 06:06 UTC | 07. August 2025 23:06 PST
Wir freuen uns, Ihnen mitteilen zu können, dass die Leistungsprobleme mit Zendesk Sales (Sell) behoben wurden. Vielen Dank für Ihre Geduld und Ihre Mitarbeit, während wir an dieser Angelegenheit gearbeitet haben.
Ursachenanalyse
Als Ursache für diesen Vorfall wurde ein ungewöhnlich hohes Aufkommen an Terminnachrichten durch das Benutzerkonto „Persimmon“ identifiziert, das erheblich zur Verschlechterung der Serviceleistung beitrug.
Lösung
Um das Problem zu beheben, leiteten die Ingenieure die Nachrichten an den RabbitMQ-Broker weiter und löschten fast 170.000 Terminnachrichten aus dem betroffenen Benutzerkonto.
Entfernungselemente
- Überprüfen Sie alle RMQ-bezogenen Warnungen, um eine umfassende Abdeckung zu gewährleisten, einschließlich Neustarts, Abstürze, Fehlerratenerhöhungen und Metriken zur Festplattennutzung pro Warteschlange. Warnschwellenwerte überprüfen und Playbook-Links entsprechend aktualisieren.
- Aktualisieren und verfeinern Sie Playbooks für RabbitMQ-Vorfälle (RMQ), einschließlich spezifischer Verfahren für den RabbitQOS-Dienst und Richtlinien zum Umgang mit Straftätern.
- Überprüfen Sie Services, die während des Vorfalls skaliert wurden, z. B. den Sell-Hoarder-Service. Korrigieren und aktualisieren Sie Ressourcenlimits, implementieren oder kalibrieren Sie Horizontal Pod Automatische Skalierung (HPA) und passen Sie vorhandene Ressourcenanforderungen bei Bedarf an.
- Führen Sie Lösch- und andere notwendige Bereinigungsarbeiten durch. Untersuchen Sie die Möglichkeit, Nutzlastprobleme zu beheben, die vom Vertriebsterminservice stammen, um die Systemstabilität zu verbessern.
WEITERE INFORMATIONEN
Auf unserer Systemstatusseite finden Sie aktuelle Systemstatusinformationen zu Zendesk und den Auswirkungen auf Ihr Konto. Sie können diesem Beitrag folgen, um benachrichtigt zu werden, wenn unser Obduktionsbericht veröffentlicht wird. Wenn Sie weitere Fragen zu diesem Vorfall haben, wenden Sie sich an den Zendesk-Kundensupport.
Hinweis zur Übersetzung: Dieser Beitrag wurde mit automatischer Übersetzungssoftware übersetzt, um dem Leser ein grundlegendes Verständnis des Inhalts zu vermitteln. Trotz angemessener Bemühungen, eine akkurate Übersetzung bereitzustellen, kann Zendesk keine Garantie für die Genauigkeit übernehmen.
Sollten in Bezug auf die Genauigkeit der Informationen im übersetzten Beitrag Fragen auftreten, beziehen Sie sich bitte auf die englische Version des Beitrags, die als offizielle Version gilt.