Überblick
Am 25. Oktober 2025 traten von 02:00 UTC bis 15:40 UTC bei Kunden von Zendesk Support (Arbeitsbereich für Agenten) und Sunshine Conversations auf Pods 15 und 19 verschiedene Probleme mit diesen Produkten auf, darunter Messaging-Fehler, Verzögerungen bei der Ticketerstellung und andere Leistungsprobleme. Diese Symptome traten zu unterschiedlichen Zeitpunkten innerhalb des Einwirkungsfensters auf.
Zeitleiste
25. Oktober 2025 02:30 UTC | 24. Oktober 2025 7:30 PST
25. Oktober 2025 03:00 UTC | 24. Oktober 2025 20:00 PT
Wir haben das Problem identifiziert, das zu Verzögerungen und 5xx-Fehlern für SunCo auf Pod 15 geführt hat und sind dabei, es zu beheben. Wir werden innerhalb von 30 Minuten oder wenn wir weitere Informationen haben, ein Update bereitstellen.
25. Oktober 2025 03:00 UTC | 24. Oktober 2025 20:00 PT
Die Latenz und Fehlerrate, die sich auf Sunshine Conversations in Pod 15 auswirken, stellen sich allmählich wieder her. Wir werden aktualisiert, wenn wir die vollständige Wiederherstellung beobachten oder in einer Stunde.
25. Oktober 2025 03:15 UTC | 24. Oktober 2025 20:15 PST
Wir können jetzt bestätigen, dass sich die Latenz- und Fehlerraten für Messaging auf Pod 15 wieder normalisiert haben. Wir entschuldigen uns für die Störung.
25. Oktober 2025 03:45 UTC | 24. Oktober 2025 20:45 PST
Obwohl sich die Messaging-Latenz und 5xx-Fehler in Sunshine Conversations wieder normalisiert haben, arbeiten wir daran, Verzögerungen bei der Ticketerstellung zu beheben. Wir werden in 30 Minuten oder weniger ein Update bereitstellen.
25. Oktober 2025 04:00 UTC | 24. Oktober 2025 9:00 PT
Wir entschuldigen uns für die Verwirrung, aber leider stellen wir bei Pod 15 Sunshine Conversations wieder eine erhöhte Latenz und Fehler fest. Wir haben auch ein Problem identifiziert, das Pod 19 betrifft, sich aber auf die Ticketerstellung auswirkt. Diese Probleme hängen damit zusammen und wir werden umgehend Updates bereitstellen, sobald wir mehr erfahren.
25. Oktober 2025 05:00 UTC | 24. Oktober 2025 10:00 PT
In Sunshine Conversations Messaging auf Pod 15 beobachten wir erneut Stabilität. Wir untersuchen weiterhin das Problem, das bei einigen Kunden auf Pod 19 zu Verzögerungen bei der Ticketerstellung geführt hat.
25. Oktober 2025 07:45 UTC | 25. Oktober 2025 00:25 PST
Unsere Engineering-Teams arbeiten noch daran, das Problem zu beheben, das sich auf Verzögerungen bei der Ticketerstellung in Pod 19 auswirkt. Wir entschuldigen uns für die anhaltende Störung.
25. Oktober 2025 14:25 UTC | 25. Oktober 2025 07:25 PT
Nach mehreren Stunden Arbeit an der Wiederherstellung der normalen Ticketerstellung in Pod 19 stellen wir fest, dass unser Rückstand an Ticketerstellungsjobs aufgeholt wird. Wir beobachten nach wie vor Verzögerungen bei der Ticketerstellung, hoffen aber, in Kürze ein Update zu haben, das den normalen Zeitpunkt der Ticketerstellung bestätigt.
25. Oktober 2025 15:15 UTC | 25. Oktober 2025 08:15 PT
Während wir die vollständige Wiederherstellung überwachen, sehen wir weiterhin, dass sich der Rückstand bei der Verarbeitung von Nachrichten und Tickets in die richtige Richtung bewegt. Außerdem möchten wir Ihnen ein Update zum Anwendungsbereich vorstellen: Die Verzögerungen bei der Ticketerstellung wirken sich auch auf die Ticketzuweisung aus. Wir entschuldigen uns für die Verwirrung und Frustration, die diese zusätzlichen Auswirkungen verursacht haben. Wir werden eine Aktualisierung in einer Stunde (oder weniger) bereitstellen.
25. Oktober 2025 16:00 UTC | 25. Oktober 2025 09:00 CET
Wir sehen weiterhin eine positive Ergebnisverarbeitung durch den Rückstand an Nachrichten und versuchen, in unserem nächsten Update die vollständige Wiederherstellung für die Erstellung und Zuweisung von Nachrichtentickets auf Pod 19 zu bestätigen. Bei manchen Kunden kann es zu Verzögerungen kommen, da Nachrichten momentan nicht an Agenten weitergeleitet werden. Wir entschuldigen uns für die langen Auswirkungen und bitten um Ihr Verständnis.
25. Oktober 2025 17:00 UTC | 25. Oktober 2025 10:00 PT
Wir freuen uns sehr, Ihnen mitteilen zu können, dass nach der Überwachung der Rückstand bei nicht verarbeiteten Messaging-Tickets deutlich bleibt. Wir danken Ihnen für Ihre Geduld, während wir an der Lösung dieses Problems gearbeitet haben. Reach, wenn Sie Fragen haben.
28. Oktober 2025 01:52 UTC | 27. Oktober 2025 18:52 PST
Wir freuen uns, Ihnen mitteilen zu können, dass die Probleme mit Sunshine Conversation, einschließlich SunCo-Fehler und Latenzen auf Pod 15, sowie Verzögerungen bei der Ticketerstellung auf Pod 19 behoben wurden. Wir danken Ihnen für Ihre Geduld und Mitarbeit bei der Lösung.
Ursachenanalyse
Dieser Vorfall wurde durch einen plötzlichen Anstieg des Messaging-SDK-Verkehrs verursacht. Dieses ungewöhnlich hohe Anfragevolumen führte zur Erschöpfung der Datenbank- und Serverressourcen und damit zu Verzögerungen bei der Ereignisverarbeitung. Verschärft wurde dies durch serviceübergreifende Latenzen, insbesondere in Support. Infolgedessen kam es zu Serviceverlangsamungen, Fehlern, erheblichen Verzögerungen beim Empfangen und Senden von Nachrichten sowie Verzögerungen bei der Ticketerstellung. Diese Latenzen wirkten sich auch auf zugehörige API-Endpunkte aus, die möglicherweise Auswirkungen auf Apps und Integrationen hatten, die diese Dienste nutzten.
Lösung
Um dieses Problem zu beheben, erhöhten unsere Teams die Infrastrukturkapazität, indem sie unsere Datenbanken und Verarbeitungssysteme skalierten, um den Datenverkehr zu bewältigen und Messaging-Rückstände abzubauen. Darüber hinaus haben wir die Systemkonfigurationen angepasst, um die Verarbeitungsgeschwindigkeit zu verbessern und die Systemresilienz für diese plötzlichen Datenverkehrsspitzen zu erhöhen.
Entfernungselemente
- Verbessern Sie die Systemüberwachung und -warnung, um die Erkennungszeiten zu verbessern.
- Steigern Sie die Skalierbarkeit der Infrastruktur, damit unsere Systeme plötzliche Nachfrageanstiege besser bewältigen können.
- Überprüfen und optimieren Sie Ratenlimit-Strategien, um eine Überlastung der Plattform zu verhindern.
- Stärkung der regionsübergreifenden Koordinierung, um das Risiko von Verzögerungen bei Auswirkungen auf einen Teil des Systems zu verringern.
WEITERE INFORMATIONEN
Auf unserer Systemstatusseite finden Sie aktuelle Systemstatusinformationen zu Zendesk und den Auswirkungen auf Ihr Konto. Sie können diesem Beitrag folgen, um benachrichtigt zu werden, wenn unser Obduktionsbericht veröffentlicht wird. Wenn Sie weitere Fragen zu diesem Vorfall haben, wenden Sie sich an den Zendesk-Kundensupport.
Hinweis zur Übersetzung: Dieser Beitrag wurde mit automatischer Übersetzungssoftware übersetzt, um dem Leser ein grundlegendes Verständnis des Inhalts zu vermitteln. Trotz angemessener Bemühungen, eine akkurate Übersetzung bereitzustellen, kann Zendesk keine Garantie für die Genauigkeit übernehmen.
Sollten in Bezug auf die Genauigkeit der Informationen im übersetzten Beitrag Fragen auftreten, beziehen Sie sich bitte auf die englische Version des Beitrags, die als offizielle Version gilt.