ZUSAMMENFASSUNG
Am 16. November 2023 von 18:02 UTC bis 20:00 UTC kam es bei einigen Support-Kunden in Pod 13, 17, 19, 23, 28 und 29 zu Verzögerungen oder einem Totalausfall beim Empfang eingehender E-Mails. Die Verzögerungsdauern zwischen dem Senden von E-Mails und der Ticketerstellung in Zendesk über von Google verwaltete Dienste variierten von 15 bis 60 Minuten.
Zeitleiste
18:53 UTC | 10:53 PT
Wir untersuchen Berichte über eingehende E-Mails, die für Kunden in Pod 28 und 29 nicht verarbeitet werden. Wir werden in Kürze weitere Informationen bereitstellen.
18:57 UTC | 10:57 PT
Wir haben ein Problem bestätigt, das zu Verzögerungen bei der Verarbeitung eingehender E-Mails für Kunden in Pod 13, 19, 23, 28 und 29 führt. Unser Team untersucht dies und wir werden weitere Updates bereitstellen, sobald sie verfügbar sind.
19:33 UTC | 11:33 PT
Unser Team untersucht weiterhin das Problem, das zu Verzögerungen bei der Verarbeitung eingehender E-Mails auf den Pods 13, 17, 19, 23, 28 und 29 führt. Wir arbeiten daran, die Auswirkungen zu minimieren, und werden so schnell wie möglich neue Informationen bereitstellen.
19:54 UTC | 11:54 PT
Wir sehen allmählich eine Besserung des Problems, das zu Verzögerungen bei der Verarbeitung eingehender E-Mails auf den Pods 13, 17, 19, 23, 28 und 29 führt. Unser Team wird dies weiterhin überwachen, um eine vollständige Wiederherstellung sicherzustellen.
21:14 UTC | 13:14 PT
Wir haben das Problem behoben, das zu Verzögerungen bei eingehenden E-Mails für Kunden in Pod 13, 17, 19, 23, 28 und 29 führt. Eingehende E-Mails werden wie erwartet verarbeitet. Vielen Dank für Ihr Verständnis.
POST-MORTEM
Ursachenanalyse
Dieser Vorfall wurde durch Verbindungsprobleme des Mail-Fetcher-Dienstes mit Gmail verursacht, die die Verarbeitung eingehender E-Mails in Support unterbrichten. Die 302 verschobenen Antworten von Gmail wurden von der Liveness-Probe als Fehler interpretiert, was für den Container Orchestrator bedeutet, dass die Pods fehlerhaft waren. Dies führte dazu, dass Orchestrator die Pods ersetzte und die E-Mail-Verarbeitung in den entsprechenden Containern angehalten wurde, was zu Verzögerungen oder einem Ausfall des E-Mail-Verkehrs führte.
Lösung
Um dieses Problem zu beheben, wurde der eingehende E-Mail-Verkehr wiederhergestellt, nachdem Gmail die Blockierung dieser Integritätsprüfungen aufgehoben hat. Auf diese Weise konnte Zendesk Support die Erstellung seiner Pods abschließen und die E-Mail-Verarbeitung fortsetzen. Nicht lange danach bildeten sich die Warteschlangen für eingehende E-Mails ein und der Datenverkehr begann, reibungslos über die Bühne zu gehen.
Korrekturelemente
- Verbessern Sie vorhandene Implementierungstools für E-Mail-Gesundheitsprüfungen.
- Erstellen Sie zusätzliche Benachrichtigungen.
- Korrekturcodezeilen für spezifische Anwendungen hinzufügen.
WEITERE INFOS
Aktuelle Systemstatusinformationen zu Ihrem Zendesk finden Sie auf der Systemstatusseite. Die Zusammenfassung unserer Post-mortem-Untersuchung wird in der Regel hier einige Tage nach Abschluss des Vorfalls gepostet. Wenn Sie weitere Fragen zu diesem Vorfall haben, reichen Sie bitte über ZBot Messaging im Widget ein Ticket bei uns ein.
Hinweis zur Übersetzung: Dieser Beitrag wurde mit automatischer Übersetzungssoftware übersetzt, um dem Leser ein grundlegendes Verständnis des Inhalts zu vermitteln. Trotz angemessener Bemühungen, eine akkurate Übersetzung bereitzustellen, kann Zendesk keine Garantie für die Genauigkeit übernehmen.
Sollten in Bezug auf die Genauigkeit der Informationen im übersetzten Beitrag Fragen auftreten, beziehen Sie sich bitte auf die englische Version des Beitrags, die als offizielle Version gilt.