ZUSAMMENFASSUNG
Am 16. Januar 2025 von 9:40 UTC bis 10:47 UTC hatten einige Chat-Kunden in Pod 19 Probleme mit dem Anzeigen der letzten Chats, dem Empfangen von Chat-Export-E-Mails und dem Erstellen von Tickets aus Chats.
CHRONIK
16. Januar 2025 11:26 UTC | 16. Januar 2025, 03:26 Uhr PST
Wir freuen uns, Ihnen mitteilen zu können, dass die Probleme mit unserem Chat-Service für unsere Kunden auf POD19 jetzt behoben sind. Wir danken Ihnen während dieser Zeit für Ihre Geduld und Ihr Verständnis.
16. Januar 2025, 11:00 Uhr UTC | 16. Januar 2025, 03:00 Uhr PST
Wir haben beträchtliche Fortschritte bei der Wiederherstellung der Funktionalität gemacht, darunter die Möglichkeit, die letzten Chats anzuzeigen, E-Mails mit Chat-Exporten zu erhalten und Tickets zu erstellen. Wir werden die Situation weiterhin genau beobachten und intensiv daran arbeiten, Ihr Erlebnis zu verbessern. Vielen Dank für Ihre Geduld und Ihr Verständnis.
16. Januar 2025 10:39 UTC | 16. Januar 2025, 02:39 Uhr PT
Wir haben gegenwärtig ein Problem mit unseren Chatdiensten auf Pod 19, das Sie daran hindert, die letzten Chats anzuzeigen, E-Mails zum Exportieren von Chats zu empfangen und Tickets zu erstellen. Unser Team arbeitet aktiv daran, diese Probleme so schnell wie möglich zu lösen. Vielen Dank für Ihre Geduld.
POST-MORTEM
Ursachenanalyse
Dieser Vorfall wurde dadurch verursacht, dass ein Chatdienst seine Speicherlimits erreichte, was zu einem kontinuierlichen Neustartzyklus führte. Bei jedem Neustart wurden zusätzliche Metadaten in unserer speicherinternen Datenbank generiert. Dies führte zu einer Speichererweiterung, bis das System schließlich keinen Speicher mehr hatte, was sich auf andere Services auswirkte, die dieselbe Datenbankinstanz nutzten.
Lösung
Zur Behebung des Problems entfernte das Team unnötige Metadaten und unbestätigte Schlüssel aus der Datenbank, um Speicher freizugeben. Außerdem wurden die Instanztypen erhöht, um die Arbeitslast zu bewältigen, und das Deployment des Dienstes konnte erfolgreich abgeschlossen werden.
Korrekturelemente
- Warnungen hinzufügen: Implementierte Benachrichtigungen bei Nicht genügend Speicher (zwecks Nicht genügend Speicher) im Chat-Service.
- Speicherlimits anpassen: Schwellenwert für Speicherlimits herabgesetzt, damit früher eingegriffen werden kann, bevor kritische Werte erreicht werden.
- Runbook-Verbesserungen: Erweiterte Dokumentation und Runbooks für den Chat-Dienst und die Verwaltung von Datenbankschlüsseln.
- Datenbank-Clustering: Geplant, die Datenbankinstanzen für unterschiedliche Services zu trennen, um in Zukunft Probleme mit dem Shared Speicher zu vermeiden.
WEITERE INFOS
Weitere Informationen zum aktuellen Systemstatus von Zendesk und zu spezifischen Auswirkungen auf Ihr Konto finden Sie auf der Systemstatusseite. Sie können diesem Beitrag folgen, damit Sie benachrichtigt werden, wenn unser Post-mortem-Bericht veröffentlicht wird. Wenn Sie weitere Fragen zu diesem Vorfall haben, wenden Sie sich an den Zendesk-Kundensupport.
Hinweis zur Übersetzung: Dieser Beitrag wurde mit automatischer Übersetzungssoftware übersetzt, um dem Leser ein grundlegendes Verständnis des Inhalts zu vermitteln. Trotz angemessener Bemühungen, eine akkurate Übersetzung bereitzustellen, kann Zendesk keine Garantie für die Genauigkeit übernehmen.
Sollten in Bezug auf die Genauigkeit der Informationen im übersetzten Beitrag Fragen auftreten, beziehen Sie sich bitte auf die englische Version des Beitrags, die als offizielle Version gilt.
0 Kommentare