ZUSAMMENFASSUNG
Zwischen 08:09 UTC am 7. November 2023 und 2:20 UTC am 21. November 2023 kam es bei Zendesk-Kunden in allen Pods zu Verzögerungen beim Empfang ausgehender E-Mails von Endbenutzern mit Gmail-Adressen oder anderen von Google verwalteten E-Mail-Domänen.
Zeitleiste
19:53 UTC | 11:53 PT (8. November)
Wir haben ein Problem bestätigt, das zu Verzögerungen beim Empfang ausgehender E-Mails für Endbenutzer mit Gmail-Adressen oder von Google verwalteten E-Mail-Domänen führt. Es ist schwer zu diagnostizieren, welche E-Mails betroffen sind. wir arbeiten jedoch mit Google zusammen, um diese Auswirkungen zu minimieren und das Problem so schnell wie möglich zu beheben.
04:23 UTC | 20:23 PST (10. November)
Wir arbeiten weiterhin an mehreren Pfaden (auch mit unseren Partnern bei Google), um die verspätete Zustellung einiger ausgehender E-Mails an von Google verwaltete E-Mail-Domänen einiger Kunden zu diagnostizieren. Die meisten E-Mails werden zwar an diese Domänen gesendet, aber wir erkennen an, dass sich der geringe Anteil verspäteter E-Mails auf einige Funktionen auswirken kann, und arbeiten intensiv daran, dieses Problem der Lösung näher zu bringen. Vielen Dank für Ihr Verständnis, während wir an diesem Problem arbeiten.
20:02 UTC | 12:03 PST (13. November)
Unsere Teams arbeiten noch daran, die Verzögerungen bei der Zustellung abgehender E-Mails an einige von Google verwaltete E-Mail-Domänen zu beheben. Wir werden im Verlauf unserer Untersuchung weitere Informationen bereitstellen und danken Ihnen für Ihre Geduld.
03:18 UTC | 19:18 PT (15. November)
Im Rahmen unserer laufenden Untersuchungen haben wir Maßnahmen ergriffen, um sicherzustellen, dass kein unerwünschter Datenverkehr von unseren Zendesk IP-Adressen aus generiert wird. Wir arbeiten auch aktiv mit unserem E-Mail-Dienstanbieter zusammen, um eventuelle Ratenlimits zu prüfen und aufzuheben. Wir wissen, welche Auswirkungen eine verspätete E-Mail-Zustellung auf Ihren Betrieb haben würde, und prüfen alle Möglichkeiten, um dieses Problem so schnell wie möglich zu lösen. Wir bitten um Ihr Verständnis.
13:10 UTC | 05:10 PT (16. November)
Wir arbeiten weiterhin eng mit unserem E-Mail-Anbieter zusammen, und unser Hauptaugenmerk liegt auf der Überschreitung der Ratenlimits, die sich auf unseren Dienst auswirken. Wir sind uns der erheblichen Auswirkungen einer verspäteten E-Mail-Zustellung auf Ihren Betrieb bewusst und prüfen daher alle möglichen Lösungen, um dieses Problem zu beheben. Wir bedanken uns für Ihr Verständnis und danken Ihnen für Ihre Geduld, während wir an einer Lösung arbeiten.
13:24 UTC | 05:24 PT (17. November)
Keine wesentlichen Änderungen seit unserer letzten Aktualisierung. Wir sind noch in aktiven Gesprächen mit unseren E-Mail-Partnern, um die Ratenlimits für die E-Mail-Zustellung festzulegen und dafür zu sorgen, dass E-Mails so schnell wie möglich wie erwartet verarbeitet und zugestellt werden. Wir rechnen heute während der AMER-Stunden mit detaillierteren Informationen. Wir bitten um Ihre Geduld, während wir an einer Lösung arbeiten.
20:10 UTC | 12:10 PT (17. November)
Wir haben in Zusammenarbeit mit unseren Anbietern einige Fortschritte gemacht und eine Lösung gefunden, die unserer Meinung nach die Verzögerungen bei der Verarbeitung abgehender E-Mails beheben sollte. Seit der Veröffentlichung haben wir eine deutliche Wiederherstellung und Verbesserung festgestellt, und wir hoffen, dass dieser Fortschritt bis zur vollständigen Lösung anhält. Es gibt immer noch einen Rückstand in der Warteschlange, den wir ständig beobachten. Daher kann es zu geringfügigen Verzögerungen kommen, bis der gesamte Rückstand verarbeitet ist. Unsere Teams beobachten die Situation genau. Wir werden weitere Informationen bereitstellen, während wir weiter an der Lösung dieses Vorfalls arbeiten.
23:10 UTC | 15:10 PT (17. November)
Während wir weitere Verbesserungen bei der erfolgreichen Verarbeitungsrate abgehender E-Mails verfolgen und beobachten, werden wir zuversichtlich, dass der heute von Google veröffentlichte Update das in den letzten Tagen aufgetretene Problem lösen kann. Unsere Teams werden ihre Überwachung über das Wochenende hinweg ausdehnen und Anfang nächster Woche daran arbeiten, zusätzliche Maßnahmen zu ergreifen, um die Bearbeitung des bestehenden Rückstands an ausgehende E-Mails zu beschleunigen. Wir planen, am Montag mit unseren Ergebnissen nachzufassen. Vielen Dank für Ihr Verständnis.
22:32 UTC | 14:32 PST (20. November)
Nach Überwachung des Wochenendes können wir immer noch eine verbesserte Erfolgsrate bei der Verarbeitung ausgehender E-Mails an von Google verwaltete E-Mail-Domänen feststellen. Außerdem bestätigen wir, dass die von Google eingeführte Fehlerbehebung das erwartete Verhalten wiederherstellt. Unsere Teams sind dabei, zusätzliche Maßnahmen zu implementieren, um den Rückstand E-Mails zu beschleunigen und sicherzustellen, dass alle ausgehenden Nachrichten empfangen werden. Wir danken Ihnen erneut für Ihr Verständnis und werden im Laufe der Woche weitere Updates senden, um den Vorfall zu beheben.
14:48 UTC | 06:48 PT (21. November)
Wir möchten Ihnen mitteilen, dass der Gmail-Rückstand vollständig verarbeitet wurde. Google setzt keine Ratenbeschränkung mehr ein und alle abgehenden E-Mails werden wie erwartet zugestellt. Wir werden die Überwachung bis zur vollständigen Lösung fortsetzen. Vielen Dank für Ihr Verständnis in dieser Zeit.
16:35 UTC | 8:34 PST (21. November)
Da wir nun den restlichen Gmail-Rückstand behoben haben, können wir davon ausgehen, dass ausgehende E-Mails an von Google verwaltete Domänen erfolgreich zugestellt werden. Aus diesem Grund wird dieser Vorfall nun behoben. Vielen Dank für Ihr Verständnis.
POST-MORTEM
Ursachenanalyse
In der Vergangenheit standen bestimmte IP-Adressen vorübergehend in der Blockierliste. Aus diesem Grund hat Google ein Ratenlimit für den gesamten E-Mail-Verkehr von allen unseren globalen IP-Adressen eingeführt, nicht nur für die in der Blockierliste aufgeführten IP-Adressen.
Lösung
Wir haben mit Google zusammengearbeitet, und das Team von Google konnte eine Lösung anwenden, die die Belastung durch die zuvor angewendete Ratenbeschränkung verringerte.
Korrekturelemente
- Fügen Sie ein internes Ratenlimit zu Google-Domänen hinzu, um den an Gmail gesendeten Datenverkehr genauer zu steuern.
- Erstellen Sie eine Feedbackschleife, die den als Spam markierten Kundenverkehr intelligent analysiert und erneut versucht,
- Releaseprozess verfeinern, um die Auswirkungen von Spam zu minimieren.
- Erstellen Sie neue Warnungen, die sensibler auf Fehlercodes reagieren.
- Verbessern Sie die Spam-Erkennungsfunktionen von Zendesk.
WEITERE INFOS
Aktuelle Systemstatusinformationen zu Ihrem Zendesk finden Sie in unserer Systemstatusseite. Die Zusammenfassung unserer Post-mortem-Untersuchung wird in der Regel hier einige Tage nach Abschluss des Vorfalls gepostet. Wenn Sie weitere Fragen zu diesem Vorfall haben, reichen Sie bitte ein Ticket über ZBot Messaging im Widget ein.
Hinweis zur Übersetzung: Dieser Beitrag wurde mit automatischer Übersetzungssoftware übersetzt, um dem Leser ein grundlegendes Verständnis des Inhalts zu vermitteln. Trotz angemessener Bemühungen, eine akkurate Übersetzung bereitzustellen, kann Zendesk keine Garantie für die Genauigkeit übernehmen.
Sollten in Bezug auf die Genauigkeit der Informationen im übersetzten Beitrag Fragen auftreten, beziehen Sie sich bitte auf die englische Version des Beitrags, die als offizielle Version gilt.
0 Kommentare