まとめ
2023年11月7日08:09(UTC)から2023年11月21日2:20(UTC)までの間、Zendeskのすべてのポッドで、Gmailアドレス、またはその他のGoogle管理のメールドメインを持つエンドユーザーへの送信メール受信に遅延が発生しました。
提供終了までのスケジュール
19:53 UTC | 11:53PT(11月8日)
GmailアドレスまたはGoogle管理のメールドメインを持つエンドユーザーに対して、送信メール受信に遅延を引き起こす問題を確認しています。どのメールが影響を受けているかを診断することは困難です。できるだけ早く問題を解決できるようにGoogleと協力しています。
04:23 UTC | 20:23 (PT11月10日)
Zendeskでは、一部のカスタマーについて、Googleの管理対象のメールドメインへの送信メールの配信が遅延している問題について、複数のパス(Googleのパートナーとの協力を含む)を継続的に診断しています。大半のメールはこれらのドメインに配信されていますが、一部の遅延メールが機能に与える影響を認識しており、この問題を解決に近付けるために懸命に取り組んでいます。引き続きこの問題の解決に取り組んでいきますので、ご理解のほどよろしくお願いいたします。
20:02 UTC | 12:03 (PT11月13日)
現在、Zendeskのサポートチームは、一部のGoogle管理メールドメインへの送信メール配信の遅延に対処するために、解決に向けて鋭意取組みを行っています。調査の進捗に合わせて追加情報を提供いたします。それまでの間、ご理解とご協力をよろしくお願いいたします。
03:18 UTC | 19:18(PT11月15日)
継続的な調査の一環として、Zendeskの発信IPアドレスから望ましくないトラフィックが生成されていないことを確認するための対策を講じています。また、Zendeskはメールサービスプロバイダーと積極的に協力して、課されたAPI制限を検討し、提供しています。メール配信の遅延がお客様の業務に与える影響を理解しており、できるだけ迅速に問題を解決できるように、すべての手段を検討しています。ご理解いただくようお願いいたします。
13:10 UTC | 05:10 (PT11月16日)
Zendeskは引き続きメールサービスプロバイダーと密接に連携し、Zendeskのサービスに影響を与える可能性のある制限に対処することに重点を置いています。メール配信の遅延はお客様の業務に重大な影響を与える可能性があるため、Zendeskではこの問題を修正するためにあらゆる解決策を検討し続けています。ご理解のほどよろしくお願いいたします。
13:24 UTC | 05:24 (PT11月17日)
前回のアップデート以降、大きな変更はありません。Zendeskでは、メール配信のレート制限に対処し、できるだけ早くメールを処理し配信できるようにするために、メールパートナーと積極的に話し合っています。本日の午前時間内に、より詳細な情報をお知らせする予定です。解決に向けて取り組んでまいりますので、ご理解いただけますでしょうか。
20:10 UTC | 12:10(PT11月17日)
プロバイダーとの連携により、送信メールを処理する遅延に対処できる解決策が見つかりました。リリース以降、重要な回復と改善が見られました。この進歩は、完全な解決まで続くものと期待されています。なお、バックログのキューが継続的に表示されており、すべてのバックログが処理されるまで、わずかな遅延が生じる可能性があります。当社のチームは状況を注意深く監視しており、この事象の解決に向けて引き続き追加情報を提供していきます。
23:10 UTC | 15:10(PT11月17日)
正常な送信メール処理率のさらなる改善を追跡および観察することで、Googleが本日リリースした修正プログラムで最近発生した問題を解決できると確信しています。当社のチームは、送信メールの既存の未解決のチケットを迅速に処理するための追加の措置について、週末を通してさらに迅速に対応する予定です。この結果については月曜日にフォローアップする予定です。ご理解とご協力をよろしくお願いいたします。
22:32 UTC | 14:32 (PT11月20日)
週末を通して監視したところ、Google管理のメールドメインへの送信メール処理の成功率がまだ改善されており、さらにGoogleがリリースした修正プログラムにより、予想される動作が復元されていることも確認されています。Zendeskのチームは、未解決のチケットの空注を促進し、すべての送信メッセージが受信されるようにするための追加の対策を実施する作業を完了しています。調査にご理解とご協力をいただいたことに深く感謝いたします。また、週が決まりましたら、本事象の解決に向けて、さらに詳しい情報をお知らせいたします。
14:48 UTC | 06:48 (PT11月21日)
Gmailの未解決チケットが完全に処理されたことをお知らせいたします。Googleによるレート制限はなくなり、すべての送信メールが期待どおりに配信されるようになりました。完全に解決するまで監視を続けます。この期間については、ご理解のほどよろしくお願いいたします。
16:35 UTC | 8:34 (PT11月21日)
Gmailの未解決のチケットの残り件について、当社のチームはGoogleの管理するドメインへの送信メールの継続的な配信に確信を持っています。したがって、この問題は解決されるでしょう。ご理解とご協力をよろしくお願いいたします。
事後のメモ
根本原因分析
過去に、ZendeskのIPアドレスのサブセットが、しばらくの間ブロックリストに登録されたことがあります。その結果、Googleはブロックリストに記載されているIPアドレスのサブセットだけでなく、すべてのグローバルIPから発信されるすべてのメールトラフィックにAPI制限を適用しました。
解決策
Googleと作業し、Googleのチームが以前に適用されていたAPI制限による負担を軽減する修正を適用することができました。
改善策
- Gmailへ送信するトラフィックをより正確に制御するために、Googleドメインに内部API制限を追加します。
- スパムとしてマークされたカスタマートラフィックをインテリジェントに分析して再試行するフィードバックループを作成します。
- スパムの影響を軽減するリリースプロセスを改善する。
- エラーコードに応答する新しいアラートを作成します。
- Zendeskのスパム検出機能を改善します。
詳細情報を表示
Zendeskの現在のシステムステータスについては、を参照してください。 システムステータスページ。 事後調査のまとめは、通常、インシデントが終了してから数日後にこちらに投稿されます。この事象についてさらにご質問がある場合は、 ZBotメッセージング経由でZBotメッセージングを使用してチケットをウィジェットに記録してください。
翻訳に関する免責事項:この記事は、お客様の利便性のために自動翻訳ソフ トウェアによって翻訳されたものです。Zendeskでは、翻訳の正確さを期すために相応の努力を払っておりますが、翻訳の正確性につ いては保証いたしません。
翻訳された記事の内容の正確性に関して疑問が生じた場合は、正式版である英語の記事 を参照してください。
0件のコメント