まとめ
2023年11月9日午前3時(UTC)から2023年11月10日午前10時(UTC)までの間、米国リージョン(複数のポッド)内のExploreのお客様において、履歴データセットのデータ更新の遅延が発生していました。
提供終了までのスケジュール
19:18 UTC | 11:18 (PT11:18) (11月9日)
米国リージョンのExploreアカウントで現在、履歴データセットのデータ更新の遅延が発生しています。Exploreのクエリおよびレポーティング機能は通常どおり利用でき、リアルタイムデータセットには影響しません。根本原因の調査が現在進行中であるため、遅延がいつ解決されるかについてのETAはありません。
11:27 UTC | 03:27 (PT11月10日)
Exploreの米国地域の履歴データセットのデータ更新の遅延に関する修正を行い、お客様は遅延が発生しないようになっています。今後、この事象を解決済みとしてお知らせいたします。ご協力いただきありがとうございました。
事後のメモ
根本原因分析
このインシデントは、アカウントが実際のサイズよりも小さいと報告されるなど、複数のアカウントのアカウントデータ量に関する正しい情報を提供するアカウントの統計サービスが失敗したことによって発生しました。その結果、Explore ETLシステムは、これらのアカウントの定期的なdelimiterアップデートの処理に必要なリソースよりも少ない計算量を割り当てるようになり、処理が遅くなり、データパイプラインに失敗またはタイムアウトする場合がありました。
解決方法
この問題を修正するために、アカウントの統計サービスは一時的に正しいアカウントデータのフォールバックデータソースに切り替えられました。これにより、Explore ETLシステムの正しいリソース割り当てが復元されました。また、Exploreエンジニアは、データ処理に長い遅延が生じているアカウントのブロックを解除するために、手動でリソースを増やしました。
改善策
- アカウントサイズの分類が急激に増加した場合の追加アラートを作成します。
- パイプラインのリソース割り当ての置き換えを検討する。
- データパイプラインに検証フェーズを追加して、不足しているまたは異常なソースデータを検出します。
詳細情報を表示
Zendeskの現在のシステムステータスについては、 システムステータスページを参照してください。事後調査のまとめは、通常、インシデントが終了してから数日後にこちらに投稿されます。この事象についてさらに ご質問がある場合は、ウィジェット内のZBotメッセージング経由でチケットを記録してください。
翻訳に関する免責事項:この記事は、お客様の利便性のために自動翻訳ソフ トウェアによって翻訳されたものです。Zendeskでは、翻訳の正確さを期すために相応の努力を払っておりますが、翻訳の正確性につ いては保証いたしません。
翻訳された記事の内容の正確性に関して疑問が生じた場合は、正式版である英語の記事 を参照してください。
0件のコメント