概要
2024年11月21日21:02(UTC)から21:56(UTC)にかけて、Pod 17でホストされているSunshine Conversationsをご使用の一部のお客様に、動作の遅延とパフォーマンスの問題が発生しました。
タイムライン
2024年11月24日午後10時23分(UTC) | 2024年11月24日午後02時23分(PT)
一部のお客様のPOD 17におけるSunshine Conversationsに影響するレイテンシーの問題が解消されました。お待たせしました。
2024年11月24日午後10時09分(UTC) | 2024年11月24日午後02時09分(PT)
Pod17をご利用のお客様のSunCoに影響するパフォーマンスの問題の根本原因を特定しました。現在、改善に取り組んでおり、引き続き動作を監視します。
2024年11月24日午後9時53分(UTC) | 2024年11月24日午後1時53分(PT)
ポッド17から引き続きパフォーマンスの問題を調査しています。Sunshine Conversationsの動作が遅くなる場合があります。近日中にお知らせいたします。
2024年11月24日午後9時36分(UTC) | 2024年11月24日午後1時36分(PT)
ポッド17でホストされている一部のお客様に影響する潜在的なパフォーマンスの問題を調査しています。詳細については、近日中に最新情報を投稿します。
POST-MORTEM
根本原因の分析
この事件は、Pod17のトラフィックが予想外に急増したことが原因でした。このトラフィックは、前の週の2倍以上、発生日のほぼ3倍になりました。カスタマーが利用したUnity SDKが、未読メッセージ数を取得するためにSunCo APIに過剰なリクエストを行っていたため、システムの負荷が増加していました。リソースのオートスケーラーはすでに最大容量に達しており、トラフィックの増加を処理するためにリソースを追加することができませんでした。その結果、この過負荷により応答時間が遅くなり、最終的にヘルスチェックが起動して再起動が開始され、問題がさらに複雑になりました。
解決策
パフォーマンスの問題を解決するために、Pod17のSunCo APIのレプリカの最大数を増やしました。この調整により、トラフィックの増加にシステムが適切に対応できるようになり、すべてのカスタマーの応答時間が通常に戻りました。
是正項目
- Unity SDKを調査して、SunCoに大量のリクエストを送信している理由を理解し、最適化を実装します。
- Embeddablesでバックエンドの操作パターンを文書化し、使用状況を明らかにし、潜在的な非効率を特定します。
- リクエストの数を減らすために、SunCoのSDK APIのキャッシュ戦略の実装を評価します。
- 監視を追加して、指定した期間にわたるトラフィックの異常な増加を検出し、潜在的な過負荷にプロアクティブに対応します。
詳細
Zendeskの現在のシステムステータス情報については、システムステータスページをご覧ください。事後調査の概要は、通常、事象が終了してから数日後にここに掲載されます。この事象についてさらにご質問がある場合は、Zendeskカスタマーサポート
翻訳に関する免責事項:この記事は、お客様の利便性のために自動翻訳ソフ トウェアによって翻訳されたものです。Zendeskでは、翻訳の正確さを期すために相応の努力を払っておりますが、翻訳の正確性につ いては保証いたしません。
翻訳された記事の内容の正確性に関して疑問が生じた場合は、正式版である英語の記事 を参照してください。
0件のコメント