まとめ
2024年8月7日17:00UTCから2024年8月8日16:45(UTC)まで、ポッド17、18、28、29の一部のお客様で、Explore機能を使用して新しいレポートを作成しようとしたときにエラーが発生しました。これにより、インサイトを生成し、重要なデータレポートにアクセスする機能に影響が出ました。
提供終了までのスケジュール
2024年8月8日午後03時35分(UTC) | 2024年8月8日午前8時35分(PT)
Zendeskでは、多数のデータセットを持つExploreユーザーについて、新しいレポートやデータセットを作成できないという報告を受け、調査を行っています。回避策として、既存のレポートを複製し、そのレポートを編集することで新しいレポートを作成できますが、まだ新しいデータセットを作成することはできません。次の更新は30分以内、または新しい情報があったときに行います。
2024年8月8日 午後4時00分(UTC) | 2024年8月8日午前9時00分(PT)
Zendeskのエンジニアは、新しいExploreレポートとデータセットの作成機能に影響を与える問題の調査を継続しています。影響の範囲をポッド17、18、28、29、31に絞りました。次の更新は1時間後または新しい情報があったときに行います。
2024年8月8日 04:54 PM UTC | 2024年8月8日午前9時54分(PT)
Zendeskのエンジニアは、新しいExploreレポートとデータセットの作成に影響する問題の解決に重点を置いています。2時間以内、または新しい情報が得られたときに、次のアップデートを提供します。
2024年8月8日 午後05時21分(UTC) | 2024年8月8日午前10時21分(PT)
当社のエンジニアが修正をロールアウトし、新しいレポートとデータセットを作成できるようになったことを確認しました。問題は完全に解決されています。問題が引き続き発生する場合はお知らせください。
事後のメモ
根本原因分析
このインシデントは、Zendeskのパートナーが提供したデータベースインフラストラクチャへのアップグレード後にパフォーマンスが低下したことが原因です。このアップグレードにより、以前のシステムが依存していたクエリキャッシュが削除され、Explore機能に重要な特定のクエリの処理が大幅に遅くなりました。
解決策
この問題を解決するために、問題のあるクエリを分析し、効果的なインデックス戦略を導入しました。この迅速なアクションにより、クエリのパフォーマンスが予想されるレベルに回復し、カスタマーが発生していたエラーが解決されました。
改善策
- SQLクエリのレイテンシを中心とした特定のアラートを使って監視システムを改善し、パフォーマンスの問題を早期に発見する。
- クエリキャッシュの提供終了を他のチームに伝え、潜在的な影響を認識させ、先回りして対策を講じることができるようにする。
- 新しいデータベースバージョンに合わせて「not in」ステートメントをブール値に置き換えて、クエリの最適化を調査する。
- 将来同じような問題が発生しないように、繰り返しのクエリ結果にエラーセグメントまたはProxySQLを使用してキャッシュソリューションの実装を調査する。
- すべての変更、改善、プロセスをConfluenceの中で徹底的に文書化し、ナレッジを共有し、今後の同様のイベントに備えます。
詳細情報を表示
Zendeskの現在のシステムステータスについては、 システムステータスページを参照してください。事後調査のまとめは、通常、インシデントが終了してから数日後にこちらに投稿されます。この事象についてさらにご質問がある場合は、Zendeskカスタマーサポートにお問い合わせください。
翻訳に関する免責事項:この記事は、お客様の利便性のために自動翻訳ソフ トウェアによって翻訳されたものです。Zendeskでは、翻訳の正確さを期すために相応の努力を払っておりますが、翻訳の正確性につ いては保証いたしません。
翻訳された記事の内容の正確性に関して疑問が生じた場合は、正式版である英語の記事 を参照してください。