概要
2024年12月16日1:16(UTC)から4:44(UTC)にかけて、Tymeshiftとワークフォースマネジメントの一部のお客様にエラーとアクセスの問題が発生しました。
タイムライン
2024年12月16日午前5時25分(UTC) | 2024年12月15日午後9時25分(PT)
Tymeshiftとワークフォースマネジメントのアクセス問題が解決されました。本日は、この問題を処理いたします。
2024年12月16日04:51 AM UTC | 2024年12月15日08:51 PM PT
Tymeshift/ワークフォースマネジメントに影響する潜在的な問題の原因を特定し、修正プログラムを導入しました。現在、システムの復旧を監視しています。サポートチームにチケットがある場合は、チケットに返信して、改善点を報告してください。
2024年12月16日03:44 AM UTC | 2024年12月15日07:44 PM PT
複数のポッドにわたってTymeshiftとワークフォースマネジメントに影響するアクセス エラーの調査を続けています。新しい情報が入り次第、次のアップデートを提供します。この問題に取り組むまで、しばらくお待ちください。
2024年12月16日03:01 AM UTC | 2024年12月15日07:01 PM PT
Tymeshiftとワークフォースマネジメントでエラーとアクセスの問題が報告されました。当社のチームは、この問題を最優先で調査しています。詳細については、近日中にお知らせいたします。
POST-MORTEM
根本原因の分析
事象の根本原因は、社内サービスのプリペアドステートメントを適切に終了または割り当て解除できなかったことにあります。調査中の特定のケースでは、準備されたステートメントがデータベースの上限に達するほど蓄積され、応答しなくなります。
解決策
事象を解決するために、チームは、恒久的な修正が展開できるまで問題が再発しないように、影響を受けるサービスを毎日再展開するようにスケジュールすることで、一時的な回避策を実装しました。このアプローチにより、根本的な原因を徹底的に調査しながら、システムの機能を取り戻すことができました。
是正項目
- 準備済みステートメントの調査:詳細な調査を行い、準備されたステートメントが適切に終了または割り当て解除されなかった理由を特定し、修正を実施します。
- 監視とアラートの実装:準備されたステートメントの数が上限に近づいたことを検出するモニターとアラートを開発して実装します。
- Review Error Monitor Thresholds:エラー監視のしきい値を見直して調整し、将来同様の問題をタイムリーに検出できるようにします。
- 繰り返しの防止:問題が再発しないように、永続的な修正が実装されるまで、サービスの再展開を毎日スケジュールします。
- リソースの割り当てを増やす:US1 Tymeapp TymeShift本番インスタンスのCPUとメモリの割り当てを増やして、高負荷を処理します。
予防措置
今後同様の事象が発生しないよう、以下の対策を実施します。
- コードレビューを強化し、準備されたステートメントの適切な管理を確保します。
- 堅牢な監視システムを実装し、サービス停止につながる前に潜在的な問題を検出し、チームに警告することができます。
- データベースのパフォーマンスとリソース使用率を定期的に監査します。
詳細情報
Zendeskに関する現在のシステムステータス情報とアカウントへの具体的な影響については、システムステータスページをご覧ください。この記事をフォローして、事後レポートが公開されたときに通知を受け取ることができます。この事象についてさらにご質問がある場合は、Zendeskカスタマーサポート
翻訳に関する免責事項:この記事は、お客様の利便性のために自動翻訳ソフ トウェアによって翻訳されたものです。Zendeskでは、翻訳の正確さを期すために相応の努力を払っておりますが、翻訳の正確性につ いては保証いたしません。
翻訳された記事の内容の正確性に関して疑問が生じた場合は、正式版である英語の記事 を参照してください。
0件のコメント