最近の検索


最近の検索はありません

Dan Beirouty's Avatar

Dan Beirouty

参加日2021年4月14日

·

前回のアクティビティ2025年1月07日

Zendesk Employee

フォロー中

0

フォロワー

6

合計アクティビティ

218

投票

14

受信登録

161

アクティビティの概要

さんの最近のアクティビティ Dan Beirouty

Dan Beiroutyさんがコメントを作成しました:

コメントService notifications

Postmortem published January 7, 2025.

コメントを表示 · 投稿日時:2025年1月07日 · Dan Beirouty

0

フォロワー

0

投票

0

コメント


Dan Beiroutyさんがコメントを作成しました:

コメントService notifications

Post-mortem published December 19, 2024.

コメントを表示 · 投稿日時:2024年12月19日 · Dan Beirouty

0

フォロワー

0

投票

0

コメント


Dan Beiroutyさんが記事を作成しました:

記事サービスに関するお知らせ

概要
2024
年12月16日1:16(UTC)から4:44(UTC)にかけて、Tymeshiftとワークフォースマネジメントの一部のお客様にエラーとアクセスの問題が発生しました。

タイムライン

2024年12月16日午前5時25分(UTC) | 2024年12月15日午後9時25分(PT)
Tymeshiftとワークフォースマネジメントのアクセス問題が解決されました。本日は、この問題を処理いたします。

2024年12月16日04:51 AM UTC | 2024年12月15日08:51 PM PT
Tymeshift/ワークフォースマネジメントに影響する潜在的な問題の原因を特定し、修正プログラムを導入しました。現在、システムの復旧を監視しています。サポートチームにチケットがある場合は、チケットに返信して、改善点を報告してください。

2024年12月16日03:44 AM UTC | 2024年12月15日07:44 PM PT
複数のポッドにわたってTymeshiftとワークフォースマネジメントに影響するアクセス エラーの調査を続けています。新しい情報が入り次第、次のアップデートを提供します。この問題に取り組むまで、しばらくお待ちください。

2024年12月16日03:01 AM UTC | 2024年12月15日07:01 PM PT
Tymeshiftとワークフォースマネジメントでエラーとアクセスの問題が報告されました。当社のチームは、この問題を最優先で調査しています。詳細については、近日中にお知らせいたします。


POST-MORTEM

根本原因の分析

事象の根本原因は、社内サービスのプリペアドステートメントを適切に終了または割り当て解除できなかったことにあります。調査中の特定のケースでは、準備されたステートメントがデータベースの上限に達するほど蓄積され、応答しなくなります。

解決策

事象を解決するために、チームは、恒久的な修正が展開できるまで問題が再発しないように、影響を受けるサービスを毎日再展開するようにスケジュールすることで、一時的な回避策を実装しました。このアプローチにより、根本的な原因を徹底的に調査しながら、システムの機能を取り戻すことができました。

是正項目

  1. 準備済みステートメントの調査:詳細な調査を行い、準備されたステートメントが適切に終了または割り当て解除されなかった理由を特定し、修正を実施します。
  2. 監視とアラートの実装:準備されたステートメントの数が上限に近づいたことを検出するモニターとアラートを開発して実装します。
  3. Review Error Monitor Thresholds:エラー監視のしきい値を見直して調整し、将来同様の問題をタイムリーに検出できるようにします。
  4. 繰り返しの防止:問題が再発しないように、永続的な修正が実装されるまで、サービスの再展開を毎日スケジュールします。
  5. リソースの割り当てを増やす:US1 Tymeapp TymeShift本番インスタンスのCPUとメモリの割り当てを増やして、高負荷を処理します。


予防措置

今後同様の事象が発生しないよう、以下の対策を実施します。

  1. コードレビューを強化し、準備されたステートメントの適切な管理を確保します。
  2. 堅牢な監視システムを実装し、サービス停止につながる前に潜在的な問題を検出し、チームに警告することができます。
  3. データベースのパフォーマンスとリソース使用率を定期的に監査します。


詳細情報

Zendeskに関する現在のシステムステータス情報とアカウントへの具体的な影響については、システムステータスページをご覧ください。この記事をフォローして、事後レポートが公開されたときに通知を受け取ることができます。この事象についてさらにご質問がある場合は、Zendeskカスタマーサポート

翻訳に関する免責事項:この記事は、お客様の利便性のために自動翻訳ソフ トウェアによって翻訳されたものです。Zendeskでは、翻訳の正確さを期すために相応の努力を払っておりますが、翻訳の正確性につ いては保証いたしません。

翻訳された記事の内容の正確性に関して疑問が生じた場合は、正式版である英語の記事 を参照してください。

編集日時:2024年12月20日 · Dan Beirouty

0

フォロワー

1

投票

0

コメント


Dan Beiroutyさんが記事を作成しました:

記事サービスに関するお知らせ

概要
2024
年12月11日23:39(UTC)から12日6:30(UTC)にかけて、高度なAI、Talk、AIエージェント、その他の生成AI機能などのZendesk AI機能をご利用のお客様に、サービスプロバイダーのサービス停止による機能停止が発生しました。

タイムライン

2024年12月12日04:05 AM UTC | 2024年12月11日08:05 PM PT
すべてのAI機能のリカバリを監視しており、完全なリカバリのために引き続きシステムを監視しています。システムが完全に安定したら、最終的なアップデートを提供できることを楽しみにしています。

2024年12月12日午前1時53分(UTC) | 2024年12月11日午後5時53分(PT)
当社のチームは、Zendesk AI機能に影響を与える問題について、サービス プロバイダーと協力してきました。影響は、高度なAI、Talk、AIエージェント、その他の生成AI機能を通じて確認できる場合があります。最初の試行で問題が解決できなかったため、チームはこの問題の解決を最優先事項として取り組み続けています。アップデートが利用可能になり次第、お知らせいたします。


POST-MORTEM

根本原因の分析

事象の根本原因は、大規模なクラスタ間でサービスプロバイダーのAPIに予期しない大量の負荷を発生させたテレメトリサービスの新しい設定にあります。この過負荷により、DNSベースのサービス検出が過負荷になり、当社のプロバイダーのサービスへのリクエストが失敗しました。

解決策

サービスプロバイダが問題を特定し、APIの負荷を軽減する是正措置を実施すれば、事象は解決しました。Zendeskは、インシデント発生後も当社のサービスプロバイダと連絡を取り合い、連携のとれた対応を確保しています。

是正項目

  1. LLMサービスチームとのサポートレベルアグリーメント:社内のカスタマーと協力して、パフォーマンスと可用性の期待を理解し、フォールバック戦略の提案や監視のしきい値の調整に役立ちます。
  2. 生成AI機能のフォールバック戦略:GenAI機能のフォールバック戦略を策定します。これには、プロキシシステムに機能を追加し、機能オーナーと協力して、それぞれのケースに最適な戦略を決定することが含まれます。
  3. サービスプロバイダのプレミアムサポート:インシデント発生時の迅速な解決とサポートを確保するために、サービスプロバイダーからの追加サポートを交渉します。

予防措置

今後、同様の事象が発生しないように、以下の対策を実施します。

  • APIの異常な負荷をより適切に検出するために、監視およびアラートシステムを強化します。
  • インシデント発生時に迅速に対応できるように、Zendeskのサービスプロバイダーとより明確なコミュニケーションチャネルとサポート契約を確立します。
  • 重要なAI機能のフォールバック戦略を実装し、プロバイダーが停止している間もサービスの可用性を維持します。

詳細

Zendeskに関する現在のシステムステータス情報とアカウントへの具体的な影響については、システムステータスページをご覧ください。この記事をフォローして、事後レポートが公開されたときに通知を受け取ることができます。この事象についてさらにご質問がある場合は、Zendeskカスタマーサポート

翻訳に関する免責事項:この記事は、お客様の利便性のために自動翻訳ソフ トウェアによって翻訳されたものです。Zendeskでは、翻訳の正確さを期すために相応の努力を払っておりますが、翻訳の正確性につ いては保証いたしません。

翻訳された記事の内容の正確性に関して疑問が生じた場合は、正式版である英語の記事 を参照してください。

編集日時:2024年12月20日 · Dan Beirouty

0

フォロワー

1

投票

0

コメント


Dan Beiroutyさんがコメントを作成しました:

コメントService notifications

Post-mortem published November 21. 2024.

コメントを表示 · 投稿日時:2024年11月21日 · Dan Beirouty

0

フォロワー

0

投票

0

コメント


Dan Beiroutyさんがコメントを作成しました:

コメントService notifications

Post-mortem published November 18, 2024.

コメントを表示 · 投稿日時:2024年11月18日 · Dan Beirouty

0

フォロワー

0

投票

0

コメント


Dan Beiroutyさんがコメントを作成しました:

コメントService notifications

Post-mortem published November 14, 2024.

コメントを表示 · 投稿日時:2024年11月14日 · Dan Beirouty

0

フォロワー

0

投票

0

コメント


Dan Beiroutyさんがコメントを作成しました:

コメントService notifications

Post-mortem published November 1, 2024.

コメントを表示 · 投稿日時:2024年11月01日 · Dan Beirouty

0

フォロワー

0

投票

0

コメント


Dan Beiroutyさんが記事を作成しました:

記事サービスに関するお知らせ

Zendeskは、2024年11月14日(木)に以下の時間帯に、すべてのポッドでZendesk Twitterインテグレーションをご利用のお客様のパフォーマンスに影響を与える重要なメンテナンスを行います。

影響を受けた製品:Twitterインテグレーション とSunshine Conversationsの Twitter DMチャネル

重要:前述のTwitterインテグレーションを有効にしているお客様のみが影響を受けます。
影響を受けたカスタマー:Zendesk Twitterのすべてのポッドのお客様には、8時間のメンテナンス期間内のいずれかの時点 で少なくとも2時間のサービス停止が 発生します。

日付

ポッド

開始時刻

終了時刻

2024年11月14日

全て

21:00 UTC /
13:00(PST)

05:00 UTC (11月15日) /
21:00(PST)

期待される動作

メンテナンス期間中は、以下の機能が利用できません。

  • Twitterダイレクトメッセージ 
  • Twitterの投稿とコメント
  • 管理者は、既存のTwitterアカウントを追加したり管理したりすることはできません。
  • 「Twitterのターゲット」アクションで設定されたトリガは、Twitterにメッセージを投稿しません。

メンテナンス期間中は、Twitterからのコメント、投稿、ダイレクトメッセージは受信されません。また、管理者はZendeskでTwitterアカウントを更新または追加することはできません。

メンテナンス期間が終了すると、Zendeskはメンテナンス期間中のすべての投稿とメッセージを取得し、アカウントに表示します。

この演習では、カスタマーのトラフィックが最も少ない時間帯が選択されており、変更または指定することはできません。ご理解のほどよろしくお願いいたします。

変更を行う理由:Zendesk Integrationsチームは、Twitterインテグレーションのセキュリティを向上させるための変更を行っています

翻訳に関する免責事項:この記事は、お客様の利便性のために自動翻訳ソフ トウェアによって翻訳されたものです。Zendeskでは、翻訳の正確さを期すために相応の努力を払っておりますが、翻訳の正確性につ いては保証いたしません。

翻訳された記事の内容の正確性に関して疑問が生じた場合は、正式版である英語の記事 を参照してください。

編集日時:2024年10月31日 · Dan Beirouty

0

フォロワー

1

投票

0

コメント


Dan Beiroutyさんがコメントを作成しました:

コメントService notifications

Post-mortem published October 25, 2024.

コメントを表示 · 投稿日時:2024年10月25日 · Dan Beirouty

0

フォロワー

0

投票

0

コメント