요약
2024년 12월 1일 오후 4시(UTC)부터 12월 3일 오전 20시(UTC)까지 여러 POD의 Sell 고객에게 스마트 목록의 데이터 표시 대상, 거래 생성 시 리드 전환, 발신 전화를 포함한 기능에 문제가 발생했습니다. 개의 오류가 발생했습니다. 기능이 복원된 후에는 요청 백로그를 처리해야 했고, 이 작업이 완료되는 데 2024년 12월 18일 16:22(UTC)까지 걸렸습니다.
타임라인
2024년 12월 18일 오후 4:22(UTC) | 2024년 12월 18일 오전 8시 22분(태평양 표준시)
영향을 받는 기간 동안 누락되었거나 영향을 받은 Sell 데이터를 다시 처리하는 동안 기다려 주셔서 감사합니다. 현재 모든 데이터가 정확해야 합니다. 문제가 계속 발생하면 문의하세요.
2024년 12월 13일 오후 11:26(UTC) | 2024년 12월 13일 오후 3시 26분(태평양 표준시)
Zendesk 엔지니어링 팀은 영향을 받는 기간 동안 누락되었거나 영향을 받은 Sell 데이터를 다시 채우고 다시 처리하는 데 상당한 진전을 이루었습니다. 하지만 백필을 위해 더 많은 수동 개입이 필요한 요청의 일부 하위 집합은 여전히 남아 있습니다. 모든 데이터가 적절한 위치에 도달하도록 하기 위해 추가적인 시간과 노력을 기울이고 있으며, 다음 주에 완전한 복구를 확인하는 작업을 계속할 것입니다. 그동안 기다려 주셔서 감사합니다.
2024년 12월 9일 오후 10:16(UTC) | 2024년 12월 6일 오후 2:16(태평양 표준시)
Zendesk 팀은 영향을 받는 기간 동안 영향을 받은 Sell 데이터를 다시 채우기 위해 계속 노력하고 있습니다. 하지만 정확한 데이터가 정확하게 포함되도록 하기 위한 Zendesk의 노력과 노력을 감안할 때 완료하는 데 시간이 좀 더 걸릴 수 있습니다. 채우기가 진행됨에 따라 추가 업데이트를 제공할 것입니다.
2024년 12월 6일 오후 2:06(UTC) | 2024년 12월 6일 오전 6시 06분(태평양 표준시)
2024년 12월 3일에 Sell 고객에게 영향을 미치는 사건에 대한 업데이트를 제공하고자 합니다. Zendesk 팀은 인시던트 동안 발생한 데이터 백로그를 통해 계속 작업합니다. 가능한 빨리 업데이트를 계속 제공하겠습니다.
2024년 12월 4일 오전 10:27(UTC) | 2024년 12월 4일 오전 2시 27분(태평양 표준시)
Zendesk 팀은 어제의 사건으로 인해 발생한 작업 백로그에 대한 가장 효과적인 접근 방식을 적극적으로 모색하고 있습니다. 추가 업데이트가 제공되는 대로 공유해 드리겠습니다.
2024년 12월 3일 오후 11:44(UTC) | 2024년 12월 3일 오후 3시 44분(태평양 표준시)
Zendesk 엔지니어링 팀에서 Sell 기능을 안정화했으며 현재 새 요청이 예상대로 처리되고 있습니다. 영향이 미치는 기간 동안 시간이 초과되었을 수 있는 요청을 처리할 수 있는 옵션을 모색 중이며 내일 이 조사가 계속되면 추가 정보를 제공하겠습니다.
2024년 12월 3일 오후 9시 47분(UTC) | 2024년 12월 3일 오후 1:47(태평양 표준시)
Zendesk 팀은 백로그를 줄이고 예상되는 Sell 기능을 복원하기 위해 계속 노력하고 있습니다. 복구 속도를 높이기 위해 수용 능력을 늘리기 위해 노력하고 있지만 약간의 지연 시간과 지연이 예상됩니다. 공유할 새 정보가 있으면 추가 업데이트를 제공하겠습니다.
2024년 12월 3일 오후 5시 09분(UTC) | 2024년 12월 3일 오전 9시 09분(태평양 표준시)
Sell에 영향을 미치는 문제가 일부 개선되기 시작했습니다. 하지만 해결하기 위해 노력하고 있는 상당한 백로그가 있으며 약간의 지연 시간이 여전히 발생할 수 있습니다. 완전히 복구될 수 있도록 상황을 계속 모니터링하겠습니다.
2024년 12월 3일 오후 3시 35분(UTC) | 2024년 12월 3일 오전 7시 35분(태평양 표준시)
Zendesk 팀은 현재 Sell에 영향을 미치는 문제를 해결하기 위해 계속 노력하고 있습니다. 이러한 문제는 스마트 목록의 데이터 표시 대상, 거래 생성 시 리드 전환 및 간헐적인 발신 전화 실패 문제로 나타날 수 있습니다. 추가 업데이트가 있으면 제공해 드리겠습니다.
2024년 12월 3일 오후 2:01(UTC) | 2024년 12월 3일 오전 6:01(태평양 표준시)
스마트 목록의 데이터 표시 대상, 거래 생성 시 리드 전환, 간헐적인 발신 전화 실패를 포함하여 특정 기능에 영향을 미치는 지속적인 문제에 대해 알려드립니다. 현재로서는 새로운 개발 내용을 공유할 수 없지만 가능한 한 빨리 문제를 해결하기 위해 최선을 다하고 있습니다.
2024년 12월 3일 오후 12:14(UTC) | 2024년 12월 3일 오전 4시 14분(태평양 표준시)
Zendesk 팀은 특정 기능에 영향을 미치는 서비스 저하 문제를 적극적으로 해결하고 있습니다. 현재 스마트 목록의 데이터 표시 대상, 거래를 만드는 데 따른 리드 전환 및 발신 전화가 영향을 받으며, 후자는 간헐적인 오류가 발생합니다. 대부분의 핵심 서비스는 계속 작동하지만 일부 문제는 종종 다시 로드하거나 다시 시도하여 해결될 수 있습니다.
2024년 12월 3일 오전 11:23(UTC) | 2024년 12월 3일 오전 3시 23분(태평양 표준시)
Zendesk 팀은 스마트 목록의 데이터 가시성 및 거래 생성을 통한 리드 전환을 포함하여 특정 기능에 영향을 미치는 서비스 저하 문제를 적극적으로 해결하고 있습니다. 대부분의 핵심 서비스는 계속 작동하며, 일부 기능의 문제는 종종 다시 로드하거나 다시 시도하여 해결될 수 있습니다.
2024년 12월 3일 오전 10:53(UTC) | 2024년 12월 3일 오전 2시 53분(태평양 표준시)
현재 시스템에 오래된 데이터가 나타날 수 있는 문제를 조사 중입니다. 또한 이 시간 동안 데이터를 업데이트하려고 시도하면 오류가 발생할 수 있습니다. Zendesk 팀은 이러한 문제를 우선적으로 해결하기 위해 최선을 다하고 있습니다.
사후
근본 원인 분석
이 사건은 요청 양이 갑자기 증가하여 Sell 인프라 전반에서 높은 메모리 사용량으로 이어지면서 발생했습니다. 그 결과 과도한 로드로 인해 알림이 표시되었고 여러 대기열이 최대 수용 능력까지 채워졌습니다. 이러한 요청 플로우를 관리하는 시스템이 자주 다시 시작되었고 수요를 따라잡지 못하여 백로그가 증가하고 새 요청을 처리하지 못하게 되었습니다.
해결
이 문제를 해결하기 위해 먼저 인프라를 추가로 확장하려고 시도했지만 곧 수용 능력이 가득 찼습니다. 그런 다음 라이브 트래픽을 효과적으로 관리하기 위해 추가 리소스로 새 클러스터를 설정했습니다. 이로써 운영을 안정화하고 정상적인 기능을 복원하는 동시에 이전 인프라에서 요청 백로그를 정리하는 작업을 할 수 있었습니다.
수정 항목
- 오래된 알림 대기열 제거: 고객 커뮤니케이션에 필요하지 않은 불필요한 알림 대기열을 없애기로 결정했습니다. 이로써 관련 인프라에서 처리하는 요청 수가 줄어듭니다.
- 향상된 메시지 처리 도구: 메시지 처리 효율성을 높이기 위해 기존 도구를 개선하여 요청을 처리할 수 있는 더 많은 용량을 제공했습니다.
- 추가 알림 설정: 시스템 성능을 추적하고 높은 메모리 사용량을 방지하기 위해 새 모니터링 알림이 만들어졌습니다.
- 연결 제한 설정: 과부하를 방지하고 보다 원활한 트래픽 관리를 보장하기 위해 특정 애플리케이션에 대한 연결 수를 제한했습니다.
자세한 정보
Zendesk에 대한 현재 시스템 상태 정보는시스템 상태 페이지를참조하세요. 사후 조사 요약은 보통 인시던트가 종료되고 며칠 후 여기에 게시됩니다. 이 인시던트에 대한 추가 질문이 있으면Zendesk 고객 지원팀에 문의하세요.
번역 고지 사항: 본 문서는 콘텐츠에 대한 기본적인 이해를 제공하기 위해 자동 번역 소프트웨어를 사용하여 번역되었습니다. 정확한 번역을 제공하고자 합당한 노력을 기울였으나 Zendesk는 번역의 정확성을 보장하지 않습니다.
번역된 문서에 포함된 정보의 정확성과 관련하여 질문이 있으시면 문서의 공식 버전인 영문 버전을 참조하시기 바랍니다.
댓글 0개