요약
2024년 12월 16일(UTC) 1:16부터 4:44(UTC)까지 일부 Tymeshift 및 Workforce Management 고객에게 오류 및 액세스 문제가 발생했습니다.
타임라인
2024년 12월 16일 오전 5:25(UTC) | 2024년 12월 15일 오후 9:25(태평양 표준시)
이제 Tymeshift 및 인력 관리 액세스 문제가 해결되었음을 알려드립니다. 오늘 이 문제를 해결하는 동안 기다려 주셔서 감사합니다.
2024년 12월 16일 오전 4:51(UTC) | 2024년 12월 15일 오후 8:51(태평양 표준시)
Tymeshift/인력 관리에 영향을 미치는 문제의 잠재적 원인을 파악하여 수정 프로그램을 배포했습니다. 현재 복구를 위해 시스템을 모니터링하고 있습니다. Zendesk 지원팀에 티켓이 있으면 답장하여 개선 사항을 보고해 주세요.
2024년 12월 16일 오전 03:44(UTC) | 2024년 12월 15일 오후 7:44(태평양 표준시)
여러 POD에서 Tymeshift 및 인력 관리에 영향을 미치는 액세스 오류를 계속 조사하고 있습니다. 공유할 새 정보가 있으면 다음 업데이트를 제공하겠습니다. 이 문제를 해결하는 동안 기다려 주셔서 감사합니다.
2024년 12월 16일 오전 3:01(UTC) | 2024년 12월 15일 오후 7:01(태평양 표준시)
Tymeshift 및 인력 관리의 오류 및 액세스 문제에 대한 보고를 받았습니다. 저희 팀은 가장 높은 우선 순위에서 이 문제를 조사하고 있습니다. 곧 더 많은 정보를 제공할 예정입니다.
사후
근본 원인 분석
인시던트의 근본 원인은 내부 서비스에서 준비된 문을 제대로 닫거나 할당 취소하지 못한 것으로 확인되었습니다. 아직 조사가 진행 중인 특정 경우에는 준비된 문이 데이터베이스 한도에 도달하여 응답을 중지하는 지점까지 누적되었습니다.
해결
인시던트를 해결하기 위해 팀은 영구적인 수정 프로그램이 배포될 때까지 문제가 다시 발생하지 않도록 영향을 받는 서비스를 매일 재배포하도록 예약하여 임시 해결 방법을 구현했습니다. 이 접근 방식을 통해 근본 원인에 대한 철저한 조사가 수행되는 동안 시스템이 다시 기능을 발휘할 수 있었습니다.
수정 항목
- 준비된 진술 조사: 자세한 조사를 수행하여 준비된 문이 제대로 닫히지 않거나 할당이 해제되지 않는 이유를 파악하고 수정 프로그램을 구현하세요.
- 모니터링 및 알림 구현: 준비된 문의 수가 한도에 도달할 때 이를 감지하는 모니터와 알림을 개발하고 구현합니다.
- 오류 모니터 임계값 검토: 오류 모니터링 임계값을 검토하고 조정하여 향후 유사한 문제를 적시에 감지할 수 있도록 하세요.
- 재발 방지: 문제가 다시 발생하지 않도록 영구 수정 사항이 구현될 때까지 서비스를 매일 재배포하도록 예약하세요.
- 리소스 배정 증가: 더 높은 로드를 처리하기 위해 US1 Tymeapp TymeShift 프로덕션 인스턴스의 CPU 및 메모리 할당을 늘립니다.
예방 조치
향후 유사한 사건을 방지하기 위해 다음과 같은 조치를 취할 것입니다.
- 코드 검토 기능을 강화하여 준비된 문을 적절하게 관리하세요.
- 서비스 중단으로 이어지기 전에 잠재적인 문제를 감지하여 팀에 경고할 수 있는 강력한 모니터링 시스템을 구현하세요.
- 데이터베이스 성능 및 리소스 활용도에 대한 정기적인 감사를 실시합니다.
자세한 정보
Zendesk에 대한 현재 시스템 상태 정보와 계정에 미치는 구체적인 영향은시스템 상태 페이지를 참조하세요. 이 문서에 따라 사후 보고서가 게시될 때 알림을 받을 수 있습니다. 이 인시던트에 대한 추가 질문이있으면 Zendesk 고객 지원팀에 문의하세요.
번역 고지 사항: 본 문서는 콘텐츠에 대한 기본적인 이해를 제공하기 위해 자동 번역 소프트웨어를 사용하여 번역되었습니다. 정확한 번역을 제공하고자 합당한 노력을 기울였으나 Zendesk는 번역의 정확성을 보장하지 않습니다.
번역된 문서에 포함된 정보의 정확성과 관련하여 질문이 있으시면 문서의 공식 버전인 영문 버전을 참조하시기 바랍니다.
댓글 0개