요약
2025년 7월 27일 08:30(UTC)부터 2025년 8월 8일 06:25(UTC) 사이에 Zendesk 영업(Sell) 서비스에 영향을 미치는 성능 저하에 관한 48건의 고객 보고서를 받았습니다. 조사 결과 “Persimmon” 사용자 계정에서 비정상적으로 많은 양의 약속 메시지가 생성되어 서비스 성능이 크게 저하된 것으로 확인되었습니다.
타임라인
2025년 7월 31일 17:50(UTC) | 2025년 7월 31일 10:50(태평양 표준시)
모든 POD에서 Zendesk 영업(Sell)을 사용하는 고객의 성능 문제를 조사하고 있습니다. 영향에는 통화 실패, 성능 저하, 가져오기/내보내기 관련 문제가 포함됩니다. Zendesk 엔지니어들이 리소스를 추가하고 있으며 상황을 계속 조사하고 모니터링하고 있습니다.
2025년 7월 31일 6:51(UTC) | 2025년 7월 31일 11:51(태평양 표준시)
Zendesk Sales 음성 및 라이브 데이터 서비스의 문제가 이제 해결되었습니다. Zendesk 영업팀의 다른 서비스와 관련된 성능 문제를 계속 해결하고 있습니다. 일부 검색은 최근에 만든 항목을 리턴하지 않을 수 있습니다. 이 데이터가 처리되면 업데이트하겠습니다.
2025년 8월 4일 15:30(UTC) | 2025년 8월 4일 오전 8:30(태평양 표준시)
Zendesk 엔지니어링 팀은 Zendesk Sell 서비스에 영향을 미치는 최근 성능 저하 문제를 해결하기 위해 대상 업데이트를 배포했습니다. 이 수정 사항은 현재 라이브 상태이며 면밀한 모니터링을 받고 있습니다. Zendesk Sell 에서 성능 문제가 계속 발생하는 경우에는 즉시 문의해 주세요.즉시 지원을 제공할 수 있도록 하세요.관심과 이해에 감사드립니다.
2025년 8월 5일 12:55 UTC | 2025년 8월 5일 오전 5시 55분(태평양 표준시)
Zendesk Sell 영향을 미치는 최근 성능 저하에 대한 수정 사항을 배포한 후에도 Zendesk 엔지니어들이 시스템 활동을 면밀히 모니터링하고 있습니다. 문제가 해결되었는지 여부에 대한 피드백을 주셔서 감사합니다. 고객님의 의견을 통해 더욱 효과적으로 도움을 드릴 수 있습니다. 협조해 주셔서 감사합니다.
2025년 8월 6일 15:39 UTC | 2025년 8월 6일 오전 8:39(태평양 표준시)
저희 엔지니어들이 Zendesk 영업 제품과 관련된 성능 문제를 해결하기 위해 계속 노력하면서 부정확하거나 “오래된” 리포팅 데이터와 관련된 문제에 기여한 레코드의 백로그 처리를 완료했습니다. 보고에 더 이상 문제가 없는 것으로 확인되었으며 완전한 복구를 보장하기 위해 계속 모니터링합니다. 라이브 데이터나 기록 데이터 정확성 및 제품 기능에 문제가 계속 발생하면 알려주세요.
2025년 8월 8일 06:06(UTC) | 2025년 8월 7일 오후 11:06(태평양 표준시)
Zendesk 영업(Sell)의 성능 문제가 해결되었음을 알려드리게 되어 기쁩니다. 이 문제를 해결하는 동안 기다려 주셔서 감사합니다.
근본 원인 분석
이 인시던트의 근본 원인은 “Persimmon” 사용자 계정에서 생성된 비정상적으로 많은 양의 약속 메시지로 확인되어 서비스 성능이 크게 저하되었습니다.
해결
이 문제를 해결하기 위해 엔지니어들은 메시지를 래빗MQ 중개인에게 전송하고 영향을 받는 사용자 계정에서 보낸 거의 170,000개의 “약속” 메시지를 지웠습니다.
수정 항목
- 모든 RMQ 관련 알림을 다시 살펴보고 다시 시작, 비정상 종료, 오류율 증가 및 대기열당 디스크 관련 메트릭을 포함한 포괄적인 적용 범위를 보장합니다. 알림 임계값을 확인하고 그에 따라 플레이북 링크를 업데이트합니다.
- 래빗QOS 서비스에 대한 구체적인 절차와 위반자 처리를 위한 가이드라인을 포함하여 RMQ(RabbitMQ) 인시던트에 대한 플레이북을 업데이트하고 개선합니다.
- Sell-hoarder 서비스와 같이 인시던트 동안 업스케일링된 서비스를 검토합니다. 리소스 제한을 수정 및 업데이트하고, 수평형 Pod 자동 확장(HPA) 구현 또는 조정을 고려하고, 필요에 따라 기존 리소스 요청을 조정합니다.
- 중개인 삭제 및 기타 필요한 정리 작업을 수행합니다. Sell-appointment 서비스에서 발생하는 페이로드 문제를 수정하여 시스템 안정성을 개선할 가능성을 조사합니다.
자세한 정보
Zendesk에 대한 현재 시스템 상태 정보와 계정에 미치는 구체적인 영향은시스템 상태 페이지를참조하세요. 이 문서에 따라 사후 보고서가 게시될 때 알림을 받을 수 있습니다. 이 인시던트에 대한 추가 질문이 있는 경우Zendesk 고객 지원팀에 문의하세요.
번역 고지 사항: 본 문서는 콘텐츠에 대한 기본적인 이해를 제공하기 위해 자동 번역 소프트웨어를 사용하여 번역되었습니다. 정확한 번역을 제공하고자 합당한 노력을 기울였으나 Zendesk는 번역의 정확성을 보장하지 않습니다.
번역된 문서에 포함된 정보의 정확성과 관련하여 질문이 있으시면 문서의 공식 버전인 영문 버전을 참조하시기 바랍니다.