Riepilogo
Il 3 dicembre 2023, dalle 09:31 alle 10:46 UTC, alcuni clienti Support nel Pod 28 hanno riscontrato un problema relativo all’account che impediva l’accesso e causava errori del server durante l’uso del prodotto. Questo problema è stato risolto.
Ci scusiamo per la mancanza di comunicazione durante e dopo questo problema. Stiamo esaminando le soluzioni per l’interruzione del processo interno che ha impedito al nostro team di comunicazione di essere chiamato ad aggiornare i nostri clienti mentre questo problema era presente. Stiamo anche lavorando per fornire un post mortem del problema che verrà completato e pubblicato qui una volta che i nostri team avranno organizzato una retrospettiva per questo problema di servizio.
Grazie per la pazienza dimostrata durante questo problema e ci scusiamo ancora per l’errore di comunicazione.
POST-MORTEM
Analisi della causa principale
In una finestra di 15 minuti, la nostra funzione di memorizzazione nella cache del database non era raggiungibile per uno dei nostri servizi di backend cruciali, a causa di un difetto sfuggito in una distribuzione di codice che non gestiva uno scenario di timeout di questo tipo. Ciò ha portato a un accumulo di backlog nella coda dei messaggi, con la conseguente presentazione di 503 errori ai clienti.
Soluzione
Una volta che la cache del database è tornata disponibile, l’elaborazione del backlog del servizio è ripresa prontamente e abbiamo iniziato a notare segni di ripristino.
Elementi correttivi
- Aggiunta di un test case specifico rispetto alla logica di timeout di memorizzazione nella cache [Pianificato]
- Aggiunta di un avviso di monitoraggio per notificare quando la funzione di memorizzazione nella cache non è disponibile [Pianificata]
PER MAGGIORI INFORMAZIONI
Per informazioni sullo stato attuale del sistema su Zendesk, consulta il nostro pagina di stato del sistema. Di solito, il riepilogo della nostra indagine post mortem viene pubblicato qui pochi giorni dopo la fine dell’incidente. Per ulteriori domande su questo incidente, registra un ticket con noi tramite la messaggistica ZBot nel Widget.
Avvertenza sulla traduzione: questo articolo è stato tradotto usando un software di traduzione automatizzata per fornire una comprensione di base del contenuto. È stato fatto tutto il possibile per fornire una traduzione accurata, tuttavia Zendesk non garantisce l'accuratezza della traduzione.
Per qualsiasi dubbio sull'accuratezza delle informazioni contenute nell'articolo tradotto, fai riferimento alla versione inglese dell'articolo come versione ufficiale.
0 commenti