SCR-OPS/06
Operaciones / Estado en vivo
Estado en vivo de ScreenLast Cloud, el render gestionado y la entrega – más 90 días de histórico.
Publicamos un post-mortem completo de cada incidente de más de 15 minutos.
Una avalancha de workflows lanzados por releases saturó el pool de render de la UE. El autoescalado añadió capacidad en 12 minutos y los trabajos en cola se completaron sin pérdida de datos. Desde entonces hemos subido la capacidad mínima preaprovisionada para las tardes entre semana.
RESUELTOUn rolling deploy de la web app retiró instancias sanas más rápido de lo que las nuevas superaban los health checks. El deploy se detuvo y se revirtió. Ahora el ritmo de despliegue espera a que las cachés estén calientes antes de rotar instancias.
RESUELTONuestro proveedor de voz tuvo una caída regional. Los trabajos se encolaron en lugar de fallar y se procesaron automáticamente tras la recuperación. Hemos añadido una segunda región como fallback automático para las peticiones de síntesis.
RESUELTO