QuorumWiki
Jugar

Push de configuración defectuoso

Un cambio de configuración llegó a todos los Servidores de aplicaciones y Workers a la vez, y se cayeron juntos. GitOps todo a la vez lo llevó también a todos los Espejos.

Qué ocurre#

Un cambio de configuración llegó a todos los Servidores de aplicaciones y Workers a la vez, y se cayeron juntos. GitOps todo a la vez lo llevó también a todos los Espejos.

Visto en producción#

Roblox perdió 73 horas por un cambio en el plano de control en 2021. Un plano de control, 73 horas: Roblox muestra la forma y dice dónde se detiene el juego.

Cómo evitarlo#

Revierte para acabar. GitOps por etapas mantiene un cambio primero en una región.

El postmortem abre la primera de estas que aún no tengas:

  1. GitOps

Componentes a los que afecta#

Servidor de aplicaciones, Worker

Términos de ingeniería#