O incidente aconteceu porque ficamos sem acesso a um dos nossos repositórios de dados por volta de 23:30.

Rapidamente identificamos que se tratava de um problema de infraestrutura e não do comportamento lógico do sistema.

Temos vários repositórios diferentes para cada um dos serviços, e estamos guardando eles em dois datacenters diferentes, um dos datacenters teve um problema grave que o deixou indisponível causando a queda do no nosso serviço.

Trabalhamos passando diagnósticos dos nossos logs e monitoramentos para ajudar o datacenter a diagnosticar e restabelecer o serviço deles e consequentemente o nosso. Os serviços voltaram a operar normalmente por volta de 2:25.

Para diminuir a chance desse problema ocorrer já iniciamos a mudança de local desses repositórios que foram afetados e estamos levando eles para centralizar esse tipo de serviço no mesmo datacenter. Esse processo começou hoje e deve ser concluído até o dia 12/09.