Резюме на инцидент с миграция на база данни

Резюме на инцидента

На 03.08.2021 г. в 14:35 ч. PST, един от нашите инженери извърши некоректна миграция на база данни, която доведе до несъответствия между индексираните данни и източника на истина в базата данни. Това засегна 39 потребители, като ние възстановихме данните и разрешихме проблема в 16:46 ч. PST.

Въздействие

Засегнатите 39 потребители може да са загубили данни, добавени между 03.08.2021 г. 14:35 ч. PST и 16:46 ч. PST. Възстановихме данните, но не можем да гарантираме 100% възстановяване.

Основна причина

Основната причина е нашата нова миграция на база данни за реорганизация на файловата структура и подготовка за интеграция с Dropbox. За съжаление, подценихме броя на потребителите, които посещават тази услуга по време на внедряването.

Извлечени поуки

Следващия път в подобни ситуации ще:

1. Да бъдем по-внимателни при миграцията на база данни. Да сме наясно, че има вмъквания на данни по време на миграцията.
2. Да настроим сайта в режим на поддръжка, когато трябва да спрем целия трафик и състезателните условия.