Súhrn incidentu
Dňa 2021-08-03 o 14:35 PST jeden z našich inžinierov vykonal chybnú migráciu databázy, ktorá spôsobila nezrovnalosti medzi indexovanými dátami a zdrojom pravdy v databáze. Postihlo to 39 používateľov a dáta sme doplnili a problém vyriešili o 16:46 PST.
Dopad
Týchto 39 postihnutých používateľov mohlo stratiť dáta pridané medzi 2021-08-03 14:35 PST a 16:46 PST. Dáta sme doplnili, ale nemôžeme zaručiť 100 % obnovu.
Hlavná príčina
Hlavnou príčinou je naša nová migrácia databázy, ktorá mala reorganizovať štruktúru súborov a pripraviť sa na integráciu s Dropboxom. Bohužiaľ, podcenili sme počet používateľov navštevujúcich túto službu počas nasadenia.
Poučenie
Nabudúce v podobných situáciách budeme
- Opatrnejší pri migrácii databázy. Uvedomte si, že počas migrácie dochádza k vkladaniu dát.
- Nastaviť stránku do režimu údržby, keď potrebujeme zastaviť všetku prevádzku a súbežné podmienky.