Заказчик снёс реплику ради $200. База легла, собирали трое суток

Был у меня проект, где заказчик решил максимально сэкономить и втихую подрезал бюджет на инфраструктуру. Мы настроили нормальный кластер с репликацией базы, а он посмотрел на счета и решил, что это лишние траты.

В итоге он сам зашел в консоль облака и снес якобы лишнюю реплику. Оставил базу на одном единственном инстансе. Заодно и автоматические бэкапы отключил, мол, мы и так раз в неделю руками сохраняем. Сэкономил баксов двести в месяц.

Через неделю у провайдера случается какой-то технический затык. У всех, кто сидел с репликами в разных зонах, все переключилось автоматически и незаметно.

А наш одиночный инстанс просто не поднялся. Диск посыпался при перезагрузке.

Этот экономист звонил мне в субботу вечером чуть ли не в слезах, потому что проект лежит, заказы не идут, а восстанавливать не из чего. Мы трое суток всей командой по кускам собирали базу из каких-то старых дампов и логов транзакций, которые чудом не затерлись.

Стоимость наших овертаймов в те выходные в десять раз превысила ту экономию, которую он выгадал. Зато больше он со мной вообще ни на одну тему не спорил.