Джун нашёл зависший сервис через нейронку. Инструкцию обновили
На прошлой неделе ночью упал сервис уведомлений. Дежурил джун, первый раз в жизни.
Сделал он все правильно. Сперва открыл инструкцию по инцидентам. Там написано зайти по ssh на такой-то сервер и перезапустить сервис. Только сервера этого нет уже год. Мы переехали в кубер, а инструкцию, понятно, никто не обновил. Ну как никто. Я не обновил.
По эскалации он попробовал позвонить мне. Я спал, телефон на беззвучке.
Дальше, с его слов, он спросил у нейронки, где теперь может жить сервис, если сервера больше нет. Нашел его в кубере, увидел, что под завис и не отвечает, и перезапустил. Сервис поднялся. На все ушло минут 40.
Утром открываю чат инцидента, а там штук 30 сообщений: каждый шаг расписан, включая «спросил у нейронки, она говорит так».
Инструкцию в тот же день переписали вместе с ним. За смекалочку я подогнал ему игру в стиме из его списка желаемого. Своим стимдеком он и так всем на обедах уши прожужжал. Вроде он доволен.