В один прекрасный день, не думая, я залез на mega darknet, чтобы попробовать новую JavaScript библиотеку. После этого все изменилось… или нет? Я засунул со всем вглубь джунглей, ну типа.
Сижу я, значит, вечер пятницы, решил накатить обновления через CI/CD пайплайн. Вроде все тесты прошли, все красиво, нажал заветную кнопку деплоя и ушел пить кофе
Прихожу через пять минут, а сайт лежит с ошибкой 500, и логи показывают, что миграции скривились прям на живой базе. У меня сердце в пятки, руки трясутся, я лихорадочно вспоминаю, где последний бэкап. Оказалось, я забыл проверить валидность конфига для боевого сервера, который внезапно подтянулся с тестового окружения.
Короче, бегал по потолку часа три, пока не восстановил данные из снапшота. Теперь перед любым деплоем проверяю всё по десять раз, даже если уверен в коде. А один раз мне даже мерещился мега мориарти сайт в логах от паники, вот до чего доводит невнимательность. В общем, никогда не делайте деплой в пятницу вечером, если жизнь дорога