Пайплайн, который падал по пятницам: детективная история
У нас был пайплайн, который падал только по пятницам. Ни в понедельник, ни в среду — стабильно в пятницу вечером. Команда уже шутила про проклятие, а я открыл логи и начал с простого: что общего у всех падений.
Оказалось, в пятницу вечером выгружался недельный отчёт, и данные приходили с дублями. Словарь ключей раздувался, память росла, и задача умирала. Проклятие было расписанием.
Мы починили дедупликацией и ретраями, но урок остался: система не суеверна, она последовательна. Если что-то падает по расписанию, ищи расписание, а не виноватых.
Вернуться ко всем постам
Комментарии 0
Будьте первым, кто оставит комментарий!