Системы редко ломаются резко.
Системы редко ломаются резко.
Чаще они уже изменяются.
Это становится видно позже.
Observability
Снаружи всё выглядит нормально.
Сервисы отвечают.
Метрики зелёные.
Изменения проходят.
Внутри система уже смещена.
Мониторинг фиксирует состояние.
Поведение системы проявляется в другой динамике.
Очереди, зависимости, кеширование, сети —
формируют другой слой реальности.
Этот слой расходится с метриками.
Один сервис считает, что всё в норме.
Другой — компенсирует отклонения.
Третий — фиксирует наступление новой нормы.
Одновременно.
Без синхронизации.
Это и есть границы системы.
OLA
Инциденты проявляются как последствия решений.
Что-то отключили.
Что-то упростили.
Что-то оставили временно.
Потом это временное закрепляется.
Без возврата к исходному состоянию.
Есть слой, который обычно остаётся скрытым.
Рутина.
Перезапуски.
Ручные действия.
Компенсации того, что не автоматизировано.
Это нормальный режим эксплуатации изменённой системы.
Система дрейфует в новое состояние.
Через границы.
Через последствия изменений.
Становится видно:
Система стабильна потому, что живёт в постоянных изменениях