Layer 4 · System Design
Reliability
Надійна система має коректно поводитися не лише коли все працює, а й під час відмов.
Важливо вміти ізолювати проблеми, деградувати контрольовано, відновлюватися після збоїв і перевіряти стійкість системи ще до реальних аварій.
Що важливо знати
- Fault tolerance і redundancy: розуміти, як система може продовжувати роботу при падінні окремих компонентів. Вміти використовувати redundancy, replicas і резервні інстанси, щоб відмова одного вузла не призводила до повної недоступності сервісу.
- Відмови залежностей: розуміти, як поводитися з нестабільними або недоступними downstream-сервісами. Вміти використовувати timeouts, retries, backoff, fallback і circuit breaker так, щоб локальна проблема не перетворювалася на каскадну відмову.
- Health checks і graceful shutdown: знати різницю між liveness і readiness checks і розуміти підходи до виводу інстансу із трафіку.
- Fault isolation: розуміти, як ізолювати проблемні компоненти, щоб збій в одному місці не впливав на всю систему. Знати підходи на кшталт bulkhead isolation і resource separation.
- Load shedding: вміти свідомо відмовляти частині запитів або роботи при перевантаженні, щоб зберегти працездатність системи (контрольована деградація краща за повний collapse).
- Graceful degradation: проєктувати систему так, щоб при недоступності окремих функцій вона продовжувала виконувати основні сценарії.
- Failover і recovery: розуміти, як система переключається на резервні інстанси, replicas або регіони після відмови.
- Backups і disaster recovery: розуміти стратегії backup і restore, RPO і RTO, а також сценарії відновлення після втрати даних, регіону або критичної інфраструктури.
- Chaos engineering: розуміти як тестувати систему, навмисно створюючи контрольовані відмови — падіння інстансів, latency, network partitions або resource exhaustion — щоб перевіряти реальну ситуацію та знаходити слабкі місця до збоїв у production.