[Observability] SLI / SLO / SLA / Error Budget

SLI, SLO, SLA, Error Budget, SRE, Service Level Indicator, Service Level Objective, Service Level Agreement

정의

	의미
SLI (Indicator)	측정 값 (예: 5xx 비율)
SLO (Objective)	목표 (예: 99.9% 가용성)
SLA (Agreement)	계약 (위반 시 환불 / 페널티)
Error Budget	허용 가능한 실패 양

관계

flowchart LR
    SLI["SLI 측정<br/>#quot;5xx rate = 0.02%#quot;"]
    SLO["SLO 목표<br/>#quot;5xx < 0.1%#quot;"]
    SLA["SLA 계약<br/>#quot;가용성 99.9%, 미만 시 10% 환불#quot;"]
    EB["Error Budget<br/>#quot;30일 중 43분 다운 OK#quot;"]
    SLI --> Compare{비교}
    SLO --> Compare
    Compare --> EB

좋은 SLI 4 카테고리

카테고리	예시
Availability	성공 응답 비율
Latency	p95, p99 응답 시간
Throughput	처리량 (req/s)
Correctness	비율로 측정 가능한 정확성

Google SRE: user-facing 측면 → 서버 CPU 같은 내부 metric 보다 사용자 경험.

SLO 설정 예시

가용성 SLI = 성공_응답 / 총_응답
SLO = 30일 중 99.9% 이상

→ Error Budget = 30일 × 24h × 60min × (1 - 0.999)
              = 43.2 분 / 월

flowchart LR
    Time[30일 = 43200분]
    Budget[Error Budget: 43.2분]
    Time --> Bar
    Budget --> Bar
    Bar["사용한 ERROR: ▓▓▓░░░░░░░ 12분 / 43.2분 (28%)"]

Error Budget Policy

flowchart TD
    Q{Budget 소진}
    Q -->|0-50%| Normal[정상 운영 + 빠른 개발]
    Q -->|50-90%| Caution[변경 주의 + 위험 평가]
    Q -->|90-100%| Freeze[*새 feature 동결*<br/>reliability 작업만]
    Q -->|100% 초과| Stop[모든 risky 변경 중단]

Error budget 의 행동 contract. 단순 메트릭이 아닌 조직 정책.

SLO 계산 (PromQL)

# 30일 가용성
sum_over_time(
  (sum(rate(http_requests_total{status!~"5.."}[1m]))
    / sum(rate(http_requests_total[1m])))[30d:1m]
)
/ count_over_time((sum(rate(http_requests_total[1m])))[30d:1m])

# Budget 남은 %
1 - (
  (1 - currentAvailability) / (1 - SLO_target)
)

SLA 예시 (실제 SaaS)

SaaS	SLA
AWS S3	99.99% (월) - 미만 시 service credit
GitHub	99.9% (분기)
Stripe	99.999% (페이먼트)

내부 SLO 는 SLA 보다 더 엄격 하게 (margin).

Burn Rate Alert

flowchart LR
    Fast[빠른 소진: 1시간 5% 소진 → 즉시 page]
    Slow[느린 소진: 6시간 10% 소진 → ticket]

# fast burn (1h 의 budget 소진 속도가 14.4x)
(
  sum(rate(http_5xx[1h])) / sum(rate(http_total[1h]))
) > (14.4 * 0.001)   # SLO = 0.999 → error = 0.001

단순 threshold alert 보다 budget 소진 속도 가 의미.

흔한 함정

관련 위키

• prometheus
• opentelemetry
• aws-cloudwatch
• circuit-breaker