인시던트
장애 현황, MTTR, 서비스 가용성
2026년 10월 31일 기준모의 데이터
진행 중 인시던트
2건
INC-241 (S1) · INC-240 (S2)
이번 달 MTTR
1시간 47분
-50분지난달 2시간 37분
90일 인시던트
14건
S1 2 · S2 4 · S3 5 · S4 3
평균 가용성
99.85%
90일 · 8개 핵심 서비스
온콜
SRE 주간 로테이션 (월 10:00 교대)
한
1차 대응
한재현
보안 · 보안 엔지니어
한
2차 대응
한수아
SRE · SRE
S1
2
전면 장애
S2
4
주요 기능 저하
S3
5
부분 영향
S4
3
경미
월별 MTTR
평균 해결 시간 (분) · 최근 6개월
5월 4건6월 3건7월 5건8월 3건9월 3건10월 7건
서비스 가용성
최근 90일 · 목표 99.9%
- gitlab-web99.94%
- gitlab-gitaly99.98%
- ci-runners99.71%
- gitlab-registry99.90%
- auth-service99.88%
- payment-service99.62%
- order-service99.85%
- search-indexer99.93%
막대는 99.0% ~ 100% 구간을 확대해 표시합니다.
인시던트 타임라인
최근 90일 · 14건
| 인시던트 | 심각도 | 상태 | 서비스 | 시작 | 소요 | 담당 |
|---|---|---|---|---|---|---|
INC-241결제 승인 API 5xx 급증 영향: 결제 요청의 약 12% 실패 | S1 | 완화됨 | payment-service | 10월 31일 08:41 | 1시간 31분 경과 | 강 강현우 |
INC-240Gitaly 데이터 볼륨 사용률 91% 영향: 대용량 푸시 지연 가능 | S2 | 진행 중 | gitlab-gitaly | 10월 30일 23:10 | 11시간 2분 경과 | 한 한수아 |
INC-239러너 풀 고갈로 파이프라인 대기 증가 영향: 평균 대기 시간 38초 → 11분 · 원인: k8s-autoscale-b 노드 그룹 상한 도달 | S3 | 해결 | ci-runners | 10월 29일 14:02 | 1시간 35분 | 한 한재현 |
INC-238SSO 로그인 간헐 실패 영향: 로그인 시도의 7% 실패 · 원인: IdP 인증서 갱신 후 캐시 미갱신 | S2 | 해결 | auth-service | 10월 27일 09:12 | 53분 | 신 신승우 |
INC-237컨테이너 레지스트리 GC 지연 영향: 스토리지 회수 지연 · 원인: GC 잡 타임아웃 설정 과소 | S4 | 해결 | gitlab-registry | 10월 24일 02:00 | 4시간 20분 | 권 권지호 |
INC-236주문 DB 커넥션 풀 포화 영향: 주문 생성 전면 실패 43분 · 원인: 배치 잡이 트랜잭션을 장시간 점유 | S1 | 해결 | order-service | 10월 19일 11:48 | 43분 | 강 강현우 |
INC-235CDN 캐시 무효화 실패 영향: 구버전 페이지 노출 · 원인: API 토큰 만료 | S3 | 해결 | marketing-site | 10월 15일 16:20 | 42분 | 한 한수아 |
INC-234검색 인덱서 2시간 지연 영향: 신규 상품 검색 노출 지연 · 원인: Kafka 파티션 리밸런싱 반복 | S3 | 해결 | search-indexer | 10월 11일 07:30 | 2시간 40분 | 한 한재현 |
INC-233GitLab 웹 응답 지연 (p95 4초) 영향: MR 페이지 로딩 지연 · 원인: Sidekiq 큐 적체로 DB 부하 증가 | S2 | 해결 | gitlab-web | 10월 6일 13:05 | 1시간 35분 | 권 권지호 |
INC-232알림 워커 메시지 중복 발송 영향: 일부 사용자에게 푸시 2회 발송 · 원인: 재시도 멱등키 누락 | S4 | 해결 | notification-worker | 9월 28일 19:00 | 50분 | 신 신승우 |
INC-231iOS 빌드 러너 전원 오프라인 영향: iOS 릴리스 빌드 중단 · 원인: macOS 업데이트 후 러너 서비스 미기동 | S3 | 해결 | ci-runners | 9월 22일 09:00 | 4시간 15분 | 한 한재현 |
INC-230결제 정산 배치 실패 영향: 전일 정산 리포트 지연 · 원인: PG 응답 포맷 변경 | S2 | 해결 | payment-service | 9월 14일 03:00 | 2시간 45분 | 강 강현우 |
INC-229오브젝트 스토리지 429 응답 영향: 아티팩트 업로드 간헐 실패 · 원인: 버킷 요청 한도 초과 | S3 | 해결 | gitlab-artifacts | 8월 30일 10:20 | 40분 | 한 한수아 |
INC-228피처 스토어 서빙 지연 영향: 추천 응답 p95 증가 · 원인: Redis 메모리 정책 변경 | S4 | 해결 | feature-store | 8월 18일 15:10 | 38분 | 신 신승우 |