새 버전 배포 7분 뒤 결제 API 5xx가 18%로 치솟았습니다. 온콜 SRE로서 결제 실패를 멈추고 원인을 밝혀 해결까지 이끄세요.
장애 시뮬레이션
알람이 울린 순간부터 복구와 회고까지, 가상 시계 위에서 직접 판단하며 진행합니다. 서술형 문제가 "원인을 아는가"를 묻는다면, 시뮬레이션은 "실제 상황에서 무엇을, 어떤 순서로, 얼마나 안전하게 하는가"를 훈련합니다.
- 선택지로 행동명령을 외우는 시험이 아니라 판단 훈련입니다. 관찰·조치·소통 중에서 고릅니다.
- 행동할 때만 흐르는 시계읽고 생각하는 시간은 공짜, 행동마다 가상 시간이 들고 시스템은 그 사이에 변합니다.
- 끝나면 디브리프진단·완화·안전·확인·소통 점수와 모범 경로 비교, 원인 해설, 회고 과제까지.
Kubernetes입문무료 체험
배포 직후 결제 API 5xx 급증
CrashLoopBackOff 원인 좁히기GitOps(Argo CD) 환경의 롤백완화 먼저, 근본 수정은 그다음인시던트 선언과 공유
약 15분 · 알람이 울린 순간부터
Linux중급로그인하면 무료
새벽 3시, 주문 DB 쓰기 실패
새벽 3시, 주문 생성과 결제 확정만 실패하기 시작했습니다. 조회는 멀쩡합니다. 주문 DB 서버에서 무슨 일이 벌어졌는지 찾아, 데이터를 잃지 않고 쓰기를 되살리세요.
df와 du가 다를 때지웠는데 공간이 안 돌아오는 파일(lsof +L1)안전한 공간 확보 순서PostgreSQL 로그 설정
로그인하면 무료로 할 수 있습니다
Network중급로그인하면 무료
DB가 잠깐 느려진 뒤 멈추지 않는 주문 장애
금요일 저녁 세일 중 주문 DB가 4분간 느려졌다가 돌아왔습니다. 그런데 주문 실패는 멈추지 않고 오히려 늘어납니다. 무엇이 장애를 붙잡고 있는지 찾아 끊어 내세요.
원인이 사라진 뒤에도 계속되는 장애(재시도 폭풍) 읽기커넥션 풀 × 파드 수 vs DB 연결 한도트래픽 3배를 공격으로 오인하지 않기폭풍을 먼저 멈추고 고친 버전은 그다음
로그인하면 무료로 할 수 있습니다
Security중급Pro
인증서 교체 후 일부 클라이언트만 실패
만료가 다가온 인증서를 교체한 지 18분. 웹사이트는 멀쩡한데 안드로이드 앱과 파트너사 서버 연동만 연결에 실패합니다. 브라우저 자물쇠는 정상입니다 — 무엇이 다른 걸까요?
서버가 실제로 보내는 인증서 체인 확인(openssl s_client)클라이언트별로 영향 범위 나누기fullchain 구성 순서nginx -t와 한 대씩 반영하는 안전한 재배포
Pro에서 할 수 있습니다
CI/CD중급Pro
배포는 초록인데 사용자는 옛 화면
새 결제 화면을 담은 v3.8.0 배포 파이프라인은 초록불로 끝났습니다. 그런데 사용자 대부분은 옛 화면을 보고, 일부는 하얀 빈 화면을 봅니다. 17:00에는 이 화면으로 추석 특가 알림이 나갑니다.
캐시 계층별로 버전 확인하기(CDN·원 서버·노드)가변 태그(latest)와 imagePullPolicy무효화는 좁게, 버전은 고정해서배포 '성공'과 '의도한 버전이 나감'의 차이
Pro에서 할 수 있습니다
Network고급Pro
DNS 이전 후 한 리전만 장애
어젯밤 API 도메인을 새 로드밸런서로 옮겼고, 오늘 09:00 옛 로드밸런서를 껐습니다. 그 뒤로 동남아 사용자 절반만 접속하지 못합니다. 다른 리전은 멀쩡하고, 새 로드밸런서도 건강합니다.
TTL은 '다음 캐시'부터 적용된다리졸버별로 전환 상태 확인하기되돌리기가 다른 리전을 깨뜨리는 경우예약된 변경 작업부터 멈추기
Pro에서 할 수 있습니다
Security중급Pro
주말 아침, 클라우드 요금이 시간당 490달러로
토요일 아침 요금 경보가 울렸습니다. 지난 7시간 EC2 요금이 4,300달러, 평소 하루 40달러인 계정입니다. 누가 어떻게 들어왔는지 찾아 막고, 다시 들어오지 못하게 하세요.
유출된 액세스 키 대응 순서(자격 증명 차단 → 자원 정리)평소 쓰지 않는 리전까지 확인CloudTrail로 공격자가 남긴 백도어 찾기장기 키 대신 OIDC 임시 자격 증명
Pro에서 할 수 있습니다