AWS
AWS 환경에서 일어나는 장애 문제 339개를 모았습니다.
먼저 읽을 가이드
추천 문제
모든 문제 339개
CICD-053OCI Helm 차트 게시는 성공하는데 클러스터가 계속 직전 차트를 pull레지스트리는 새 chart artifact를 받는데 배포 job이 계속 이전 digest로 해석합니다 — chart 참조와 버전 올림이 함께 갱신되지 않았습니다.CI/CD중급20분ProCICD-055패키지 저장소가 바뀐 뒤에도 CodeBuild 로컬 캐시가 오래된 base 레이어를 재사용빌드 시간은 좋아 보이는데 만들어진 이미지가 조용히 더 오래된 패키지 baseline을 지닙니다 — 저장소 쪽 base 이미지 갱신에도 로컬 Docker 레이어 캐시가 살아남습니다.CI/CD중급21분ProCICD-667프리뷰 environment가 운영 기본값의 기능 플래그를 써서, 운영 롤아웃이 그 경로를 켤 때까지 빠진 secret 하나를 숨김 (권한 모델 평탄화 후)위험한 경로가 거기서는 활성화된 적이 없어서 하위 환경이 깨끗해 보였을 뿐입니다. 명목상 권한은 맞아 보이는데 위임되거나 상속된 경로 하나가 계속 이전 계층을 반영합니다.CI/CD중급21분ProK8S-1210노드 변경 후 CoreDNS가 계속 degraded자체 관리 worker 풀을 새로 추가했는데, 관리형 풀은 정상으로 보이면서 CoreDNS가 계속 degraded입니다.Kubernetes중급22분ProCICD-726프리뷰 environment가 운영 기본값의 기능 플래그를 써서, 운영 롤아웃이 그 경로를 켤 때까지 빠진 secret 하나를 숨김 (무캐시 복구 훈련 중)위험한 경로가 거기서는 활성화된 적이 없어서 하위 환경이 깨끗해 보였을 뿐입니다. 캐시된 세션도, 예열된 연결도, 물려받은 신뢰 상태도 없이 복구해야 할 때까지 문제가 숨어 있었습니다.CI/CD중급23분ProCICD-1579Spinnaker webhook 스테이지가 새 엔드포인트를 가리키는데 리전 하나가 계속 옛 host를 호출엔드포인트를 이전한 뒤에도 webhook 단계 하나가 계속 옛 host를 호출합니다.CI/CD중급8분ProCICD-1609Spinnaker 아티팩트 계정 수정이 반영됐는데 파이프라인 하나가 계속 옛 객체를 배포계정을 정리한 뒤에도 Spinnaker 파이프라인 하나가 계속 옛 객체를 배포합니다.CI/CD중급8분ProCICD-1599Spinnaker 아티팩트 바인딩을 고쳤는데 파이프라인 하나가 계속 옛 패키지를 배포아티팩트 계정을 정리한 뒤에도 Spinnaker 파이프라인 하나가 계속 옛 패키지를 배포합니다.CI/CD중급8분ProCICD-1569Spinnaker bake가 올바른 manifest를 게시하는데 리전 하나가 계속 옛 base 이미지를 배포bake 자체는 맞는데 리전 하나가 옛 base 이미지를 배포합니다.CI/CD중급9분ProCICD-1470릴리스 봇은 아티팩트가 최신이라 표시하는데 사용자가 계속 직전 빌드를 내려받음chatops상으로는 릴리스가 끝났는데 일부 다운로드가 계속 옛 객체로 해석됩니다.CI/CD중급10분ProCICD-1480릴리스 자동화 봇이 장애를 종료했는데 사용자가 계속 옛 바이너리를 받음대부분의 사용자는 새 릴리스를 즉시 받는데 아키텍처 하나만 계속 직전 바이너리를 내려받습니다.CI/CD중급10분ProCICD-1335CodeBuild에서 하는 Helm 배포가 프로젝트 하나에서만 AWS 인증을 잃음사설 CodeBuild 환경을 VPC 엔드포인트로 강화한 뒤 배포 작업 하나만 빌드 컨테이너 안에서 AWS 인증에 실패하기 시작합니다.CI/CD중급14분ProK8S-1288HPA가 CPU는 제대로 보는데도 끝내 스케일하지 않음애플리케이션 차트를 리팩터했고 CPU 급증도 보이는데 HPA가 오류 없이 유휴로 보입니다.Kubernetes중급14분ProK8S-1300sidecar 로그 shipper가 조용히 줄을 버림로깅 변경이 반영된 뒤 워크로드 하나가 rotation마다 첫 줄이나 마지막 줄을 잃기 시작합니다.Kubernetes중급14분ProK8S-1294커스텀 메트릭 HPA가 값은 잘 읽는데 결코 스케일하지 않음워크로드를 네임스페이스 간에 이전했는데, 메트릭 백엔드는 정상인데도 오토스케일링이 멈춘 것처럼 보입니다.Kubernetes중급14분ProCICD-159릴리스 파이프라인이 두 environment에 같은 아티팩트 이름을 재사용해, 스테이징 패키지가 공유 저장소의 운영 준비 빌드를 덮어씀객체는 다 있는데 이름 충돌 하나가 환경 경계를 스토리지 경합으로 바꿉니다.CI/CD중급16분ProCICD-174다중 아키텍처 승격 파이프라인이 플랫폼 manifest 하나만 검증 (failover 리허설 중)태그도 있고 worker 풀 하나는 성공하는데 다른 아키텍처가 승격된 artifact를 온전히 받지 못합니다. failover 리허설에서 standby나 대체 경로가 활성화되기 전까지는 평상시 트래픽이 문제를 감췄습니다.CI/CD중급17분ProCICD-143배포 작업이 이미지 복제를 기다리는데 타임아웃 전에 amd64 manifest만 도착해 혼합 아키텍처 클러스터가 점진적으로 실패릴리스 게이트는 성공 조건 하나만 확인하는데 fleet에는 워크플로가 지금 검증하는 것보다 넓은 복제 계약이 필요합니다.CI/CD중급17분ProCICD-1678재사용 워크플로가 중앙에서 토큰 권한을 넓혔는데 호출자 하나가 계속 좁은 scope로 배포재사용 배포 워크플로를 고쳤는데 저장소 하나가 계속 클라우드 role을 assume하지 못합니다.CI/CD중급11분Pro