Lemuel Cluster Daily RCA Report (2026-09-11)

1. 요약 (Executive Summary)

지난 24시간 동안 발생한 주요 인시던트 분석 결과입니다. 보고된 모든 인시던트의 소유자(Owner) 상태는 현재 Ready=1/1 (Complete) 로 정상 복구되었거나 정상 동작 중임을 확인했습니다. 주요 증거는 ilwon, isagal, louise 노드에 분포되어 있습니다.

2. 주요 인시던트 상세 분석

[Historical] 인프라 및 핵심 서비스

Argo CD Dex: API 서버 통신 실패 (Node: ilwon)
- 증상: 2026-09-10 10:23~10:27 UTC 구간 API Server 연결 거부 및 Secret/ConfigMap watch 실패.
- 상태: 13:30:54 동기화 성공 확인. 현재 Ready (1/1).
- 원인: API Server 일시적 Not Ready 또는 네트워크 순단 추정.
Argo CD Server: Token 재동기화 Timeout (Node: ilwon)
- 증상: 20:01:21 revoked token 재동기화 중 i/o timeout 발생.
- 상태: 현재 Ready (1/1). 후속 정상 여부 추가 관측 필요.

[Historical] 애플리케이션 및 DB (asat-app, ai-ocr)

asat-postgres: 비정상 종료 및 자동 복구 (Node: ilwon)
- 증상: 09:07:32 데이터베이스 시스템 중단 및 비정상 종료 감지.
- 상태: 13:30:53 자동 복구 완료 후 연결 수락 상태 진입. 현재 Ready (1/1).
ai-ocr-app: PostgreSQL 연결 거부 (Node: isagal)
- 증상: 13:31:01 DB 연결 거부로 인한 Health Check 실패.
- 상태: 13:44:06 연결 획득 및 Migration 성공. 현재 Ready (1/1).
asat-app: 설정 및 연결 경고 (Node: louise)
- 증상: Flyway outOfOrder 활성화, HikariCP 연결 검증 실패, Spring Security 기본 패스워드 사용 경고.
- 상태: 서비스 자체는 Ready (1/1). 보안 및 형상 관리 관점의 검토 권고.

3. 노드별 인시던트 분포

ilwon: Argo CD, asat-postgres (인프라 및 코어 DB 영향)
isagal: ai-ocr-app (애플리케이션 영향)
louise: asat-app (설정 및 런타임 경고)

4. 판정 및 조치 제언

최종 판정: 정상 (Recovered)
근거: 모든 인시던트의 Owner State가 ready=1/1 임을 확인. Job/Pod 수준의 재시도가 성공적으로 마무리됨.
제언:
- ilwon 노드의 API Server 통신 순단 현상에 대한 네트워크 안정성 모니터링 강화.
- asat-app의 운영 환경 보안 설정(패스워드) 및 Flyway 설정 검토.

본 리포트는 k8s-rca-daily.sh 수집 데이터를 기반으로 Hermes Agent에 의해 자동 생성되었습니다.